valtech - internet of things & big data : un mariage de raison

47
Internet of Things & Big Data

Upload: valtech

Post on 15-Jan-2017

3.074 views

Category:

Technology


0 download

TRANSCRIPT

Page 1: Valtech - Internet of Things & Big Data : un mariage de raison

Internet of Things & Big Data

Page 2: Valtech - Internet of Things & Big Data : un mariage de raison
Page 3: Valtech - Internet of Things & Big Data : un mariage de raison
Page 4: Valtech - Internet of Things & Big Data : un mariage de raison

01.1

En bref

4 23/06/2016 © Valtech valtech_

Page 5: Valtech - Internet of Things & Big Data : un mariage de raison

01.2

Les débuts de l’Internet des objets

5 23/06/2016 © Valtech

(une) Définition :

- réseau de réseaux

- systèmes normalisés et unifiés

- objets physiques

- récupérer, stocker, transférer et

traiter, sans discontinuité entre les

mondes physiques et virtuels

valtech_

1999 - Kevin Ashton

Procter & Gamble

Page 6: Valtech - Internet of Things & Big Data : un mariage de raison

01.3

Que sont les objets connectés?

6 23/06/2016 © Valtech

(une) Définition :

• identité

• autonomie

• sensibilité (capteurs)

• connectivité

• sécurité

valtech_

2000

2005

Nabaztag

LG

Page 7: Valtech - Internet of Things & Big Data : un mariage de raison

01.4

Dans les faits

7 23/06/2016 © Valtech valtech_

Page 8: Valtech - Internet of Things & Big Data : un mariage de raison

01.5

Applications : particuliers

8 23/06/2016 © Valtech valtech_

Page 9: Valtech - Internet of Things & Big Data : un mariage de raison

01.6

9 23/06/2016 © Valtech valtech_

Applications : villes intelligentes

Page 10: Valtech - Internet of Things & Big Data : un mariage de raison

01.7

Applications : industrie / agriculture

10 23/06/2016 © Valtech valtech_

200 Mo/an

163 kg de

Méthane/an

Page 11: Valtech - Internet of Things & Big Data : un mariage de raison

01.8

Secteur professionnel

11 23/06/2016 © Valtech

60% des équipements connectés acquis en 2015 par les entreprises

90% des revenus seront générés par les entreprises et non par les consommateurs.

Les applications et services créent plus de valeur que le hardware

valtech_

Page 12: Valtech - Internet of Things & Big Data : un mariage de raison

01.9

Positionnement des grands acteurs

23/06/2016 © Valtech

Oracle : Java Embedded, Oracle Cloud for IoT (SaaS : big data, analytics…) Microsoft : Azure IoT (Autolib’ Paris) Salesforce (CRM) : analyses d’informations client à partir des wearables « IoT Cloud » IBM : Plateforme PaaS ouverte « IoT Fundation » Amazon : A racheté la plateforme 2lemetry et propose « AWS IoT Platform » OVH : IoT PaaS TimeSeries (issue de leur lab RunAbove)

valtech_

Page 13: Valtech - Internet of Things & Big Data : un mariage de raison

01.10

Consortiums industriels

23/06/2016 © Valtech valtech_

Page 14: Valtech - Internet of Things & Big Data : un mariage de raison
Page 15: Valtech - Internet of Things & Big Data : un mariage de raison

02.1

Chez Valtech

15 23/06/2016 © Valtech

Smart Hydration Bottle

Connected Thermostat

valtech_

Page 16: Valtech - Internet of Things & Big Data : un mariage de raison

02.2

Chez Valtech Toulouse

16 23/06/2016 © Valtech

Audi Connect IoT For A Better Life

valtech_

Page 17: Valtech - Internet of Things & Big Data : un mariage de raison

02.3

17

Valtech Programme Catalyseur numérique

23/06/2016 © Valtech

Idéation

Recherche

(pragmatique)

Am

plit

ude

Évaluation Prototype

Temps

Arrêt

Rencontre avec le

comité de pilotage

Rencontre avec le

comité de pilotage

Nous en sommes là

Page 18: Valtech - Internet of Things & Big Data : un mariage de raison

02.4

IoT For A Better Life

18 23/06/2016 © Valtech

• Smart City

• Citizen empowerment

• Open Data

http://www.iot-for-better-life.com/

• Captation et analyse de sons

• Informations environnementales

Page 19: Valtech - Internet of Things & Big Data : un mariage de raison

02.5

IoT For A Better Life

19 23/06/2016 © Valtech valtech_

Page 20: Valtech - Internet of Things & Big Data : un mariage de raison

02.6

20

Challenges

23/06/2016 © Valtech

• Matériel

• Architecture

• Autonomie

• Connectivité

• Développement

• Volumétrie et traitement de données

• Sécurité / vie privée

valtech_

Page 21: Valtech - Internet of Things & Big Data : un mariage de raison

02.7

Matériel

21 23/06/2016 © Valtech

Capteurs

mini caméras thermiques (Lepton) convertisseur USB / Serial

Composants électroniques

valtech_

Page 22: Valtech - Internet of Things & Big Data : un mariage de raison

02.8

IoT For A Better Life

22 23/06/2016 © Valtech valtech_

Page 23: Valtech - Internet of Things & Big Data : un mariage de raison

02.9

23

IoT For A Better Life

23/06/2016 © Valtech

Capteur sonore

CoAP

Page 24: Valtech - Internet of Things & Big Data : un mariage de raison

02.10

Protocoles

Nouveaux besoins :

• Limiter la taille des paquets à émettre

(consommation d’énergie)

• Configuration publish/subscribe (multiples

abonnements à un évènement)

• Bas débit et faible contenu

• Haut débit et volume important

23/06/2016 © Valtech valtech_

Web IoT

Physique IEEE 802.11

(Wifi)

IEEE 802.15.4 : réseaux

sans fils à faible portée,

consommation et débit

Liaison Ethernet BlueTooth Low Energy, ZWave,

ZigBee, Miwi : technologies

spécifiques (courte portée)

Application HTTP CoAP, MQTT

Page 25: Valtech - Internet of Things & Big Data : un mariage de raison

02.11

Réseaux

« Nouveaux » opérateurs télécom (longue portée) :

• Sigfox

• Bouygues (LoRA)

• Orange (LoRA)

• Neul (racheté par Huawei)

• Qowisio (LoRA)

• Actility (ThingPark)

• Link-labs

• Helium

• Archos (distributeur LoRA)

23/06/2016 © Valtech valtech_

Page 26: Valtech - Internet of Things & Big Data : un mariage de raison

02.12

26

Logiciel

23/06/2016 © Valtech

Renaissance du C/C++ Plateforme de développement en ligne : ARM mbed IDE complets fournits par les fabricants (Atmel, TI…)

valtech_

Page 27: Valtech - Internet of Things & Big Data : un mariage de raison

02.13

Sécurité : ce qui est nouveau

23/06/2016 © Valtech valtech_

Page 28: Valtech - Internet of Things & Big Data : un mariage de raison

02.14

Sécurité

23/06/2016 © Valtech

« MatrixSSL Tiny » => 10Ko Flash + 600 octets RAM

Microcontrôleur le plus petit du monde

(08/2015) :

8Ko Flash

512o RAM

valtech_

Page 29: Valtech - Internet of Things & Big Data : un mariage de raison

02.15

Sujets sensibles

Page 30: Valtech - Internet of Things & Big Data : un mariage de raison

Inquiétudes existantes à propos du Cloud :

• Où sont stockées mes données?

• Qui les utilisent?

• Sont-elles sécurisées?

• …

Nouveaux sujets de questionnement ;

• Quelles sont les données collectées?

• De quelle manière?

• A quels moments?

• Dans quel but?

+

02.16

Vie privée

valtech_

Page 31: Valtech - Internet of Things & Big Data : un mariage de raison

02.17

Gouvernance

23/06/2016 © Valtech valtech_

Page 32: Valtech - Internet of Things & Big Data : un mariage de raison

02.18

Cadre juridique / légal

23/06/2016 © Valtech

La nature n’aime pas le vide,

la loi n’aime pas la “res nullius”

Problème majeur : Jusqu’à quand le fabricant ou le possesseur garde-t-il la responsabilité d’un sinistre causé par un système dont l’autonomie est la vocation?

valtech_

Page 33: Valtech - Internet of Things & Big Data : un mariage de raison

02.19

Cadre juridique / légal : CNIL

23/06/2016 © Valtech

Silence des puces Géolocalisation : Localisation de l’objet ≠ localisation propriétaire Relève de la vie privée

valtech_

La LDH a demandé à la Cnil de vérifier le respect par

EDF du Pack de conformité

Linky

Page 34: Valtech - Internet of Things & Big Data : un mariage de raison

02.19

Serious Games : IOT menaces

23/06/2016 © Valtech valtech_

Page 35: Valtech - Internet of Things & Big Data : un mariage de raison

02.20

35

Valtech prototype

23/06/2016 © Valtech

Page 36: Valtech - Internet of Things & Big Data : un mariage de raison

02.21

Big Data

23/06/2016 © Valtech

Seulement 15% des données générées de nos jours sont structurées

valtech_

1 donnée / seconde =

31.5 millions de données / an

1 heure / 800 Mo

19 200 Mo / jour

7 008 000 Mo / an

Page 37: Valtech - Internet of Things & Big Data : un mariage de raison

02.22

Big Data

23/06/2016 © Valtech

Définition: BIG DATA désigne des ensembles de données qui deviennent tellement volumineux qu'ils en deviennent difficiles à travailler avec des outils classiques de gestion de base de données ou de gestion de l'information.

valtech_

Page 38: Valtech - Internet of Things & Big Data : un mariage de raison

02.23

Big Data et IoT : Challenges

23/06/2016 © Valtech valtech_

Acquisition et stockage des streams de données Stockage de tous les évents détectés par les objets

Sauvegarde de l’information utile

Enrichissement des données

Page 39: Valtech - Internet of Things & Big Data : un mariage de raison

02.24

Big Data et IoT : Challenges

23/06/2016 © Valtech valtech_

Analyse des données Exécution des requêtes analytiques sur des données en temps réel

Recherche, exploration et analyse des données

Prétraitement et transformation des données

Corrélation entre les streams et les données déjà stockées

Prédiction et apprentissage

Page 40: Valtech - Internet of Things & Big Data : un mariage de raison

02.25

Big Data et IoT : Challenges

23/06/2016 © Valtech valtech_

Reporting Alertes en temps réel

Calcul des métriques sur les données stockées

Calcul de modèles prédictives

Temps de réponse

Page 41: Valtech - Internet of Things & Big Data : un mariage de raison

02.27

Architecture Big Data

23/06/2016 © Valtech valtech_

Page 42: Valtech - Internet of Things & Big Data : un mariage de raison

Les données collectées: Température

Lumière

Qualité de l’air

Son

Taille des données: Données environnementales circulent à travers le réseau SigFox:

140 messages / jour

Un message : 12 octet

Les données audio non compressées

02.32

42

IoT For A Better Life

23/06/2016 © Valtech

19 200 Mo / jour

7 008 000 Mo / an

Page 43: Valtech - Internet of Things & Big Data : un mariage de raison

02.33

IoT For A Better Life

43 23/06/2016 © Valtech

Apache CouchDB

Indexation

du son

Analyse

Page 44: Valtech - Internet of Things & Big Data : un mariage de raison

02.35

44

Resultats prototype I

23/06/2016 © Valtech

Tests réalisés en utilisant le dataset UrbanSound (1)

(1) https://serv.cusp.nyu.edu/projects/urbansounddataset/

valtech_

Page 45: Valtech - Internet of Things & Big Data : un mariage de raison

Selon un étude ParStream

53% des compagnies investissent dans les projets IoT pour optimiser le business existant

86% des compagnies considèrent que les données issues de l’IoT sont importantes

96% des compagnies ont rencontré des problèmes dans la collecte et l’analyse des données IoT

02.36

45

Conclusion

23/06/2016 © Valtech

Page 46: Valtech - Internet of Things & Big Data : un mariage de raison

Offre Big Data

Infrastructure

Cloud

AWS,

Microsoft Azure,

Cloudera , …

Mahout Machine Learning

Algorithm,

MapR

Lambda

Architecture Twitter like

platforms

Spark Real time

Compute model

Multiples

Data sources Gnip, API, Open

Data

Visualization Zoomdata,

Ozone,

D3js

NoSQL Hbase,

Cassandra, Neo4j,

MongoDB

Seach Engine ElasticSearch, Solr,

Lucene

Building Offret 3

Formation Big Data

IOT

Hadoop

Conseil et Formation

23/06/2016 © Valtech valtech_

IOT

IOT

IOT

IOT

Page 47: Valtech - Internet of Things & Big Data : un mariage de raison

Merci

de votre attention

Le 12 Juillet à Valtech

Meetup

IOT Security

23/06/2016 47