SKIP TO CONTENT
The portal for lifelong-learning
LU
DE
EN
FR
PT
You are here: Home > Training courses > OXiane Luxembourg

Big Data

2 day(s)

Objectives

Les "Big Data", aussi appelées mégadonnées, désignent des ensembles volumineux de données, venant de sources et de formats différents, et qui doivent être analysées en temps réel pour pouvoir fournir des éléments cruciaux de décisions ou encore offrir la meilleure expérience à vos utilisateurs.

Les outils conventionnels de gestion de bases de données et d’analyse ne permettent plus de suivre ces trois propriétés de volume, de variété et de vélocité.

A l’issue de cette formation, vous connaîtrez les enjeux du Big Data, et vous saurez choisir les bon outils, autant en termes de bases NoSQL, d’algorithmes MapReduce, de stockage ou d’analyse pour réaliser vos projets Big Data.

  • Comprendre les concepts du BigData et savoir quelles sont les technologies implémentées.

Content

Introduction au Big Data
  • Le besoin: volumes importants de données, traitements optimisés de flux de données au fil de l’eau, liés aux nouvelles technologies et aux nouveaux usages
  • Domaines concernés: recherche scientifique, médical, e-commerce, sécurité, …
  • Développement des techniques sur différents aspects: stockage, indexation/recherche, calcul
  • Définition ETL: Extract Transform Load
  • Les acteurs
Stockage
  • Caractéristiques NoSQL
  • Structure de données proches des utilisateurs, développeurs
  • Données structurées et non structurées, documents, images, fichiers XML, JSON, CSV, …
  • Les différents modes et formats de stockage
  • Stockage réparti: réplication, sharping, gossip protocl, hachage
  • Systèmes de fichiers distribués: GFS, HDFS, HBase, BigTable,..
  • Les bases de données
  • Quelques exemples de produits et leurs caractéristiques: cassandra, MongoDB, CouchDB, DynamoDB, Riak, Hadoop
Indexation et recherche
  • Moteurs de recherche
  • Principe de fonctionnement
  • Méthodes d’indexation
  • Exemple de Lucene, et mise en oeuvre avec solr
  • Recherche dans les bases de volumes importants
  • Exemples de produits et comparaison: dremel, drill, elasticsearch, MapReduce
Calcul et restitution, intégration
  • Différentes solutions: calculs en mode batch, ou en temps réel, sur des flux de données ou des données statiques
  • Les produits: langage de calculs statistiques, R Statistics Language
  • Outils de calcul sur des volumes importants: storm en temps réel, hadoop en mode batch
  • Zoom sur Hadoop: complémentarité de HDFS et MapReduce
Évolutions
  • Les offres Saas BigData comme Google BigQuery
  • Les limites. Les nouveautés annoncées

Target group

Who is the course aimed at?

Architectes, Chefs de projets

Assessment

Certficate, diploma

Une attestation de participation sera transmise aux participants

Contact the training provider
OXiane Luxembourg

Nathalie Thielemans / Nassera Aici

formation@oxiane.lu

+352 27 39 35

Share this content

 



Responsibility for the content of this training description lies solely with its author, the training provider OXiane Luxembourg.

Print Expand/Collapse all Send to a friend
Contact the training provider
OXiane Luxembourg

Nathalie Thielemans / Nassera Aici

formation@oxiane.lu

+352 27 39 35

Characteristics
Organisation Formation inter-entreprise
Languages
Use of cookies

lifelong-learning.lu uses cookies to offer you a quality user experience, measure audiences, optimise functions on social media, and offer you personalised content.

By continuing to browse this website, you accept the use of cookies subject to the conditions provided for in our policy on the subject. Find out more.

Essential cookies
These cookies make it possible to use the main functions of our website (including access to your personal space). Normal use of our website is not possible unless these cookies are enabled.
Statistics
These cookies make it possible to compile statistics on visits to our website. Disabling them stops us monitoring and improving the quality of the services we provide.
Targeted advertising
These cookies make it possible to provide you with information via the Internet and the social media, with offers of training that match your needs.

Read our policy on the use of cookies.

Accept all Manage your cookie settings
Veuillez patienter...