Pour gérer vos consentements :
Categories: Big DataCloud

Big Data : MongoDB supporte Hadoop Hive et la sauvegarde HDFS

La base de données MongoDB rencontre un certain succès depuis quelques années. Plus particulièrement sur le web et les applications mobiles qui produisent des modèles de fichiers JSON supportés par la base.

Dans le même temps, Hadoop s’affiche désormais de facto en plateforme analytique du big data.

La rencontre entre ces deux ‘produits’ tendance s’impose donc. Ce qui explique certainement la popularité acquise par le connecteur MongoDB for Hadoop. Ainsi, que la possibilité offerte par ce dernier de laisser s’exécuter les processus d’analyse des données MongoDB dans la base plutôt que de les expédier dans Hadoop.

Support de Hive et de BSON dans HDFS

Le nouveau connecteur MongoDB vient placer le support de Hive (le framework de requête SQL-like pour Hadoop) au-dessus de MapReduce (le framework Hadoop pour la manipulation des données) et de Pig (équivalent de Hive, mais qui exploite le langage Pig Latin pour les requêtes).

L’autre nouveauté majeure porte sur le support des fichiers BSON (les fichiers JSON en format binaire), natifs dans MongoDB, dans HDFS (Hadoop Distributed File System), afin de pouvoir sauvegarder ces fichiers de la base de données et de ses clusters en production dans Hadoop.

Dernier apport, MongoUpdateWriteable est un enrichissement de processus qui offre la possibilité d’exécuter des jobs MapReduce sur des collections existantes. Originellement, les collections doivent être reconstruites dans la base à chaque exécution des jobs MapReduce…


Voir aussi

Silicon.fr étend son site dédié à l’emploi IT
Silicon.fr en direct sur les smartphones et tablettes

Recent Posts

Pour son premier LLM codeur ouvert, Mistral AI choisit une architecture alternative

Pour développer une version 7B de son modèle Codestral, Mistral AI n'a pas utilisé de…

14 heures ago

Microsoft x Inflection AI : l’autorité de la concurrence britannique lance son enquête

L’Autorité de la concurrence et des marchés (CMA) britannique ouvre une enquête sur les conditions…

17 heures ago

Thomas Gourand, nouveau Directeur Général de Snowflake en France

Thomas Gourand est nommé Directeur Général pour la France. Il est chargé du développement de…

19 heures ago

Accord Microsoft-CISPE : comment Google a tenté la dissuasion

Pour dissuader le CISPE d'un accord avec Microsoft, Google aurait mis près de 500 M€…

19 heures ago

Vers des mises à jour cumulatives intermédiaires pour Windows

Pour réduire la taille des mises à jour de Windows, Microsoft va mettre en place…

20 heures ago

RH, finances, stratégie… Les complexités de la Dinum

De l'organisation administrative à la construction budgétaire, la Cour des comptes pointe le fonctionnement complexe…

2 jours ago