Merci pour ce retour.
Super on va pouvoir déployer les agent flume partout \o/
Par contre on a migré le POC sur Ubuntu à la sortie de CDH3. P.e. que lors de l'installation d'une éventuelle prod on repassera sur Debian.
Est ce qu'il existe une communauté francophone de écosystème hadoop aujourd'hui ?
Nos difficulté aujourd'hui, c'est de trouver des tutos avec la descriptions des flux pour des objectifs assez classique comme pour hbase faire des conteurs de vues d'objets. On trouve une vidéo de la description des statistique en temps réel chez facebook1, ou le compteur de downloads en répartition géographique de firefox [3][4] mais peu qui ne soit assez détaillé pour s'en inspirer.
Le design d'un schéma Hbase est assez perturbant quand on arrive du Relationnel :
dénormalisation
support des milliers (millions?) de colonnes
choix du rowid important (seul index de la base, pour le moment)
dimension temporel avec les multiple versions d'une donnée stockée.
[^] # Re: Excellente nouvelle
Posté par Dam_ned . En réponse au journal Bigtop - Nouveau projet soumis pour incubation a la fondation Apache. Évalué à 1. Dernière modification le 15 juin 2011 à 14:25.
Merci pour ce retour.
Super on va pouvoir déployer les agent flume partout \o/
Par contre on a migré le POC sur Ubuntu à la sortie de CDH3. P.e. que lors de l'installation d'une éventuelle prod on repassera sur Debian.
Est ce qu'il existe une communauté francophone de écosystème hadoop aujourd'hui ?
Nos difficulté aujourd'hui, c'est de trouver des tutos avec la descriptions des flux pour des objectifs assez classique comme pour hbase faire des conteurs de vues d'objets. On trouve une vidéo de la description des statistique en temps réel chez facebook1, ou le compteur de downloads en répartition géographique de firefox [3][4] mais peu qui ne soit assez détaillé pour s'en inspirer.
Le design d'un schéma Hbase est assez perturbant quand on arrive du Relationnel :
[1] http://highscalability.com/blog/2011/3/22/facebooks-new-realtime-analytics-system-hbase-to-process-20.html
[2] http://hadoopblog.blogspot.com/2011/05/realtime-hadoop-usage-at-facebook-part.html
[3] http://glow.mozilla.org/
[4] https://blog.mozilla.com/data/2011/03/22/how-glow-mozilla-org-gets-its-data/