31 results for tags
big-data x
-
Pregel is out but what is Pregel
Une explication du concept de Pregel, qui est un concurrent du concept Map-Reduce. Encore peu implémenté (sauf par GraphX et Apache Giraph) et utilisé (sauf par Google, tiens donc...), ce sera sans doute un des concepts phare de l'avenir du Big-Data avec la baisse à venir de l'utilisation de Map-Reduce. Issue à la base du Bulk Synchronous Parallel (http://en.wikipedia.org/wiki/Bulk_synchronous_parallel).Thu May 21 13:30:56 2015 - permalink -- http://blog.acaro.org/entry/pregel-is-out-but-what-is-pregel
-
Le job le plus sexy du 21e siècle
Une très bonne présentation de ce qu'est un data-scientist : compétences, place dans l'entreprise, opportunités...Wed May 20 10:58:03 2015 - permalink -- https://hbr.org/2012/10/data-scientist-the-sexiest-job-of-the-21st-century/
-
Utiliser Spark avec Cassandra
Utilisation de Spark, outil de Map-Reduce in-memory sur des données étant dans une base Cassandra. Premier blog-post écrit pour le blog de ma boite, Affini-Tech \o/Mon May 18 10:01:40 2015 - permalink -- http://blog.affini-tech.com/Spark_Cassandra/index.html
-
Human Talk - Gestion d'un projet Big Data
Vidéo du Talk que j'ai donné sur la gestion d'un projet Big Data aux conférences Human Talk de Compiègne le 12 Mai 2015.Wed May 13 09:57:55 2015 - permalink -- https://www.youtube.com/watch?v=s-bciBrCJgs
-
Wanted: Intelligent Middleware That Simplifies Big Data Analytics
Une analyse plutôt pertinente du chemin que doivent prendre les technologies Big-Data afin d'être adoptées plus facilement. En gros, celles-ci doivent être simplifiées un maximum pour l'utilisateur final. C'est un problème que l'on retrouve pour toute nouvelle technologie en informatique : au début c'est miraculeux et extrêmement novateur, mais très compliqué à utiliser (cela nécesssite de se plonger dedans à fond avec peu de doc sur le net) mais dès que ça commence à être simplifié, ça peut enfin commencer à être vraiment industrialisé.Mon Apr 13 12:52:41 2015 - permalink -- http://www.datanami.com/2015/03/23/wanted-intelligent-middleware-that-simplifies-big-data-analytics/
-
Spark Summit debrief: Relax, the growing pains are mundane | OnStrategies Perspectives
C'est vrai qu'à suivre le projet Spark depuis environ un an, on peut dire que c'est l'outil Big-Data qui a le plus évolué ces derniers temps. Des tonnes de fonctionnalités ont été rajoutées dessus : support du SQL, dataframe, utilisation du python, packet manager... Avec en plus pas mal d'outils comme MLLib qui se basent dessus. Et ce n'est pas finis : de nouvelles versions sortent régulièrement avec à chaque fois pleins d'améliorations rajoutées dedans (je le sais, j'ai assisté rien qu'hier au webcast de la présentation de Spark 1.3)Thu Mar 26 10:31:21 2015 - permalink -- http://www.onstrategies.com/blog/2015/03/22/spark-summit-debrief-relax-the-growing-pains-are-mundane/
-
The Elephant was a Trojan Horse: On the Death of Map-Reduce at Google : Paper Trail
Pourquoi Google abandonne petit à petit Map-Reduce... C'est sûr qu'il y a pas mal de limitations dans le concept, mais ça a permis de développer des tonnes de trucs au dessus. Là-dessus, Hadoop est un peu comme R : c'est pas hyper fiable, y a des bugs, mais ça permet d'introduire de nouveaux paradigmes et façons de faire qui vont pouvoir être développés et améliorés jusq'uà ce qu'on n'ait plus besoin de la base. En tout cas, on n'est pas près d'en voir la fin je pense.Wed Mar 18 11:26:09 2015 - permalink -- http://the-paper-trail.org/blog/the-elephant-was-a-trojan-horse-on-the-death-of-map-reduce-at-google/
-
TEDx UTC - L'Open Data, avenir des Big Data
Une vidéo sur le big data ET l'open data ! Mon rêve ! Rêve d'autant plus grand que cette vidéo est celle d'une conférence TED s'étant déroulé à l'UTC, mon ancienne école ! C'est vrai que l'utilisation des big data a pour l'instant plutôt un côté commercial, mais cela va peut-être basculer. Cela me donne des idées pour le futur...Wed Feb 11 23:18:38 2015 - permalink -- https://www.youtube.com/watch?v=MUI6Rwn4Qq0&feature=youtube_gdata_player
-
Les erreurs les plus courantes quand on fait du big-data en python
Deux de mes sujets favoris, le python et le big-data, rassemblés en un. Pour avoir déjà traité des gros ensembles de données en python, c'est vrai que les scripts ne sont pas les mêmes. Il faut faire attention aux dates, à ses entrées-sorties, à la performance... J'ajouterais deux points auxquels faire aussi attention : ne pas hésiter à paralléliser son code (surtout que maintenant des machines à 8 ou 16 coeurs, ça se loue pour pas grand chose) et à mettre des compteurs pour savoir où on en est. Parce qu'au bout de deux heures, quand ça tourne encore, c'est utile de savoir si on est à 10% ou à 99%...Fri Jan 16 11:02:14 2015 - permalink -- https://www.airpair.com/python/posts/top-mistakes-python-big-data-analytics
-
Big data: are we making a big mistake? - FT.com
Il est toujours bon de lire des articles très critiques sur ce que l'on fait. Celui(ci en est un beau sur les big-data. On y apprends en autre que la fameuse détection de grippe par Google est actuellement complètement fausse (deux fois trop de patients) et d'autres histoires du même style. Cela-dit, cet article rejoint quand même certaines de mes idées sur le fait que oui, les big-datas permettent énormément de choses, mais pas tout. Il ne sert à rien de céder à l'effet d emode et de se dire que le monde va changer du tout au tout grâce à elle. Ma plus grande crainte là-dedans est la création d'une "bulle big-data" qui finirait par exploser, ruiner pas mal de gens et décrédibiliser le domaine, comme celle arrivée à la fin des années 90 sur le web 2.0. On verra bienWed Apr 9 12:10:32 2014 - permalink -
Edit : le truc qui fait mal, c'est que le site demande une inscription pour lire les articles... Tellement horreur de ça.- http://www.ft.com/cms/s/2/21a6e7d8-b479-11e3-a09a-00144feabdc0.html#axzz2xkf9vMjV
-
Laboratoire de Big-Data
L'université de Berkeley a lancé il y a quelques années un laboratoire pour réfléchir sur le Big-Data. Ils se veulent à la croisée du data-mining, du crowdsourcing et du Cloud. Tombé par hasard dessus grâce à des tutos qu'ils fournissent, ils ont l'air d'utiliser et développer nombre d'outils extrêmement intéressant. À suivre de près !Mon Mar 24 10:57:33 2014 - permalink -- https://amplab.cs.berkeley.edu/