[Collecte], [Stockage] et [Traitement des données] : ces trois grands famille de traitement s'assemblent pour en faire un écosystème technologique pour une approche moderne du traitement des données. C'est parce que le Big Data représente des ensembles de données qui échappent à la compréhenion humaine et qui sont trop importants ou trop complexes pour être traités par les systèmes de gestion de données traditionnels.
Le Big Data est né de la convergence des effets de quatre étapes de la transformation des métiers de l’information :
- L’explosion du volume de données. C’est l’explosion du volume de données au niveau mondial qui pousse le nommer « Big Data ». Il est évident que la fabuleuse volumétrie de données disponible est un élément important de cette révolution en marche. Comme les résultats de la statistique n’était pas assez précise par manque de données, on s’est lancé dans la production massive de tout type de données en temps réel. Le volume de données global est en croissance exponentielle pour toutes les organisations, au point d’atteindre des proportions difficilement gérables avec les technologiques précédentes.
- Généralisation de l’accès à l’information. Comme on peut le constater au quotidien, nous avons tous accès aux données. L’Open Data, les sites de météo, les sites des stations de ski avec webcam sur l’état de sa piste préférée, sont tous accessibles par tout un chacun. Les entreprises s’y mettent aussi car utiliser et faire utiliser les data par leurs employés à tous les niveaux pour suivre des indicateurs clés dans des tableaux de bord.
- Augmentation de la puissance de calcul et baisse des coûts matériels. La loi de Moore nous permet de suivre l’évolution de ka concentration de transistors toujours de plus en plus petit sans que le coût augmente et cela tous les deux ans. Grâce à cette évolution exponentielle, le Big Data a pu démarrer pour un rapport puissance/coût intéressant, voire inouie. En effet, le coût du stockage ne fait que diminuer ainsi que le coût de calcul et le tout est mutualisé dans des Data Centers.
- Une vague d'innovations sans précédent dans le domaine de l'application des données. C'est grâce à l’Open source qui domine le marché des applications de stockage et de diffusion de l’information que l'innovation est possible. En effet, cela regroupe des milliers de contributeurs dans le monde entier.
Ainsi, voici l’origine technologique du Big Data et cela ne fait que commencer car les composantes méthodologiques, métiers, organisationnelles commencent à jouer un rôle tout aussi important et judicieux.