La couche d'analyse de l'architecture technologique du Big Data fournit des algorithmes d'exploration de données et d'apprentissage automatique basés sur des statistiques ; l'infrastructure du Big Data est construite comme une architecture technologique de pile, comprenant la couche de base, la couche de gestion, la couche d'analyse et la couche d'application. La couche est utilisée pour l'analyse et l'interprétation des ensembles de données afin d'aider les entreprises à mieux comprendre la valeur de leurs données.
L'environnement d'exploitation de ce tutoriel : système Windows 10, ordinateur DELL G3.
L'infrastructure Big Data est construite comme une architecture technologique de pile, comprenant : une couche de base, une couche de gestion, une couche d'analyse et une couche d'application.
L'architecture technologique de pile à quatre couches du Big Data :
1 Couche de base
La première couche est la couche la plus basse de toute l'architecture technologique du Big Data et est également la couche de base. Pour réaliser des applications de Big Data à grande échelle, les entreprises ont besoin d’une plate-forme informatique et de stockage hautement automatisée et évolutive horizontalement. Cette infrastructure doit évoluer des anciens silos de stockage vers des pools de stockage de grande capacité dotés de capacités partagées. La capacité, les performances et le débit doivent être évolutifs de manière linéaire.
Le modèle cloud encourage l'accès aux données et fournit un pool de ressources élastique pour faire face à des problèmes à grande échelle, résolvant le problème du stockage de grandes quantités de données et de l'accumulation des ressources informatiques nécessaires à l'exploitation des données. Dans le cloud, les données sont provisionnées et distribuées sur plusieurs nœuds, ce qui les rapproche des utilisateurs qui en ont besoin, ce qui entraîne des temps de réponse plus rapides et une productivité accrue.
2. Gestion
Pour prendre en charge une analyse approfondie des données multi-sources, une plate-forme de gestion est nécessaire dans l'architecture technologique du Big Data pour intégrer la gestion des données structurées et non structurées, avec transmission et requête en temps réel, fonction de calcul. . Cette couche comprend à la fois le stockage et la gestion des données, ainsi que le calcul des données. La parallélisation et la distribution sont des éléments à prendre en compte dans une plateforme de gestion Big Data.
3. Couche d'analyse
Les applications Big Data nécessitent une analyse Big Data. La couche d'analyse fournit des algorithmes d'exploration de données et d'apprentissage automatique basés sur des statistiques pour analyser et interpréter des ensembles de données, aidant ainsi les entreprises à obtenir des informations approfondies sur la valeur des données. Une plateforme d’analyse Big Data dotée d’une forte évolutivité et d’une utilisation flexible peut devenir un outil puissant pour les data scientists, obtenant deux fois le résultat avec moitié moins d’effort.
4. Couche applicative
La valeur du Big Data se reflète dans les applications qui aident les entreprises à prendre des décisions et à fournir des services aux utilisateurs finaux. Différents nouveaux besoins commerciaux conduisent à l’application du Big Data. Au contraire, les avantages concurrentiels offerts par les applications Big Data aux entreprises incitent les entreprises à prêter davantage attention à la valeur du Big Data. Les nouvelles applications du Big Data continuent de présenter de nouvelles exigences en matière de technologie du Big Data, et la technologie du Big Data devient donc de plus en plus mature dans un contexte de développement et de changements constants.
Pour plus de connaissances connexes, veuillez visiter la rubrique FAQ !
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!