ビッグデータの出現により何が起こるのでしょうか?

#ビッグデータの出現は、データの量的変化から質的変化までが蓄積された結果です。

ビッグデータ (ビッグデータ) とは、IT 業界の用語で、一定の時間範囲内で従来のソフトウェア ツールでは取得、管理、処理できないデータの集合を指します。より正確なデータを取得するためのモデルの処理 強力な意思決定、洞察、プロセス最適化機能を備えた、大規模で急速に成長する多様な情報資産。

ビッグ データの出現の理由:

ほとんどの技術的なブレークスルーは、実際の製品のニーズから生まれています。ビッグ データは、もともと Google の検索エンジンで生まれました。 Web2.0時代の進展に伴い、インターネット上のデータ量は爆発的に増加しており、情報検索のニーズを満たすために大規模なデータストレージのニーズが非常に高まっています。

コストを考慮すると、大量のデータを検索するためにハードウェアをアップグレードすることは現実的ではなくなりつつあります。そのため、Google は、通常の PC を使用して大規模ストレージを並列処理する、信頼性の高いソフトウェア ベースのファイル ストレージ システム GFS を提案しました。

保存されたデータの価値は低く、実際のアプリケーションのニーズを満たすために処理できるのはデータだけです。そこで Google は、クラスターの力を利用して複雑な操作を分割に変換できる MapReduce コンピューティング モデルを作成しました。通常の PC ごとに 1 台ずつ配置し、計算が完了した後、最終的な計算結果を集計して求めるため、直接マシン数を増やすことでより優れた計算能力を得ることができます。

GFS と MapReduce により、ファイルの保存と操作は解決されましたが、新たな問題が発生しました。 GFS のランダムな読み取りおよび書き込み機能は非常に貧弱であり、Google はフォーマットされたデータを保存するためのデータベースを必要としています。当初スタンドアロン データベースによって解決されたこの問題は Google にとって悲劇でした。そこで、魔法のツールである Google は別のデータベースを開発しました。 BigTable システムは、GFS ファイル ストレージ システムと分散ロック管理システム Chubby を使用して、BigTable のような列型データベース システムを設計します。

以上がビッグデータの出現により何が起こるのでしょうか?の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。