アマゾンクラウドテクノロジーによりますと、アマゾンクラウドテクノロジーはデータ基盤構築をリードするために必要な3つのコア能力、すなわちモデルの微調整と事前訓練に必要なデータ処理能力、独自のデータとモデルを迅速に結合して独自の価値を生み出す能力、および新しいデータを効果的に処理して生成式AI応用の持続的な急速な発展を支援する能力を加速しており、企業がデータの潜在力を十分に発揮するために全面的なデータ基盤を構築し、生成式AI技術の着地を加速させることを支援しているということです。
生成型AI時代において、データは企業が頭角を現す鍵である。アマゾンクラウド科学技術大中華区製品部の陳暁建社長は、基礎モデルは大規模で高品質なデータセットに依存しており、生成式AIの差別化の利点は企業の専有データに由来しており、生成式AI応用によって生成された大量の新しいデータも適時に有効に管理し、利用する必要があると述べた。
「企業が必要とするのは業務を理解し、ユーザーの生成式AI応用を理解することであり、このような応用を構築するにはデータから始める必要がある」と陳暁建氏は述べた。アマゾンクラウド科学技術がデータ基盤を構築する3つの核心能力は基礎モデル訓練から生成式AI応用構築までの重要な場面をカバーし、企業が大量の多モードデータに簡単に対応し、基礎モデル能力を向上させることを助け、ユーザーの業務とデータの安全を確保する前提の下で、データの独特な価値を基礎モデルと生成式AI応用に与え、企業の業務成長を加速させることができる。
データストレージでは、拡張性と応答速度が重要です。Amazon S 3オブジェクトストレージは幅広いデータプロトコルをサポートし、さまざまなデータ型に簡単に対応でき、トレーニングコストを削減するためのインテリジェント階層化もサポートしています。専用に構築されたファイルストレージサービスAmazon FSx for Lustreは、サブミリ秒遅延と数百万IOPSのスループット性能を提供し、モデル最適化の速度をさらに速めることができます。
技術手段を通じてデータとモデルの結合を加速させ、企業のデータ基盤の第2の重要な能力となる。アマゾンクラウドテクノロジーは、ベクトル検索のサポート機能を主流のデータサービスに追加し、データとベクトルを一緒に保存することでデータ検索性能を向上させる。
生成型AIアプリケーションが新たに生成したデータをどのように処理するか、モデル呼び出し効率を向上させることが企業データ基盤の第3の重要な能力となる。Amazon Memory DBメモリデータベースは、前の質疑応答で生成された新しいデータをキャッシュすることで、類似の質問に対する迅速な応答と正確な回答を実現するとともに、基礎モデルの呼び出し頻度を効果的に低減するという。Amazon Memory DBは数百万ベクトルを格納でき、応答時間は数ミリ秒で、99%のリコール率で毎秒百万回のクエリ性能を実現することができる。