データのインポート(コンソール)
このページでは、Zilliz Cloudコンソールで準備したデータをインポートする方法を紹介します。
Web UIでのデータインポート
データファイルの準備ができたら、データインポート用にオブジェクトストレージバケットにアップロードできます。
1つのコレクションには最大10,000個の実行中または保留中のインポートジョブを持つことができます。
Webコンソールは最大1GBのローカルJSONまたはParquetファイルのアップロードをサポートしています。それより大きなファイルについては、代わりにオブジェクトストレージからのアップロードを使用することを推奨します。データインポートに関する問題がある場合は、サポートチケットを作成してください。
オブジェクトストレージバケットからのリモートファイル
リモートファイルをインポートするには、まずリモートバケットにアップロードする必要があります。バッチライターツールを使用して、生データをサポートされている形式に変換し、結果のファイルをアップロードできます。
準備したファイルをリモートバケットにアップロードしたら、オブジェクトストレージサービスを選択し、リモートバケット内のファイルへのパスとバケットの認証情報を入力して、Zilliz Cloudがバケットからデータを取得できるようにします。
データセキュリティ要件に基づき、データインポート中に長期認証情報または短期トークンのいずれかを使用できます。
認証情報の取得方法については、以下を参照してください。
-
Amazon S3: 長期認証情報を使用した認証
-
Google Cloud Storage: サービスアカウントのHMACキーの管理
-
Azure Blob Storage: アカウントアクセスキーの表示
短期トークンの使用方法については、このFAQを参照してください。
Zilliz Cloudでは、クラスターをホストしているクラウドプロバイダーに関係なく、任意のオブジェクトストレージサービスから任意のZilliz Cloudクラスターへのデータインポートが可能になりました。たとえば、AWS S3バケットからGCPにデプロイされたZilliz Cloudクラスターにデータをインポートできます。
結果の確認
インポートジョブの進行状況とステータスは、ジョブページで確認できます。
サポートされているオブジェクトパス
適用可能なオブジェクトパスについては、ストレージオプションおよびフォーマットオプションを参照してください。