データのインポート(Console)
このページでは、Zilliz Cloud コンソールで準備済みデータをインポートする方法を紹介します。
Web UI でデータをインポートする
データファイルの準備ができたら、データインポート用にオブジェクトストレージバケットへアップロードできます。
-
1 つのコレクションでは、実行中または保留中のインポートジョブを最大 10,000 件まで保持できます。
-
Web コンソールでは、最大 1 GB のローカル JSON または Parquet ファイルのアップロードをサポートしています。より大きなファイルについては、代わりにオブジェクトストレージからアップロードすることをおすすめします。データインポートで問題が発生した場合は、サポートチケットを作成してください。
オブジェクトストレージバケット上のリモートファイル
リモートファイルをインポートするには、まずそれらをリモートバケットにアップロードする必要があります。生データをサポート対象の形式に簡単に変換し、結果ファイルをBulkWriter ツールを使用してアップロードできます。
準備済みファイルをリモートバケットにアップロードしたら、オブジェクトストレージサービスを選択し、リモートバケット内のファイルへのパスと、Zilliz Cloud がそのバケットからデータを取得するためのバケット認証情報を入力します。
データセキュリティ要件に応じて、データインポート時には長期認証情報または短期トークンのいずれかを使用できます。
認証情報の取得方法の詳細については、以下を参照してください。
-
Amazon S3: 長期認証情報を使用して認証する
-
Google Cloud Storage: サービス アカウントの HMAC キーを管理する
-
Azure Blob Storage: アカウント アクセス キーを表示する
短期トークンの使用方法の詳細については、この FAQ を参照してください。
Zilliz Cloud では現在、クラスターをホストしているクラウドプロバイダーに関係なく、任意のオブジェクトストレージサービスから任意の Zilliz Cloud クラスターにデータをインポートできます。たとえば、AWS S3 バケットから GCP 上にデプロイされた Zilliz Cloud クラスターへデータをインポートできます。
低レイテンシで安定した体験を確保するため、ターゲットクラスターと同じプロバイダーかつ同じリージョンにあるバケットまたは BLOB コンテナーを使用することをおすすめします。
結果を確認する
インポートジョブの進行状況とステータスは、Jobs ページで確認できます。
サポートされるオブジェクトパス
適用可能なオブジェクトパスについては、Storage Options および Format Options を参照してください。