データインポート(コンソール)
このページでは、Zilliz Cloud コンソールで準備済みのデータをインポートする方法を紹介します。
Web UI でデータをインポートする
データファイルの準備ができたら、オブジェクトストレージバケットにアップロードしてデータインポートを行うことができます。
コレクション内で実行中または保留中のインポートジョブは最大 10,000 件まで設定できます。
Web コンソールでは、最大 1 GB のローカル JSON または Parquet ファイルをアップロードできます。より大きなファイルの場合は、代わりにオブジェクトストレージからのアップロードを推奨します。データインポートで問題が発生した場合は、サポートチケットを作成してください。
オブジェクトストレージバケットのリモートファイル
リモートファイルをインポートするには、まずリモートバケットにアップロードする必要があります。生データをサポートされている形式に変換し、BulkWriter ツールを使用して結果ファイルをアップロードできます。
準備したファイルをリモートバケットにアップロードしたら、オブジェクトストレージサービスを選択し、リモートバケット内のファイルパスと、Zilliz Cloud がバケットからデータを取得するためのバケット認証情報を入力します。
データセキュリティ要件に応じて、データインポート時に長期認証情報または短期トークンのいずれかを使用できます。
認証情報の取得についての詳細は、以下を参照してください:
-
Amazon S3: 長期認証情報を使用した認証
-
Google Cloud Storage: サービスアカウントの HMAC キーの管理
-
Azure Blob Storage: アカウントアクセスキーの表示
短期トークンの使用についての詳細は、この FAQ を参照してください。
Zilliz Cloud では、クラスタをホストしているクラウドプロバイダーに関係なく、任意のオブジェクトストレージサービスから任意の Zilliz Cloud クラスタにデータをインポートできるようになりました。たとえば、AWS S3 バケットから GCP にデプロイされた Zilliz Cloud クラスタにデータをインポートできます。
結果の確認
インポートジョブの進捗状況とステータスは、ジョブページで確認できます。
サポートされているオブジェクトパス
適用可能なオブジェクトパスについては、ストレージオプションおよびフォーマットオプションを参照してください。