概要
CKafkaへのデータエクスポートは、Tencent CloudのCloud Object Storage(COS)が提供するServerless Cloud Function(SCF)をベースとした、データレイクからデータを抽出するためのソリューションです。ユーザーがCSV、JSON 等のファイル形式のデータを、同じリージョンのTencent Cloud CKafkaサービスにエクスポートすることを支援し、大量のメッセージ、ログデータの集計分析を行います。 注意事項
CKafkaへのデータエクスポート機能は、COSデータ検索インターフェースに関連しています。制限に関する説明については、Selectの概要をご参照ください。 以前にCOSコンソールでバケットにCKafkaへのデータエクスポートルールを追加したことがある場合は、SCFコンソールで、作成したCKafkaへのデータエクスポート関数を確認できます。このCKafkaへのデータエクスポート関数を削除、あるいは変更すると、ルールが有効にならない場合がありますので削除しないでください。 現在、CKafkaへのデータエクスポート機能は、広州、上海、北京、成都でのみサポートされています。
COSのCKafkaへのデータエクスポート機能は、SCFサービスに依存しており、ユーザーには無料利用枠が提供されていますが、無料利用枠を超える部分については、SCF製品価格に従って課金されます。 操作手順
2. 左側ナビゲーションでアプリケーション統合 > データエクスポートをクリックし、CKafkaへのデータエクスポートを見つけます。
3. ルールの設定をクリックし、ルール設定ページに進みます。
4. 関数の追加をクリックします。
注意:
SCFサービスをアクティブ化していない場合は、SCFコンソールに移動してSCFサービスをアクティブ化し、プロンプトに従ってサービス権限承認を行えば完了です。 5. ポップアップしたウィンドウで、以下の情報を設定します。
関数名のプレフィックス:関数の一意の識別名として、作成後に変更することはできません。SCFコンソールでこの関数を確認できます。 シナリオの選択:エクスポートしたいログソースを選択します。COSログファイルでのエクスポートを推奨します。
ソースバケット:ログを保存するバケットの名称です。COSログファイルを選択してエクスポートする場合は、先にCOSログストレージ機能を有効にする必要があります。
ログストレージの状態:ログストレージの状態が有効になっているかどうかの確認が必要です。
バケットへの配信:ログが保存されるバケットです。
ログ配信のプレフィックス:ログを見つけやすくするために、パスプレフィックスを入力します。
SCF権限承認:CKafkaへのデータエクスポートは、SCFがバケットからログファイルを読み取るための承認が必要です。そのため、この権限を追加する必要があります。
6. プリセットパラメータを入力をクリックし、CKafkaへのデータエクスポートを設定します。設定項目の説明は次のとおりです。
アクセス方式:CKafkaのアクセス方式です。VPCプライベートネットワークアクセスを選択する場合は、対応するVPCを入力してください。
アドレスにアクセス:CKafkaがアクセスするアドレスです 。
トピック名:作成したCKafkaのトピック名です。
認証設定:CKafkaの認証方式です。 認証が必要を選択する場合は、対応するユーザー名およびユーザーパスワードを入力してください。
速度の上限:CKafkaへのエクスポート速度の上限です。
7. 個別化されたログデータの抽出をする場合は、前へ戻るをクリックし、設定を行います。通常は、直接確認をクリックし、関数の追加を完了することを推奨します。
新規作成した関数に対しては、次のような操作が可能です。 ログをクリックして、CKafkaへのデータエクスポートの履歴を確認します。CKafkaへのデータエクスポートでエラーが発生した場合は、ログをクリックしてSCFコンソールにすばやくジャンプし、ログエラーの詳細を確認することもできます。
詳細をクリックして、現在の関数の詳細設定を確認します。
編集をクリックして、CKafkaへのデータエクスポートのルールを変更します。
トリガーをクリックして、バケット内の既存のログを1つ選択し、CKafkaへのエクスポートを直接トリガーすることができます。
削除をクリックして、使用しないCKafkaへのデータエクスポートのルールを削除します。
この記事はお役に立ちましたか?