Amazon MSK からデータをロードする
このトピックでは、Amazon Managed Streaming for Apache Kafka (Amazon MSK) から CelerData へメッセージ(イベント)をストリームするための Routine Load ジョブの作成方法を紹介します。
Amazon MSK クラスターから CelerData へストリームのメッセージを継続的にロードするには、Amazon MSK クラスターの Kafka トピックにメッセージストリームを保存し、Routine Load ジョブを作成してメッセージを消費します。Routine Load ジョブは CelerData に持続し、トピック内のすべてまたはいくつかのパーティションのメッセージを消費するための一連のロードタスクを生成し、メッセージを CelerData にロードします。
Routine Load ジョブは、CelerData にロードされたデータが失われたり重複したりしないように、正確に一度だけの配信セマンティクスをサポートします。