SurveyMonkeyコネクタの制限事項
備考
ベータ版
この機能はベータ版です。使用するには、ワークスペース管理者は、 プレビューページ から Lakeflow Connect for SurveyMonkey を有効にする必要があります。Databricksのプレビューを管理するを参照してください。
Lakeflow Connect のマネージド SurveyMonkey コネクタは、増分テーブルの削除をキャプチャしません。また、実行のたびに 11 テーブルのうち 8 テーブルを完全に取り込み直します。
一般的な ソフトウェア as a サービス(SaaS)コネクタの制限事項
このセクションの制限事項は、Lakeflowコネクト のすべてのSaaS コネクタに適用されます。
- スケジュールされたパイプラインをランする場合、アラートは即座にTriggerされません。代わりに、次の更新がランときにTriggerされます。
- ソーステーブルを削除しても、宛先テーブルは自動的に削除されません。宛先テーブルを手動で削除する必要があります。この動作は、 Lakeflow上の Spark宣言型パイプラインの動作と一致しません。
- ソースのメンテナンス期間中は、Databricksがデータにアクセスできない場合があります。
- ソーステーブル名が既存の宛先テーブル名と競合する場合、パイプラインの更新は失敗します。
- 複数宛先パイプラインのサポートは API のみです。
- オプションで、取り込むテーブルの名前を変更できます。パイプライン内のテーブルの名前を変更すると、そのテーブルは API 専用パイプラインになり、UI でパイプラインを編集できなくなります。
- パイプラインがすでに起動した後に列を選択した場合、コネクタはその新しい列のデータを自動的にバックフィルしません。ヒストリカルデータを取り込むには、テーブルで完全更新を手動でランします。
- 異なるソーススキーマからのものであっても、Databricksは同じパイプラインで同じ名前の2つ以上のテーブルを取り込むことはできません。
- ソースシステムでは、カーソル列は単調に増加すると想定しています。
- コネクタは変換を行わずに生データを取り込みます。変換には、LakeFlow PipelinesでダウンストリームのSpark宣言型パイプラインを使用します。
コネクタ固有の制限事項
このセクションの制限事項は、SurveyMonkeyコネクタに適用されます。
- Webhook、ユーザー、ワークグループ、応答ロールアップ、ベンチマークなど、他の SurveyMonkey オブジェクトを取り込むには、別の取り込み方法を使用してください。このコネクタは 11 個の事前構築済みテーブル のみをサポートしているため、これらのオブジェクトは取り込まれません。
- すべてのパイプライン実行で、
survey_collectors、collectors、survey_folders、contacts、contact_lists、contact_list_contacts、collector_messages、およびcollector_recipientsテーブルのすべてのレコードが再取り込みされることを想定してください。これらのテーブルは増分取り込みをサポートしていないため、各ランでこれらのテーブルが完全に読み込まれます。調査やコレクターが多いアカウントでは、これらの完全な読み取りにより、アプリの1日あたりのリクエスト制限の大部分が消費される可能性があります。制限内に収めるには、パイプラインの実行頻度を減らすか、不要なテーブルを除外するか、SurveyMonkeyに制限の引き上げを依頼してください。SurveyMonkey API レート制限を超えましたを参照してください。 - 古いデータを取り込むには、最初の同期の前に、より早い
start_datetimeコネクタオプションを設定します。surveys、survey_details、およびsurvey_responsesテーブルは、start_datetime以降に変更されたレコードのみを読み取ります。これは、最初の同期の365日前にdefault設定されているため、古いレコードは取り込まれません。コネクタオプションを参照してください。 - SurveyMonkey で削除されたレコードを削除するには、フル更新を実行します。コネクタは
surveys、survey_details、およびsurvey_responsesテーブルの削除をキャプチャしないため、削除されたレコードは宛先テーブルに残ります。 - アンケートごとに 25 を超える回答を取り込むには、有料の SurveyMonkey プランを使用してください。90 日間のドラフト期間中は、Basic プランのアカウントによって許可されたアプリは、各アンケートの最初の 25 件の回答のみをエラーなしで取り込みます。
- データリージョン が
caに設定されている接続のパイプラインからは、survey_foldersテーブルを除外します。SurveyMonkeyのアンケートフォルダのEndpointはカナダのユーザーは利用できないため、このテーブルを含むパイプラインの更新はこれらの接続については失敗します。「SurveyMonkeyアンケートフォルダAPIリファレンス」を参照してください。 - SurveyMonkeyが完全な形で返せないアンケート(質問数が1,000を超えるものなど)については、
survey_details行が返されないことを想定してください。コネクタはこれらのアンケートをスキップするため、そのページと質問は取り込まれず、他のアンケートは通常どおり同期されます。SurveyMonkeyの回答制限を参照してください。