データ接続と統合Data Connectionエクスポート概要

注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

エクスポート

Data Connection は、Foundry から外部システムへのデータセットとストリームのエクスポートをサポートしています。これは、さまざまな目的に役立ちます。

  • データパイプラインを使用して Foundry でクレンジングおよび加工したデータを、データウェアハウスやデータレイクなどのシステムに同期できます。このパターンについては、「Palantir Foundry がデータプラットフォームを強化する仕組み」↗で詳しく説明しています。
  • バッチデプロイを使用して作成した機械学習モデルの推論結果をほかのシステムにエクスポートし、組織全体で ML プロジェクトを業務に活用できます。
  • オントロジーでエンドユーザーから収集した業務データをほかのシステムに書き込み、Foundry の外部で分析できます。

エクスポートすると、データへのアクセス、保持、共有が可能な場所が新たに作成されます。エクスポートを設定する前に、宛先と受信者が承認された目的に対応していることを確認し、エクスポートするフィールドを必要最小限に抑え、適切なアクセス制限を適用してください。目的の制限と責任ある共有に関するガイダンスについては、プライバシーと市民的自由の実践を参照してください。

Data Connection のエクスポートは、まだすべてのソースタイプでサポートされているわけではありません。利用可能かどうかを確認するには、ソースタイプの概要ドキュメントに記載されている個別のソースページを参照してください。エクスポート機能が利用可能な場合、各ソースページにはファイルエクスポート、ストリーミングエクスポート、テーブルエクスポート、またはレガシーエクスポートタスクのサポートが記載されています。たとえば、Amazon S3 ソースタイプはファイルエクスポートをサポートしていますが、BigQuery ソースではエクスポートタスクが必要です。

ファイルエクスポート、ストリーミングエクスポート、テーブルエクスポートの機能をまだサポートしていないソースでも、レガシーエクスポートタスクの設定をサポートしている場合があります。更新されたエクスポート機能を実装しているソースタイプでは、エクスポートタスクは推奨されなくなりました。

エクスポート動作の更新

2025年6月より前は、ビルド中にエクスポートする新しいファイルや行がない場合、エクスポートは失敗としてマークされていました。2025年6月以降、エクスポートする新しいファイルや行がないエクスポートは成功としてマークされます。この変更は、従来の失敗時の動作に依存するワークフローに影響する可能性があります。ユーザーは、影響を受けるワークフローを適宜調整する必要があります。

エクスポート形式

エクスポートの動作は、宛先システムが受け入れられるデータの種類によって異なります。

エクスポート形式概要
ファイルエクスポートスキーマのないシステムへのエクスポートに使用します。データセット内の生ファイルがスケジュールに従ってコピーされ、ターゲットシステムに書き込まれます。
ストリーミングエクスポートイベントストリーミングをサポートするシステムへの継続的なエクスポートに使用します。Foundry ストリームのレコードがターゲットシステムに継続的にプッシュされます。
テーブルエクスポートスキーマのあるシステムへのエクスポートに使用します。選択したエクスポートモードに応じて、データセットの行がスケジュールに従ってターゲットシステムに挿入されます。

ファイルエクスポート

ファイルエクスポートをサポートするシステムの例として、S3 があります。

ファイルエクスポートは、選択した Foundry データセットのファイルを、設定された宛先に書き込みます。デフォルトでは、上流データセットで最後に正常にエクスポートされたトランザクション以降に変更されたファイルのみが書き込まれます。つまり、あるトランザクションでファイルが更新されなかった場合、下流のどのエクスポートでも、次回のスケジュール実行や手動実行でそのファイルが再エクスポートされることはありません。

データセット全体を再エクスポートする必要がある場合は、同じソースで新しいエクスポートを設定するか、上流の変換処理でエクスポートが必要なすべてのファイルが上書きされるようにしてください。

デフォルトでは、宛先にファイルがすでに存在する場合、エクスポートジョブはそのファイルをエクスポートしたデータで上書きします。この動作はソースタイプによって異なる場合があります。宛先システムに保存されているデータを誤って上書きしないように、Foundry からエクスポートしたデータの格納先として専用のサブフォルダーを作成することを推奨します。

ストリーミングエクスポート

ストリーミングの宛先へのエクスポートでは、Foundry でエクスポートジョブが実行されている間、レコードが宛先にストリーミングされます。ジョブを停止して再起動すると、停止した位置からレコードのストリーミングが再開されます。

次のソースタイプがストリーミングエクスポートをサポートしています。

Kafka にエクスポートする場合、ストリームレコードの Base64 デコードを有効にできます。Kafka へのエクスポートの詳細については、Kafka コネクターのドキュメント全体を参照してください。

ストリーミングエクスポートのリプレイ動作

ストリーミングの宛先へのエクスポートを設定する場合、Foundry でストリームがリプレイされたときの動作を指定する必要があります。通常、処理ロジックに破壊的変更を加えると、ストリームがリプレイされます。この場合、処理済みのレコードを新しいロジックで再処理する必要があり、次のいずれかの方法を使用します。

  • リプレイされたレコードをエクスポート: ストリームがリプレイされると、すべてのレコードを再エクスポートします。以前にエクスポートされたレコードも再度エクスポートされるため、外部システムで重複を処理するように設定する必要があります。

  • リプレイされたレコードをエクスポートしない: リプレイされたオフセットがエクスポートジョブの最新のオフセットと一致するまで、エクスポートを一時停止します。リプレイされたストリーム間でオフセットが一致する保証はないため、このオプションでは、一部のレコードが削除され、エクスポートされないままになることがよくあります。

テーブルエクスポート

テーブルエクスポートは2024年6月より一般提供されていますが、すべてのソースタイプで利用可能とは限りません。利用可能な場合は、エクスポートタスクよりもテーブルエクスポートを推奨します。ソースタイプがテーブルエクスポートに対応しているかどうかを確認するには、Data Connection のソースページでテーブルエクスポートタグを探します。該当するソースタイプのドキュメントページでも確認できます。

テーブルエクスポートでは、スキーマが既知の表形式データを含むシステムにエクスポートできます。この場合、外部の宛先スキーマは、エクスポートする Foundry データセットのスキーマと一致している必要があります。テーブルエクスポートは、以下で説明する選択されたテーブルエクスポートモードに従って、システム固有の INSERT ステートメントまたは同等の API 呼び出しを実行し、宛先テーブルに行を書き込みます。

テーブルエクスポートモード

選択されたエクスポートモードは、テーブルエクスポート時にデータをどのようにエクスポートするかを指定します。以下のエクスポートモードは、すべてのテーブルエクスポートで利用可能です。Data Connection のエクスポートセットアップページでも説明されています。

テーブルエクスポートモード説明
データセットを外部テーブルに効率的にミラーリング(推奨)外部テーブルは、Foundry データセットで表示される内容と常に一致します。

これは、現在のデータセットビューにある未エクスポートのトランザクションを常にインクリメンタルにエクスポートし、エクスポート対象の Foundry データセットに SNAPSHOT トランザクションがある場合に外部テーブルを切り詰めることで実現します。

このモードは、エクスポート対象のデータセット内の UPDATE および DELETE トランザクションに対応していません。
切り詰めなしでデータセット全体をエクスポート外部テーブルを事前に切り詰めずに、Foundry データセットのビュー全体のスナップショットを常にエクスポートします。

注:このオプションを使用すると、ほぼ常に外部テーブルに重複が発生します。このオプションは、外部システムが実行のたびに行を取り込んで削除する場合や、すでにエクスポート済みの行を再エクスポートする場合に役立ちます。
切り詰めありでデータセット全体をエクスポートこのオプションは、宛先テーブルを切り詰めてデータを削除し、その後、現在のデータセットビュー全体のスナップショットをエクスポートします。

これにより、外部テーブルは常に Foundry データセットをミラーリングしますが、「外部テーブルに効率的にミラーリング」するインクリメンタル(差分連携)オプションより効率が低くなります。

このオプションは、エクスポートの間に外部テーブルが編集され、その編集内容を常に上書きする場合に役立ちます。
インクリメンタルにエクスポート宛先テーブルを切り詰めずに、現在のビューにある未エクスポートのトランザクション_のみ_をエクスポートします。

このモードは、エクスポート対象のデータセット内の UPDATE および DELETE トランザクションに対応していません。このオプションは、同じデータを再度エクスポートしないよう、APPEND トランザクションのみを含むデータセットをミラーリングします。上流データセットに SNAPSHOT トランザクションがある場合、このモードでは宛先テーブルに重複レコードが生成されることがあります。
切り詰めありでインクリメンタルにエクスポートこのオプションは、宛先テーブルを切り詰めてデータを削除し、その後、現在のビューにある、これまでエクスポートされていないトランザクションのみをエクスポートします。

このモードは、宛先テーブルをメッセージキューとして扱う場合(たとえば、別のタスクがテーブルから行を取得して別の場所に書き込む場合)に役立ちます。

注:このモードは、上流データセット内の UPDATE および DELETE トランザクションに対応していません。
インクリメンタルにエクスポートし、APPEND 以外の場合は失敗現在のビューにある未エクスポートのトランザクションのみをエクスポートし、(初回実行後に)SNAPSHOT、UPDATE、または DELETE トランザクションがある場合は失敗します。

このオプションは、Foundry データセットに APPEND トランザクションのみが含まれている限り、そのデータセットをミラーリングします。Foundry データセットに SNAPSHOT トランザクションがある場合に、すべてのデータが再エクスポートされる可能性を防ぎ、宛先テーブルに重複データがエクスポートされないことを保証します。

レガシーエクスポートタスクでは、エクスポートモードは利用できません。

設定ページには、宛先テーブル、スキーマ、データセットの名前を入力できるフォームが表示されます

テーブルエクスポートに関する特別な考慮事項

  • Foundry からエクスポートするデータセットは、列名(大文字と小文字を区別)およびデータ型も含め、外部ソースと1対1で完全に一致している必要があります。たとえば、LONG 型の COLUMN_ABC を、COLUMN_ABC が STRING 型である宛先にエクスポートすると、実行時に失敗します。
  • テーブルエクスポートを設定する際は、ソースで必要とされる場合、DATABASE、SCHEMA、TABLE の項目を入力してください。これらの項目のいずれかが未入力の場合、エクスポートは実行時に失敗します。同様に、不要な項目を含めた場合も失敗することがあります。信頼性を最大限に高めるには、ソース探索と自動入力を使用して、ソース内の宛先を選択します。
  • テーブルエクスポートで Agent ワーカーを使用する場合、Agent は Linux ホスト上で実行されている必要があります。Windows 上の Agent は、テーブルエクスポートの実行に対応していません。
  • 表形式の宛先にエクスポートするデータセットの基盤となるファイルは、Parquet 形式である必要があります。CSV およびスキーマに対応したほかのファイル形式では、エクスポートに失敗します。
  • 宛先テーブルは、ソースシステムにすでに存在している必要があります。Foundry によって自動的に作成されることはありません。
  • 切り詰めを行うエクスポートモードを使用する場合、Foundry のソース設定に入力した資格情報には、外部システムのテーブルを切り詰める権限が必要です。
  • Array、Map、Struct 型はエクスポートに対応していません。エクスポート対象のデータセットに Array、Map、または Struct 型の列が含まれている場合、エクスポートは失敗します。

テーブルエクスポートの SQL 方言

現在、カスタム JDBC ソースタイプでテーブルエクスポートを利用できます。Foundry は Oracle などの特定のシステム向けに専用のコネクターを提供していますが、カスタム JDBC 接続を介して接続を確立しない限り、ソース機能の選択肢としてテーブルエクスポートは表示されません。

独自のドライバー JAR ファイルを指定したカスタム JDBC ソースにテーブルエクスポートを行う場合は、Palantir がデータのエクスポートに使用する INSERT 文の構文が、システムで受け入れられる SQL 方言に対応していることを確認する必要があります。

以下に、Palantir がカスタム JDBC ソースへのエクスポートに使用する INSERT 文の例を示します。現在、これらの文はカスタマイズできません。エクスポートの実行時に使用される文をシステムが受け入れない場合は、代わりにコードベースの接続オプションを使用してシステムに書き込めます。

また、データベースで使用するデータ型が、以下に示す対応データ型と互換性があることを確認する必要があります。

対応している JDBC データ型

対応している JDBC ソースのデータ型は次のとおりです。

  • DECIMAL
  • BIGINT
  • BINARY
  • BOOLEAN
  • SMALLINT
  • DATE
  • DOUBLE
  • FLOAT
  • INTEGER
  • VARCHAR
  • TIMESTAMP

対応していない JDBC データ型

対応していない JDBC ソースのデータ型は次のとおりです。

  • ARRAY
  • MAP
  • STRUCT
  • 上記の対応データ型に記載されていないその他のデータ型(GEOGRAPHY など、あまり一般的でないデータ型)

データセットに対応していないデータ型(ARRAY、MAP、STRUCT など)の列が含まれている場合、エクスポートは失敗します。

INSERT 文の例

以下の例で、テーブルエクスポートに使用される構文の詳細を示します。ソースシステムがこの形式の INSERT 文に対応していない場合、INSERT 文は実行時に失敗します。

ソースシステム内に target_table が存在し、Foundry の対応するデータセットと同じスキーマを持つと仮定します。列の名前とデータ型は、外部ソースと Foundry の間でどちらも一致している必要があります。以下は Foundry のデータセットの模擬例です。

column1column2column3
value1value2value3
value4value5value6
value7value8value9

1行に対する INSERT 文は、以下の一般的な形式に従います。

INSERT INTO target_table (column1, column2, column3) VALUES ('value1', 'value2', 'value3');

ソースタイプに応じて、INSERT 文は1行または複数行のデータに対して適用されます。たとえば、Snowflake は batch inserts に対応しているため、複数行を一度に書き込めます。

INSERT INTO target_table (column1, column2, column3) VALUES ('value1', 'value2', 'value3'), ('value4', 'value5', 'value6'), ('value7', 'value8', 'value9');

一方、Apache Hive のようなソースでは batch inserts への対応が限定的であり、3つの INSERT 文を順に実行してエクスポートします。

INSERT INTO target_table (column1, column2, column3) VALUES ('value1', 'value2', 'value3');
INSERT INTO target_table (column1, column2, column3) VALUES ('value4', 'value5', 'value6');
INSERT INTO target_table (column1, column2, column3) VALUES ('value7', 'value8', 'value9');

TRUNCATE TABLE 文の例

切り詰めを伴う完全なデータセットなどのエクスポートオプションでは、まず外部ソースの対象テーブルを切り詰めてから、INSERT 文を実行します。これを行う実際のコードは、以下の例のようになります。

TRUNCATE TABLE table_name;
INSERT INTO target_table (column1, column2, column3) VALUES ('value1', 'value2', 'value3');

より特定の方言が必要な場合は、外部トランスフォームなど、Foundry のコードベースの接続オプションの使用を推奨します。

マルチスレッドのテーブルエクスポート

一部のソースタイプはマルチスレッドのテーブルエクスポートに対応しており、エクスポートのパフォーマンスを向上させることができます。マルチスレッドのエクスポートを使用する場合、Foundry は原子性を維持するために宛先システムに一時ステージングテーブルを作成します。データはこのステージングテーブルに並列で書き込まれ、エクスポートが完了すると最終的な宛先テーブルにコピーされます。ステージングテーブルは、エクスポートの終了後に自動的に削除されます。

マルチスレッドのエクスポートを使用する場合、資格情報には宛先システムのテーブルに対する CREATE、READ、UPDATE、DELETE 権限が必要です。

エクスポート用のデータを準備する

一般に、エクスポートでは、エクスポートジョブの一部としてデータ変換を実行することはできません。つまり、エクスポート対象として選択するデータセットまたはストリームは、フィルター、ファイル名の変更や再パーティション分割、その他のデータ変換を含め、すでに目的の形式になっている必要があります。

Pipeline Builder と Code Repositories は、データ変換パイプラインを構築するための Foundry のツールです。どちらのアプリケーションも、ジョブのスケーラビリティ、監視、バージョン管理、必要に応じて任意のロジックを記述できる柔軟性など、エクスポート用のデータを準備するために必要なツールをすべて備えています。

出力ファイルの構造を制御する

構造化データを含む Foundry データセットでは、デフォルトで基になるファイルが spark/ ディレクトリの下に保存されます。エクスポート時に、たとえば日付パーティション別に整理するなど、特定のディレクトリ構造にファイルを配置する必要がある場合は、Python トランスフォームを使用して、エクスポート前に目的のレイアウトでデータセットを書き込めます。

以下の Python トランスフォームは、ファイルシステム API を使用して、日付に基づくパスにファイルを直接コピーします。

Copied!
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 from transforms.api import transform, Input, Output import datetime import shutil @transform( output_dataset=Output("/path/to/output/dataset"), input_dataset=Input("/path/to/input/dataset"), ) def compute(input_dataset, output_dataset): dt = datetime.date.today().strftime("%Y%m%d") for file_status in input_dataset.filesystem().ls(): relative_path = file_status.path[len("spark/"):] if file_status.path.startswith("spark/") else file_status.path with input_dataset.filesystem().open(file_status.path, "rb") as in_f: with output_dataset.filesystem().open(f"data_dt={dt}/{relative_path}", "wb") as out_f: shutil.copyfileobj(in_f, out_f)

このトランスフォームを使用すると、エクスポートされたデータセットには、spark/part-00000-xxx.parquet ではなく data_dt=20240101/part-00000-xxx.parquet などのパスにファイルが含まれます。エクスポート対象のデータセットとして、この変換済みデータセットを使用するようにファイルエクスポートを設定します。最初のビルド後に、データセットでスキーマを適用を選択すると、Foundry でテーブル形式のデータとして表示されるようになります。

エクスポートをセットアップする

ソースのエクスポートを有効にする

データをエクスポートするには、エクスポート先のソースの接続設定セクションでエクスポートを有効にする必要があります。エクスポートをサポートするソースタイプには、エクスポート設定タブが表示されます。デフォルトロールでは、次の権限が適用されます。

操作必要な権限
このソースへのエクスポートを有効化をオンまたはオフにするソースの所有者ロールと、情報セキュリティ責任者のエンロールメントロール。
エクスポート可能なセキュリティマーキングを追加するソースの所有者ロールに加え、マーキングのマーキングの適用権限とマーキングの解除権限。
エクスポート可能な組織を追加するソースの所有者ロールに加え、自分の所属する組織でない場合は、その組織のアクセスを拡大する権限。

情報セキュリティ責任者は Foundry のデフォルトロールです。Control Panel のエンロールメント権限で、ユーザーに情報セキュリティ責任者ロールを付与できます。

エクスポートを有効にした後、このソースにエクスポートできるマーキングを指定します。エクスポート設定に含まれていないマーキングまたは組織が付いたデータは、このソースにエクスポートできません。エクスポート可能なマーキングや組織を追加するために、情報セキュリティ責任者ロールは必要ありません。詳細については、マーキング権限、組織権限、ソース権限をご覧ください。

たとえば、Palantir 組織内に機密マーキングが付いたデータセットがあるとします。このデータセットをエクスポートするには、このソースのエクスポート可能なマーキングに、機密マーキングと Palantir 組織の両方を追加する必要があります。

エクスポート可能なマーキングは、監視ビューからの Slack 通知に表示できるリソースメタデータも制御します。

一部のワークフローでは、エクスポートされる可能性のあるデータをすべて推定できないため、ソースのエクスポート可能なマーキングによる制限を適用できません。これらのワークフローでソースを使用するには、マーキング検証なしでこのソースへのエクスポートを有効化を有効にします。たとえば、この設定は関数内の Webhookや、カスタム CI ジョブで使用するソースに必要です。

ソースのエクスポートを有効にする

Data Connection のソース設定に入力する資格情報には、外部システムのテーブルへの書き込みアクセス権が必要です。たとえば、S3 には "s3:PutObject" 権限が必要です。その他のファイルエクスポートでは、エクスポート先のパスがまだ存在しない場合、ディレクトリを作成するための特定の権限が必要になることがあります。テーブルエクスポートでは、切り詰めを行うエクスポートモードを使用する場合、追加の権限が必要になることがあります。

ソース固有の考慮事項については、ソースタイプの概要ドキュメントに記載されている各ソースのページをご覧ください。

新しいエクスポートを作成する

エクスポートを作成するには、まずエクスポート先のソースの概要ページに移動します。

そのソースで初めてエクスポートをセットアップする場合は、空のテーブルとエクスポートを作成するボタンが表示されます。

ソースのエクスポートページにある空のテーブルと、青色の「エクスポートを作成」ボタン。

エクスポートを作成を選択し、エクスポートするデータセットまたはストリームと、ソース固有のエクスポート設定オプションを選択します。これらのオプションはソースコネクターによって異なり、ドキュメントの対応するソースタイプのページで説明されています。エクスポートするデータセットに複数のブランチがある場合、master ブランチのデータのみがエクスポートされます。

以下の例は、S3 コネクターのエクスポート設定インターフェースを示しています。

S3 ソースのエクスポート設定ページ。エクスポートするデータセットと宛先、エクスポート名、ソース固有の設定を指定できます。

エクスポートを保存すると、エクスポート管理ページに移動し、次の操作ができます。

  • エクスポートを手動で実行する。
  • エクスポートのスケジュールを設定する。
  • エクスポート履歴を表示する。
  • 設定オプションを変更する。

ストリーミングエクスポートでは、実行ボタンの代わりに開始/停止ボタンを使用します。ストリーミングエクスポートにスケジュールが設定されている場合、ほかのストリームのスケジュールと同様に動作します。スケジュールがトリガーされたときにストリームが停止していれば、自動的に再開されます。スケジュールがトリガーされたときにストリームが停止していなければ、そのまま実行を続けます。

一部のソースのエクスポートオプションは、初期セットアップ後に編集できない場合があります。変更不可のオプションを変更する必要がある場合は、エクスポートを削除して再作成する必要があります。

エクスポートをスケジュールする

エクスポートは定期的に実行するようにスケジュールし、最新のデータを外部の宛先にエクスポートする必要があります。ストリーミングエクスポートは開始または停止するだけでよいため、スケジュールする必要はありません。

エクスポートをスケジュールするには、エクスポートの概要ページに移動します。次に、スケジュールを追加を選択して、Data Lineage でエクスポートを開きます。そこで画面右側の新しいスケジュールを作成するを選択し、ほかのジョブと同様に設定します。利用可能なスケジュールオプションの詳しくはこちら。

特定のエクスポートをトリガーするスケジュールは、以下のように、そのエクスポートの概要ページで表示できます。

Europe/London 時間の午前12時30分にエクスポートジョブをビルドするように設定されたスケジュールのプレビュー。

エクスポート履歴

同期と同様に、エクスポートは Foundry のビルドシステムを使用してジョブとして実行されます。エクスポートの履歴表示には、そのエクスポートに関連するジョブの履歴が表示されます。ジョブ詳細セクションの右上にあるビルドレポートを表示を選択すると、各ジョブをビルドアプリケーションで開いて表示できます。

ストリーミングエクスポートの場合、エクスポート履歴には、ストリーミングエクスポートジョブが現在実行中か停止中かも表示されます。

エクスポートとエクスポートタスクの比較

テーブルエクスポートは、現在サンセット段階にあるエクスポートタスクを完全に置き換えることを目的としています。エクスポートタスクは、公開済みの製品ライフサイクルに従って、最終的に廃止されます。エクスポートタスクが提供する機能の多くは新しいエクスポートオプションでも利用できますが、機能や設定にはいくつかの差異があります。

エクスポートタスクからテーブルエクスポートに移行する

エクスポートタスクから新しいエクスポートオプションへの移行は、手動で行う必要があります。以下に記載されているオプションを使用してエクスポートを設定します。新しいエクスポート処理が期待されるとおりに動作するようになったら、以前使用していたエクスポートタスクを手動で削除します。

エクスポートタスクで利用可能な機能に相当するオプションが新しいエクスポートにない場合は、外部トランスフォームの使用に切り替えることを推奨します。外部トランスフォームは、外部システムと連携するカスタムロジックを実行するための柔軟な代替手段であり、ソースの機能に関する UI 設定オプションで必要な機能を実現できない場合に使用することを想定しています。

エクスポートとエクスポートタスクの機能比較

エクスポートタスクのオプション新しいエクスポートでの対応詳細
parallelize: <boolean>ソースタイプによるこのオプションが適用されるかどうかはソースによって異なる場合があります。対応している場合は、ソース固有のエクスポート設定に記載されます
preSql: <sql statements>非対応ユースケースでこの機能が必要な場合は、外部トランスフォームを使用します。
stagingSql: <sql statements>非対応ユースケースでこの機能が必要な場合は、外部トランスフォームを使用します。
afterSql: <sql statements>非対応ユースケースでこの機能が必要な場合は、外部トランスフォームを使用します。
manualTransactionManagement: <boolean>非対応ユースケースでこの機能が必要な場合は、外部トランスフォームを使用します。
transactionIsolation: READ_COMMITTED設定不可ソースの設定オプションとして利用できる場合があり、エクスポートの実行時に適用されます。この設定オプションが利用可能かどうかは、ソース固有のドキュメントを確認してください。
datasetRid: <dataset rid>対応エクスポートするデータセットまたはストリーム
branchId: <branch-id>設定不可データは常に master ブランチからエクスポートされます。
table:
    database: mydb # Optional
    schema: public # Optional
    table: mytable
対応これらのオプションは、JDBC ソースのテーブルエクスポートに固有のものです。
writeDirectly: <boolean>設定不可新しいエクスポートでは、常に writeDirectly: true に相当するオプションが使用されます。
copyMode: <insert|directCopy>設定不可新しいエクスポートでは、常に copyMode: insert に相当するオプションが使用されます。
batchSize: <integer>ソースタイプによるJDBC ソースのエクスポートではバッチサイズに対応していますが、ほかのソースタイプでは対応していない場合があります。
writeMode: <ErrorIfExists|Append|Overwrite|AppendIfPossible>

incrementalType: <snapshot|incremental>
対応これらのオプションを組み合わせると、上記のテーブルエクスポートモードと同様になります。エクスポートタスクですべての組み合わせが有効なわけではなく、これらの組み合わせはテーブルエクスポートで提供される6つのモードに正規化 ↗されています。
exporterThreads: <integer>非対応エクスポータースレッドを細かく制御する必要がある場合は、外部トランスフォームを使用します。
quoteIdentifiers: <boolean>非対応このオプションは、ターゲットシステムでテーブルを作成する場合にのみ適用されますが、新しいエクスポートはテーブルの作成に対応していません。エクスポートを設定するには、テーブルがあらかじめ存在している必要があります。
exportTransactionIsolation: READ_UNCOMMITTED設定不可transactionIsolation: READ_COMMITTED と同様に、トランザクション分離レベルがソースの設定で利用可能であり、設定されている場合は、その値が使用されます。