注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。
Foundry から価値を引き出すための最初のステップは、組織のデータソースに接続することです。Foundry のデータ接続ツールは、クラウドベースのオブジェクトストア、ファイルシステム、データベース、データウェアハウスなど、標準的なエンタープライズデータソースを幅広くサポートしています。
アクセスする必要があるデータの種類に応じて、さまざまな Foundry アプリケーションを使い、さまざまな方法でデータに接続できます。
ソースに接続して、バッチ同期、ストリーミング同期、メディア同期、CDC 同期を実行し、仮想テーブルを使用します。
Data Connection フレームワークは、データセットのトランザクションで管理される個別のバージョンを通じて、データを継続的に管理するように設計されています。このフレームワークにより、時系列に沿ったデータバージョンの完全なリネージが得られ、どの同期タスクがデータセットのどのバージョンを生成したかを把握できます。また、同期のたびにデータ全体を読み込めない場合には、必要なデータのみを同期できます。
Data Connection のきめ細かなセキュリティにより、異なるチームにデータ同期の管理を分散できます。同期のグループ、あるいは個別のデータ同期について、特定のチームのみが閲覧または編集できるように設定できます。これらのチームは、ロールベースまたは機密情報区分ベースのアクセス制御によって定義されます。データ基盤の保護について詳しくはこちら。
同期メタデータは、実際の同期定義とは独立して管理できます。これにより、新しい設定を完全にブランチ化でき、新しい同期が下流の変換ジョブに影響を及ぼす前に、ブランチ内でサンドボックス化してテストできます。
単純なデータ同期ソリューションを超えて発展させるために、Palantir HyperAuto は Software-Defined Data Integration (SDDI) をサポートしています。このツールセットを使うと、組織は一般的な ERP システムや CRM システムに接続するだけでなく、データセットをクレンジング、正規化、調和して一体的なデータ資産にまとめるデータパイプラインを、かつてない速さでプログラムによって生成できます。このデータ資産をオントロジーに取り込むことで、データを業務上の価値に変換できます。
REST API を使用して、外部システムとのスケジュール同期および外部システムへのエクスポートを実行します。
外部ソースに接続して同期を作成し、データをエクスポートする場合は、Code Repositories で REST API を使用する外部 Python トランスフォームを記述することを推奨します。トランスフォームにデータセット入力とメディアセット出力を追加することもできます。