注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。
Spark SQL コネクターは、Spark SQL 用の Palantir 提供ドライバーです。
新しい Spark SQL ソースを作成するには、Palantir 提供ドライバーの標準セットアップフローに沿って進め、以下のセクションで Spark SQL 固有の設定とネットワーク設定を行います。プロパティの詳細については、Spark SQL ドライバーの公式ドキュメント ↗を参照してください。
Spark SQL コネクターは開発のベータ版段階にあり、お使いのエンロールメントでは利用できない場合があります。開発が活発に進められている間は、機能が変更される可能性があります。
| 機能 | ステータス |
|---|---|
| 探索 | 🟡 ベータ版 |
| バッチ同期 | 🟡 ベータ版 |
| インクリメンタル（差分連携） | 🟡 ベータ版 |
| テーブルエクスポート | 🟡 ベータ版 |
以下のプロパティは必須または推奨です。
| プロパティ | 必須かどうか | 説明 | デフォルト |
|---|---|---|---|
AuthScheme ↗ | 必須 | 使用する認証方式です。指定できる値は Plain、LDAP、NOSASL、Kerberos です。 | Plain |
Server ↗ | 必須 | SparkSQL データベースをホストするサーバーのホスト名または IP アドレスです。 | {serverAddress} |
UseSSL ↗ | 必須 | Hive に接続する際に SSL 暗号化を使用するかどうかを指定します。 | TRUE |
Database ↗ | 推奨 | SparkSQL データベースの名前です。 | — |
Password ↗ | 推奨 | SparkSQL での認証に使用するパスワードです。 | — |
Port ↗ | 推奨 | SparkSQL データベースのポートです。 | 10000 |
TransportMode ↗ | 推奨 | Hive サーバーとの通信に使用するトランスポートモードです。指定できる値は BINARY と HTTP です。 | BINARY |
User ↗ | 推奨 | SparkSQL での認証に使用するユーザー名です。 | — |
以下のテーブルは、ソースの実行に必要なアクセス先ドメインを示しています。
ドメインごとに、対応するエグレスポリシーを追加します。ソースがオンプレミスでホストされており、Foundry から直接アクセスできない場合は、代わりに Agent プロキシエグレスポリシーを使用します。Agent ホスト自体も、記載されているドメインにアクセスできる必要があります。詳細については、Agent をプロキシとして使用するを参照してください。
| ドメイン | 必須となる条件 |
|---|---|
| <Server>:<Port> | 常に必須です。Server および Port 接続プロパティで指定します。デフォルトは Port=10000 です。 |
| <KerberosKDC>:88 | AuthScheme=Kerberos の場合 |
| <KerberosServiceKDC>:88 | AuthScheme=Kerberos で、Kerberos トポロジーが複数のレルムを使用する場合 |
このコネクターはテーブルエクスポートをサポートしています。テーブルエクスポートをセットアップする方法を参照してください。