---

データ型

union board を使用する際には、ユーザーの列のデータ型に注意してください。互換性のある列の型はキャストされます。具体的な例として、2つのデータセットを使用しましょう。

データセット1

データセット2

データセット1から始めて、データセット2から位置による行の追加を行うと、結果のセットは以下のようになります：

データセット1から始めて、データセット2で位置により表示される行を保持すると、結果のセットは以下のようになります：

開始セットには列 ID が int 型として含まれていたにもかかわらず、結果のセットでは long 型になっていることに注意してください。表示される行を保持するは、spark の Intersect 関数を使用します。

データセット1から始めて、データセット2で位置により表示される行を削除すると、結果のセットは以下のようになります：

同様に、開始セットには列 ID が int 型として含まれていたにもかかわらず、結果のセットでは long 型になっていることに注意してください。表示される行を削除するは、spark の Except 関数を使用します。

---

パフォーマンスに関する考慮事項

• 2つのテーブルを結合するためのキーを選択する際には、可能な限り一意の ID (プライマリーキーなど) を使用することを推奨します。外部キーによる結合は、Spark をクラッシュさせる可能性があるため、強く 推奨しません。
• 複雑な結合や式の後には、データセットとして保存機能を使用して作業を「保存」してから続行することを推奨します。これにより、結合がディスクに永続化されるため、下流のクエリのパフォーマンスが向上します。

結果の確認

データセットを結合した後、結果が期待通りであるかを確認するために、結合セットのテーブルを見ることをお勧めします。アクションリボンでテーブルを選択し、新しく結合されたセットをスクロールします。