注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

リアルタイム音声

音声は、オントロジーを通じてプラットフォームのほかの機能とやり取りするためのモダリティです。会話の前および会話中にオントロジーからコンテキストが取得され、リアルタイムモデルはそのコンテキストに基づいて音声を聞き取り、文字起こしを行い、必要に応じて音声で応答したり、ツールを呼び出したりできます。結果はオントロジーに書き戻され、そこで関数、パイプライン、AIP Logic、Workshop、アクション、およびその他の Foundry の機能を利用できます。

ユースケースには次のようなものがあります。

  • 口述。 1人の話者が決定事項、観測、またはメモを口述します。システムは音声を文字起こしし、エンティティを抽出して、話者の権限でオントロジーに書き込みます。
  • 会議。 システムは複数の話者の音声を文字起こしし、話者を識別して、リアルタイムでオントロジーのオブジェクトとして構造化します。
  • 通話中の支援。 人が顧客と通話しています。Foundry アプリケーションは音声を聞き取り、会話を文字起こしし、通話中の Foundry ユーザーに関連するオントロジーのコンテキストを提示して、通話が終了すると結果を書き戻します。
  • 音声操作インターフェース。 Foundry ユーザーは手動で操作する代わりに音声でコマンドを出し、オントロジーのクエリ、アクションの実行、ワークフローの操作をハンズフリーで行います。

録音、文字起こし、および同意

録音と同意はご自身の責任です

リアルタイム音声を使用して構築したアプリケーションは、人の発話を取得し、文字起こしするなどの処理を行います。多くの法域では、録音を開始する前に、録音または文字起こしが行われることを参加者に通知する必要があり、明示的な同意を必要とする法域もあります。これは、参加者がアプリケーションのユーザーである場合、通話相手の第三者である場合、または音声が取得されるその他の人である場合のいずれにも適用される可能性があります。これらの要件を遵守する責任は、アプリケーションの開発者およびアプリケーションをデプロイする組織にあります。

リアルタイム音声ワークフローをデプロイする前に、次の事項を実施してください。

  • アプリケーションが使用されるすべての法域で適用される法的要件および規制要件を確認してください。
  • 音声の取得が始まる前に適切な通知と同意取得が行われるよう、アプリケーションにフローを組み込んでください。
  • 同意に関する方針とデータ保持の運用方法を、アプリケーションと併せて文書化してください。
  • 組織の内部ポリシー、コンプライアンス要件、および法的義務に従ってください。

デプロイ前にこれらの要件を確認し、必要な同意を取得することは、ご自身の責任です。

はじめに

最初の音声対応アプリケーションを構築するには、チュートリアル音声対応のオントロジー SDK アプリケーションを構築するに沿って進めてください。

利用可能なモデル

サポートされているリアルタイムの音声から音声への変換モデルおよび文字起こしモデルの一覧については、利用可能な音声モデルを参照してください。