CarPlay
帰り道に、エージェントと話そう。
iPhone を接続すると、車の画面に Herald が表示されます。ボットやグループルームを選び、見逃したメッセージを聞いて、声で返信できます。視線は道路に向けたまま、仕事は進んでいきます。
運転中は音声で操作することを Apple が求めているため、音声専用の設計です。iOS 26.4 以降の iPhone と、CarPlay に対応した車が必要です。
動作条件
- iPhone
- iOS 26.4 以降で、Herald が Hermes に接続されていること
- 車
- CarPlay に対応した車またはヘッドユニット
- Herald のビルド
- Apple の CarPlay エンタイトルメントを含むもの。含まれている場合に限り、「設定 › 一般」に CarPlay のセクションが表示されます。
- Hermes 側
- 音声認識（
stt.enabled）がオンで、動作するプロバイダーがあること。音声合成は任意です。 - 権限
- Herald へのマイクのアクセス
- 価格
- App Store での 1 回の購入に含まれます
ドライブ中の流れ
iPhone が接続されると、Herald は車で最後に使ったボットを再び開き、そのボットがオンラインなら聞き取りを始めます。Apple は音声アプリに音声を中心とした操作を求めているため、画面に触れずに話し始められます。それ以外の場合は一覧が表示されます。ボットとグループルームが並び、ピン留めしたものが先頭に来ます。
1 つを選ぶと、Herald はメッセージアプリのように動作します。新しい未読の返信を最大 5 件読み上げてから、あなたが「聞く」をタップするのを待ちます。未読のないルームでは、すぐに聞き取りを始めます。あなたが話し、間が空くとあなたの番が終わり、録音したクリップは、スマートフォンの音声メッセージとまったく同じように、文字起こしのためにあなたの Hermes に送られます。話した内容は iPhone のチャットにも残るので、車の中で話したことが失われることはありません。
返信は、Hermes の音声合成によるボット自身の声で、それがうまくいかない場合は iPhone の音声で話され、その後 Herald は再び聞き取りを始めます。グループルームでは、各メンバーの返信が順番に読み上げられます。Herald が話しているあいだは音楽の音量が下がり、スマートフォン本体のスピーカーが使われることはありません。
CarPlay の 2 つの画面
| 画面 | 表示する内容 | ボタン |
|---|---|---|
| ボットの一覧 | ボットとグループルーム。ピン留めしたものが先頭で、写真または絵文字付き | 行をタップすると会話を始めます |
| 音声 | 聞き取り中、考え中、話し中、待機中、エラーの状態。単独のボットではそのペットも表示 | 「聞く」「停止」「ボット」 |
これは CarPlay アプリ向けの、Apple の音声ベースの会話カテゴリです。このカテゴリのアプリは、音声画面が表示されているあいだに限り、車のマイクから録音できます。
使えるようにする
- iPhone で Herald と Hermes をペアリングする
コンピュータで
npx herald-setupを実行し、QR コードを読み取ります。自宅の Wi-Fi から離れても車から Hermes に接続できるよう、Tailscale（英語）を使ってください。 - お使いのビルドが CarPlay に対応しているか確認する
「設定 › 一般」を開きます。「CarPlay の Herald」と書かれた CarPlay のセクションがあれば、そのビルドは CarPlay に対応しています。車に接続しているあいだは「現在車に接続中」と表示されます。
- スマートフォンで音声認識をテストする
任意のチャットで音声メッセージを送ります。文字起こしに失敗した場合、Herald は「音声認識がオフになっています」のように理由を表示します。その場合、車でも同じように失敗します。
- 車に接続する
CarPlay の画面から Herald を開き、ボットを選んで話しかけます。終わったら「停止」を、一覧に戻るには「ボット」をタップします。
CarPlay でできないこと
- 返信のテキスト、コード、画像、ファイルの表示。すべて音声で読み上げます。
- メッセージの入力や編集。
- コマンドの承認。車には承認ボタンがないため、安全なときにスマートフォンで対応してください。
- ボットやルームの作成、設定の変更。
会話が止まるとき
Herald は、あなたが「停止」をタップしたとき、録音が 2 回続けて空だったとき、ボットが 3 分以内に答えなかったとき（「ボットが時間内に応答しませんでした」）、Hermes への接続が切れたとき、または接続を外したときに聞き取りを止めます。電話がかかってくると一時停止し、通話が終わると聞き取りを再開します。車が話しているあいだは、スマートフォンの「Hey Herald」の聞き取りは休止するので、2 つがマイクを取り合うことはありません。
車の画面は、Herald で選んだ言語（英語、日本語、ブラジルポルトガル語）で表示されます。
プライバシー
車のマイクの音声は iPhone に送られ、そこから文字起こしのためにあなた自身の Hermes に送られるだけで、ほかのどこにも送られません。経路に Herald のサーバーはありません。Hermes はあなたが設定した音声プロバイダー（ローカルの Whisper を含む）を使うので、ローカルのプロバイダーなら音声があなたのマシンの外に出ることはありません。
よくある質問
車の画面に Herald が表示されないのはなぜですか？
次の 3 点を確認してください。iPhone が iOS 26.4 以降であること、Herald の「設定 › 一般」に CarPlay のセクションがあること、そして Herald が Hermes に接続されていることです。CarPlay のセクションがない場合、お使いのスマートフォンのアプリは Apple の CarPlay エンタイトルメントを含まずにビルドされています。
車の画面で返信を読めますか？
いいえ。CarPlay の音声アプリは話すもので、会話のテキストは表示しません。返信の全文は、駐車したときに iPhone のチャットで読めます。
グループルームでも使えますか？
はい。ルームを選ぶと、Herald がメンバーの新しい発言を読み上げ、あなたが話したことをルームに送ります。詳しくはグループチャット（英語）をご覧ください。
運転中にボットが承認を求めてきたらどうなりますか？
そのターンはあなたを待ちます。CarPlay には承認ボタンがなく、3 分たつと車の画面にボットが時間内に応答しなかったと表示されます。停車してから、スマートフォンで承認または拒否してください。
CarPlay には追加料金がかかりますか？
いいえ。iPhone、iPad、Apple Watch と同じ App Store での購入に含まれています。
