新しいUIを作る
Codex DesktopやClaude Desktopに画面を説明。提案を確認してから次の操作へ。
よく使う操作を、ボタンへ。
AIとバグを調べる
問題と期待する動作を話す。差分を確認し、設定したショートカットで操作。
知らないコードを理解する
関数の説明をAIに依頼。回答を読み、資料を開いて追加で質問。
話す。見る。押す。
MacのAI操作を手元に。音声で依頼し、結果を見て設定した操作を実行します。
デスクトップ操作のイメージです。動作は設定と前面アプリによります。マイクやAIには接続しません。
自分の作業に合わせて設定。
Siri Remoteのボタンを選び、必要な操作やショートカットを設定します。
設定するボタンを選ぶ
Buttons を開き、リモコンのボタンと動作を選びます。
アプリごとの動作
既定の動作を保ちつつ、表示中の ChatGPT / Codex や Claude Desktop など、アプリごとに設定できます。
1つのボタン、複数の押し方
Siri の設定では、1回押し・2回押し・長押しを区別します。カスタム動作は自動判定より優先されます。
音声設定を選ぶ
Voice では Auto・Online・Local と、音声認識・テキストモデルを個別に選べます。処理方法は選択したサービスによります。
開発者提供のアプリ画面。表示言語と項目は撮影したバージョンによって異なります。
ひとつの操作から始める。
インストール、ペアリング、Buttonsで設定。前面アプリで試してから操作を追加します。
ダウンロードして開く
ダウンロードを解凍し、SayRemoteをアプリケーションに移して開きます。
ペアリングと権限付与
MacのBluetooth設定でペアリング。アクセシビリティと入力監視を許可します。
ボタン設定を選択
Buttonsでボタンと操作を選び、前面アプリで試します。
ダウンロード前に互換性を確認してください。
- お使いのMac
- 提供されるv0.2.3はmacOS 13以降のAppleシリコン搭載Mac専用です。Intel版の提供はありません。
- お使いのリモコン
- Siri Remote Gen 3 (USB-C)推奨。Gen 1、Xiaomi Remote 2 Pro、Xiaomi Remote Standardにも対応。
- 音声モード
- アプリ単体ではMac内蔵マイクを使用。リモコン音声にはFull Setup、Apple PacketLogger、追加権限が必要です。
始める前のよくあるご質問。
すべての変更を自動承認しますか？
操作は設定と前面のCodex Desktop画面によります。結果を確認し、対応するショートカットだけを設定してください。
SayRemoteはハードウェアですか、ソフトウェアですか？
SayRemoteはMac用アプリです。Siri Remote Gen 3、Gen 1、Xiaomi Remote 2 Pro、Xiaomi Remote Standardをポインタ操作、スクロール、ショートカットに割り当てます。リモコン本体は付属しません。
音声データはMacの外に送信されますか？
音声処理はエンジンと設定によります。ローカル処理にはApple Speech、WhisperKit、Ollamaがあります。GeminiやOpenAIは選択したサービスへデータを送り、料金が発生する場合があります。
高度なリモコンマイク設定は必須ですか？
ボタン、スクロール、Macのマイクには不要です。追加要件を満たし、リモコンから音声を取り込む場合のみFull Setupを選びます。
別の使い方も見てみる。
Codex Desktop
Macのマイクで変更を伝え、提案をスクロールし、設定したボタンを操作します。
Claude Desktop
Claude Desktopへ依頼し、自分のペースで回答を読んで、設定した操作で続けます。
ChatGPT
Siri Remoteで音声入力を起動し、長い回答をスクロールして入力欄へ戻る。SayRemoteなら、次の質問がいつでも手元にあります。
日常の執筆
下書きを選択して修正指示を話すだけ。AIプロバイダを設定すれば、SayRemoteが選択テキストを書き直すか、結果をクリップボードにコピーします。
エルゴノミクス
長文の回答を読んだり、コードの差分を確認するとき。背もたれに体を預けても、立ち上がっても、スクロールや操作は手元のまま。
Macのメディア
設定したSiri Remoteのボタンで再生を止め、音量を変え、アプリを切り替えます。
プレゼン
開発プレビュー · ダウンロードはベータv0.2.3。このパッケージでPresenter Proは未確認です。