ローカルアプリ · NOTE4

Codex ペット

デスクのピクセルパートナーが Codex のタスクに追従。作業中、対応待ち、完了、エラーをひと目で確認できます。

できること

ローカル Codex のタスク状態に追従
複数タスク一覧と手動ページ送り
ピクセルペットのアニメーションと通知音
ほかの Agent からの状態報告にも対応

インストールと使い方

ローカルプログラムを作り、プラグインを接続

公開 SDK で PC 上のプログラムを作り、選んだプラグインを接続します。ローカル AI にビルドと移植を依頼し、最後にデバイス上の結果を確認できます。

公開ソース

Local Push SDK · ローカル Agent の状態 · NOTE4

SDK のビルドとローカルテストは Apple Silicon macOS で確認済みです。Windows と Linux は OS ごとの検証が必要で、プラグイン固有の依存関係も移植が必要な場合があります。

  1. SDK でローカルプログラムをビルド

    公開の Local Push SDK を取得し、OS に合わせて Rust とビルドツールを用意します。サンプルのビルドとローカルテストを通してから、デバイス接続と画面出力を実装します。現行 SDK は NOTE4 ファームウェア 3.7.2 に対応します。

  2. ペットとタスク状態を接続

    タスク状態とペットのロジックを再利用し、PNG 描画、ボタンでのページ切替、通知音をローカルプログラムで実装します。元のランタイム呼び出しを SDK に接続し、ローカル Codex のパスと状態取得方法を確認して、プライバシー設定を保持します。

  3. ローカル Codex の追従を確認

    新規インストールではローカル Codex の追従が初期設定で有効になり、更新時は既存の設定を保持します。追従設定を確認し、テストタスクで作業中・待機中・完了の状態を確認します。必要に応じてアニメーションと音量を調整し、対応が必要な場合は該当 Agent のウィンドウに戻ります。

Local Push SDK を入手 ↗

PC 上の Codex や他のローカル AI にタスクを渡してください。SDK とローカルプログラムを準備してから、プラグインのインターフェースを確認・移植します。

AI に渡す内容を見る
Local Push SDK を使って私の PC にローカルプログラムを構築し、Codex ペットの機能を接続して検証してください。
プロジェクトのリポジトリ:https://github.com/itopinion/zectrix-agent-pet
インストール説明:https://github.com/itopinion/zectrix-agent-pet/blob/main/README.md
情報確認日:2026-10-20、参照コミット:2c9213dda1063f6f8a19a4470eed0b367d14b6ef。実行前に現行バージョンを再確認してください。
Local Push SDK:https://github.com/itopinion/zectrix-local-push-sdk
SDK API 文書:https://github.com/itopinion/zectrix-local-push-sdk/blob/main/docs/API.md
SDK 互換性一覧:https://github.com/itopinion/zectrix-local-push-sdk/blob/main/compatibility.json
必要環境:Local Push SDK · ローカル Agent の状態 · NOTE4
接続方法:公開 SDK でローカルプログラムを作り、アプリの処理、描画、デバイスイベントを接続します。実行時には最新ソースのインターフェースと依存関係を確認します。
最初に現行 SDK の README、API 文書、互換性一覧を読んでください。SDK 0.1.0 は NOTE4 ファームウェア 3.7.2、400×300 のキャンバスに対応し、NOTE4C は対象外です。実際のデバイスを確認し、ファームウェアを自動更新しないでください。
1. OS とプロセッサーを確認し、既存の SDK とローカルプログラムがあれば互換性を確認して再利用します。なければ公開 SDK をクローンし、最新の README に従って Rust、C/C++ コンパイラー、CMake を用意し、パス依存でこの PC 向けにビルドします。
2. まず cargo test --locked と cargo check --locked --examples を実行します。デバイス選択、単一接続の管理、PNG 描画、イベント処理、設定保存、終了時の解放処理を実装します。SDK に既製のプラグインローダーはありません。
3. プラグインのソースを読み、処理ロジックを再利用して、描画、デバイスイベント、音声のインターフェースをローカルプログラムに移植します。必要な呼び出しインターフェースや互換レイヤーを実装し、依存名の置換だけで接続成功としないでください。
4. プラグインの要件に合わせ、描画、状態管理、ボタン操作、音声機能をローカルプログラムに実装し、機能ごとにテストします。完了した機能と実際に発生した問題を記録し、テスト結果に基づいて利用可能な範囲を報告してください。
5. NOTE4 と PC は相互通信できる LAN に接続します。SDK の案内に従って待機中の Wi-Fi 維持を有効にしてください。接続前に対象デバイスと他のプログラムによる使用状況を確認し、接続を奪わないでください。ローカル接続に ZECTRIX Cloud API Key は不要です。データソース用のキーはプラグインごとに設定します。
6. 元の 400×300 PNG を渡し、SDK で mono、gray4、gray16 に変換します。二重にディザリングしないでください。対話中は next_event() を継続して受け取り、終了時は close() を呼びます。自動再接続や接続の奪取を行わず、ResultUnknown を失敗と見なして画像や音声を再送しないでください。
7. SDK に ASR、TTS、大規模言語モデルは含みません。必要な音声バックエンドは別途設定します。再生は 16 kHz モノラル PCM16、録音はデバイスのボタンで開始します。初回送信はユーザーが対象とプレビューを確認してから行います。

このプロジェクトの接続手順:
1. SDK でローカルプログラムをビルド: 公開の Local Push SDK を取得し、OS に合わせて Rust とビルドツールを用意します。サンプルのビルドとローカルテストを通してから、デバイス接続と画面出力を実装します。現行 SDK は NOTE4 ファームウェア 3.7.2 に対応します。
2. ペットとタスク状態を接続: タスク状態とペットのロジックを再利用し、PNG 描画、ボタンでのページ切替、通知音をローカルプログラムで実装します。元のランタイム呼び出しを SDK に接続し、ローカル Codex のパスと状態取得方法を確認して、プライバシー設定を保持します。
3. ローカル Codex の追従を確認: 新規インストールではローカル Codex の追従が初期設定で有効になり、更新時は既存の設定を保持します。追従設定を確認し、テストタスクで作業中・待機中・完了の状態を確認します。必要に応じてアニメーションと音量を調整し、対応が必要な場合は該当 Agent のウィンドウに戻ります。
初回検証:テストと明示したタスクで作業中・待機中・完了を検証し、ページ送りと通知音を確認してください。デモ状態を実際のタスク進捗として扱わないでください。
ビルド、プレビュー、デバイスの表示完了応答、実画面の確認を分けて報告します。起動、停止、アンインストール、更新の手順を示し、既存データを保持してください。対話型アプリは PC 上のプログラムの継続実行が必要です。
アカウント、キー、デバイスアドレス、個人データは端末上でのみ設定し、共有タスクやログに含めないでください。AI にローカル実行環境がなければ、ビルドと接続の計画を渡し、インストール済みとは報告しないでください。

導入後は、ここを確認

テストと明示したタスクで作業中・待機中・完了を検証し、ページ送りと通知音を確認してください。デモ状態を実際のタスク進捗として扱わないでください。

インストール後、デバイス上の実際の動作を確認してください。タスクをコピーするだけではインストールは実行されません。

よくある質問

ダウンロードしたプラグインを SDK に直接インストールできますか?

SDK はデバイスとの接続機能を提供します。ローカルプログラムを作り、プラグインの処理、描画、イベント、音声インターフェースを接続します。このページのタスクをローカル AI に任せることもできます。

デバイス上で Codex の操作を承認できますか?

できません。デバイスは表示と通知用で、確認ボタンは自動追従に戻すためのものです。承認や回答は元の Agent ウィンドウで行います。

ソースと今後の更新はどこで確認できますか?

ソースは公開済みで、今後の改善もこの GitHub リポジトリで継続して公開します。インストール前に AI に現在の README、バージョン、変更内容を確認してもらい、お使いの OS 向けにビルドしてください。更新時は既存の設定とデータを保持します。

推論用 API Key は必要ですか?

ペット自体に推論 API Key は不要で、音声認識モデルもインストールしません。Agent からの報告やローカル追従で取得したタスク状態を表示します。

プロジェクトと更新情報

公開リポジトリ。2026-10-20 に資料を確認しました。対応範囲は実際のバージョンによります。

今後の改善は GitHub リポジトリで継続して公開します。インストールや更新の前に、AI に現在の README とバージョンの変更内容を確認してもらい、既存の設定とデータを保持してください。

ソースと説明を見る ↗
ローカルアプリ · NOTE4使ってみる →

プロジェクト情報は support@zectrix.com に送信され、審査後に掲載されます。メールアドレスは投稿に関する連絡にのみ使用します。