Ten Agent

🚀 TEN代理组件

TEN代理は、複数のAI技術を統合したリアルタイム音声アシスタントプラットフォームで、マルチモーダルなインタラクションとモジュール化拡張をサポートしています。

✨ 主な機能

• リアルタイム音声処理：DeepgramのASRとFishAudioのTTSを基に、音声インタラクションを実現します。
• AI推論能力：OpenAI APIを統合し、スマートな会話を可能にします。
• リアルタイム音声・ビデオ：Agora.ioを利用して、リアルタイム通信機能を構築します。
• 拡張プラグインサポート：モジュール化設計により、機能拡張が容易です。

プロジェクトアーキテクチャ

📦 インストール

システム要件

• プロセッサ：デュアルコア以上
• メモリ：4GB以上
• 必須ツール：
  • Dockerコンテナ実行環境
  • Node.js LTSバージョン18.x

macOSの設定に関する注意事項

Apple SiliconのMacの場合、Docker設定で「Rosettaを使用してx86/AMD64をエミュレートする」のチェックを外してください。注意：これにより、ARMアーキテクチャでのビルド速度が低下する可能性がありますが、x64サーバーにデプロイした後は正常なパフォーマンスが得られます。

インストール手順

1. .envファイルを作成する

   cp ./.env.example ./.env
   

2. Agoraキーを設定する .envファイルの以下の変数を更新します。

   AGORA_APP_ID=
   AGORA_APP_CERTIFICATE=
   

3. 開発コンテナを起動する

   docker compose up -d
   

4. コンテナ環境に入る

   docker exec -it ten_agent_dev bash
   

5. プロキシサービスをビルドする

   task use
   

6. Webインターフェイスを実行する

   task run
   

7. Playgroundを設定する アドレスを開きます：localhost:3000 で、必要なモジュールとプラグインを選択します。

💻 使用例

Geminiリアルタイムプラグイン

1. Playground画面を開きます。
2. 「voice_assistant_realtime」図を選択します。
3. Geminiリアルタイムモジュールを選択します。
4. v2v拡張を追加し、APIキーを設定します。

📚 ドキュメント

プロジェクトコンポーネント

コミュニティへの参加

• Discord：リンク
• GitHubリポジトリ：リンク

貢献ガイドライン

1. コード規約：
   • ES6標準に従います。
   • 2スペースのインデントを使用します。
2. コミット規則：
   • コミットメッセージにはタイプと目的を含める必要があります。
   • 関連するドキュメントを提供します。

📄 ライセンス

このプロジェクトはMITオープンソースライセンスに準拠しています。