JARVIS

您自己的语音个人助手：从语音到文本，再到大语言模型（LLM），最终转换为语音，并在网页界面中显示。

工作原理

1. :microphone: 用户对着麦克风讲话
2. :keyboard: 使用 Deepgram 将语音转换为文本（语音转文本服务）
3. :robot: 文本被发送到 OpenAI 的 GPT-3 API 以生成回复
4. :loudspeaker: 回复通过 ElevenLabs 转换为语音（文本转语音服务）
5. :loud_sound: 使用 Pygame 播放语音
6. :computer: 对话内容通过 Taipy 在网页上显示

视频演示

需求

Python 3.8 - 3.11

确保您拥有以下 API 密钥：

• Deepgram
• OpenAI
• Elevenlabs

安装方法

1. 克隆仓库

git clone https://github.com/AlexandreSajus/JARVIS.git

2. 安装依赖

pip install -r requirements.txt

3. 在根目录下创建一个 .env 文件，并添加以下变量：

DEEPGRAM_API_KEY=XXX...XXX
OPENAI_API_KEY=sk-XXX...XXX
ELEVENLABS_API_KEY=XXX...XXX

使用方法

1. 运行 display.py 启动网页界面

python display.py

2. 在另一个终端中运行 jarvis.py 启动语音助手

python main.py

• 准备就绪后，网页界面和终端都会显示 Listening...
• 现在您可以对着麦克风讲话
• 停止讲话后，它将显示 Stopped listening
• 然后开始处理您的请求
• 回复准备好后，它将显示 Speaking...
• 回复将被播放并显示在网页界面中。

以下是一个示例：

Listening...
Done listening
Finished transcribing in 1.21 seconds.
Finished generating response in 0.72 seconds.
Finished generating audio in 1.85 seconds.
Speaking...

 --- USER: good morning jarvis
 --- JARVIS: Good morning, Alex! How can I assist you today?

Listening...
...

JARVIS 快速上手指南

JARVIS 是一个语音个人助手工具，支持从语音输入到文本处理，再到生成语音输出，并通过网页界面展示对话内容。

---

环境准备

系统要求

• Python 3.8 - 3.11

前置依赖

在使用 JARVIS 之前，请确保已获取以下 API 密钥：

• Deepgram API Key
• OpenAI API Key
• ElevenLabs API Key

---

安装步骤

1. 克隆代码仓库：

   git clone https://github.com/AlexandreSajus/JARVIS.git
   

2. 安装依赖：

   pip install -r requirements.txt
   

3. 创建 .env 文件并添加 API 密钥： 在项目根目录下创建 .env 文件，并填入以下内容：

   DEEPGRAM_API_KEY=XXX...XXX
   OPENAI_API_KEY=sk-XXX...XXX
   ELEVENLABS_API_KEY=XXX...XXX
   

---

基本使用

1. 启动网页界面： 在终端中运行以下命令：

   python display.py
   

2. 启动语音助手： 在另一个终端中运行以下命令：

   python main.py
   

3. 使用流程：

   • 当终端显示 Listening... 时，表示助手正在监听。
   • 对着麦克风说话，停止说话后会显示 Stopped listening。
   • 助手将处理您的请求，并显示 Speaking...。
   • 处理完成后，语音响应会被播放，同时对话内容会显示在网页界面上。

示例交互：

Listening...
Done listening
Finished transcribing in 1.21 seconds.
Finished generating response in 0.72 seconds.
Finished generating audio in 1.85 seconds.
Speaking...

 --- USER: good morning jarvis
 --- JARVIS: Good morning, Alex! How can I assist you today?

Listening...
...

---

以上为 JARVIS 的快速上手指南，祝您使用愉快！