百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

基于OpenAI-Whisper的语音聊天机器人

bigegpt 2024-10-07 06:27 4 浏览

你好!今天,我想给你提供一些关于聊天机器人的信息以及这种技术的工作原理。如今,聊天机器人被广泛应用于各种场景,我决定自己尝试一下这项技术。我创建了一个使用 OpenAI 的 Whisper 模型的聊天机器人。该模型能够将收到的音频输入转换为文本,然后将这些基于文本的问题传递给 OpenAI 的 LLM 模型以获取响应。现在,我正在解释这个聊天机器人的工作原理以及如何设置,因此你可以和我一起走这段旅程。

下载 Requirements.txt 文件

openai
flask
python-dotenv
flask-cors

创建 requirements 文件后,您可以使用以下命令下载它:

pip3 install -r requirements.txt

导入库

from openai import OpenAI, OpenAIError
from flask import Flask, request, jsonify
from dotenv import load_dotenv
import os
from flask_cors import CORS
from tempfile import NamedTemporaryFile

将 OpenAI 与 Flask 集成

首先,我们需要创建一个 .env 文件,通过这个文件我们可以集成我们的 OpenAI 密钥。您也可以从以下链接获取 OpenAI 密钥:

OpenAI API openai.com开始编码吧!!!

load_dotenv()
OPENAI_API_KEY = os.getenv('OPENAI_API_KEY')
client = OpenAI(api_key=OPENAI_API_KEY)

app = Flask(__name__)
CORS(app)

  1. load_dotenv(): 从 .env 文件加载环境变量。
  2. OPENAI_API_KEY = os.getenv('OPENAI_API_KEY'): 从环境变量中检索 OpenAI API 密钥。
  3. client = OpenAI(api_key=OPENAI_API_KEY): 初始化 OpenAI API 的客户端对象。
  4. app = Flask(__name__): 创建一个 Flask Web 应用程序。
  5. CORS(app): 为 Flask 应用启用跨源资源共享支持。

设置函数

让我们从第一个函数开始

  1. 获取 OpenAI 响应

@app.route('/get_response', methods=['POST'])
def get_openai_response():
message = request.json.get('message', '')

if not message:
return jsonify({'error': "Message is required."}), 400

try:
response = client.chat.completions.create(
model="gpt-4",
messages=[
{"role": "system", "content": "You are a helpful assistant."},
{"role": "user", "content": message}
]
)
chat_response = response.choices[0].message.content
return jsonify({'response': chat_response})
except Exception as e:
return jsonify({'error': str(e)}), 500

  1. 获取 OpenAI 文本响应

def get_openai_text_response(message):
if not message:
return {'error': "Message is required."}

try:
response = client.chat.completions.create(
model="gpt-4",
messages=[
{"role": "system", "content": "You are a helpful assistant."},
{"role": "user", "content": message}
]
)
chat_response = response.choices[0].message.content
return {'response': chat_response}

except Exception as e:
return {'error': str(e)}

  1. 处理语音并获取响应

@app.route('/whisper', methods=['POST'])
def handle_voice_and_get_response():
results = []
for filename, handle in request.files.items():
temp = NamedTemporaryFile(suffix=".wav",delete=False)
handle.save(temp)

with open(temp.name, "rb") as audio_file:
transcription = client.audio.transcriptions.create(
model="whisper-1",
file=audio_file
)
transcript = transcription.text
openai_response = get_openai_text_response(transcript)

results.append({
'filename': filename,
'transcript': transcript,
'openai_response': openai_response
})
return results

if __name__ == '__main__':
app.run(debug=True)

这一行确保当脚本直接执行时,Flask 应用以调试模式运行。

这些定义共同使得 Flask Web 应用能够与 OpenAI 的 API 进行交互,处理文本和音频输入,并生成 OpenAI 的语言处理模型产生的响应。

现在我们已经完成了后端部分,是时候查看我们在前端部分准备的函数的功能了。

前端部分

MUI(Material-UI)是一个我用于设计前端的 React UI 库,它利用了受 Google 材料设计启发的预构建组件,便于创建视觉精美且响应迅速的用户界面。

总的来说,构建一个由 OpenAI 的 Whisper 模型驱动的语音聊天机器人,并与 Flask 集成,是一次丰富的经历。通过利用 OpenAI 先进语言模型的能力,加上 Flask 和 Material-UI 提供的开发便利,我们创建了一个无缝的语音互动用户体验。特别感谢我的同事 Ebru Boyac? 在前端开发中的宝贵贡献。如果您有任何问题或建议,请随时联系我。

对于那些有兴趣进一步探索代码的朋友,您可以在我的 GitHub 账户上找到整个项目。

GitHub 仓库链接:https://github.com/toygunozyurekk/Voice-Chatbot

请随意自定义 GitHub 仓库链接以匹配您实际的仓库 URL。

参考文章:Voice Chatbot(OpenAI-Whisper)

相关推荐

5分钟调色大片的方法(5分钟调色大片的方法有哪些)

哈喽大家好。在大家印象中一定觉得ps非常难学非常难。大家不要着急,小编的教学都是针对ps零基础的同学的,而且非常实用哦。只要大家跟着图文练习一两遍,保证大家立马学会~!好了,废话少说,下面开始我们今天...

闪白特效原来是这么用的(闪白特效怎么使用)

作者|高艳侠订阅|010-86092062闪白特效是影视作品中应用比较多的效果之一,那么具体该在哪些场景使用闪白特效?具体该如何操作?下面就以AdobePremiere(以下简称PR)为例,...

ppt常用小图标去哪里找?3个矢量素材网站推荐!

ppt是一个注重可视化表达的演示载体,除了高清图片,ppt中另一类常用的素材是各种小图标,也叫矢量图标,巧妙运用小图标能提升整体美观度和表现力,那么ppt常用小图标去哪里找呢?为方便各位快速找到合适的...

有什么好用的截图录屏工具?试试这9款

经常有朋友反馈苦于缺乏截屏和录屏的趁手工具,本期我们分享几个相当好用的截屏和录屏工具,希望能帮到大家。ScreenToGifScreenToGif是一款免费且开源的录屏工具。此款工具最大的特点是可以...

配色苦手福音!专业快速色环配色PS插件

今天橘子老师给的大家介绍的是一款快速配色的插件,非常强大配色苦手福音来啦!(获取方式见文末)【插件介绍】配色在后期设计中占有主导地位,好的配色能让作品更加抢眼Coolorus这款专业的配色插件,能够...

如何用PS抠主体?(ps怎么抠主体)

1.主体法抠图-抠花苞和花梗导入一张荷花苞的照片,点击上图中顶部“选择”菜单栏,下拉单击“主体”。可以看到,只有花苞被选中,但是花梗并没有被选中。接下来单击上图中左侧工具栏的“快速选择工具”,上图中顶...

2799元的4K电视,有保障吗?(买4k电视机哪个品牌好)

在上一期《电脑报》的3·15专题报道中,我们揭露了一款不靠谱的42英寸4K智能电视——TCLD42A561U。这款售价2699元的4K智能电视不仅4K画质方面存在严重问题,而且各种功能和应用体验也不理...

苹果电脑的Touch Bar推出一段时间了 这款工具可以帮你开发适用于它的APP

距离苹果推出带有TouchBar的MacBookPro已经有一段时间了,除了那些像Adobe、Google和Microsoft大公司在开发适用于TouchBar的应用之外,其实还有很多独立的开...

如魔法般吸取颜色的桌灯(如魔法般吸取颜色的桌灯叫什么)

色彩为生活带来的感官刺激,逐渐被视为理所当然。一盏桌灯运用它的神奇力量,将隐藏于物件中的颜色逐一释放,成为装点环境的空间魔法师。ColorUp是一款可以改变颜色的吸色台灯,沿用传统灯泡的造型,融入了拾...

一篇文章带你用jquery mobile设计颜色拾取器

【一、项目背景】现实生活中,我们经常会遇到配色的问题,这个时候去百度一下RGB表。而RGB表只提供相对于的颜色的RGB值而没有可以验证的模块。我们可以通过jquerymobile去设计颜色的拾取器...

ps拾色器快捷键是什么?(ps2019拾色器快捷键)

ps拾色器快捷键是什么?文章末尾有获取方式,按照以下步骤就能自动获得!学会制作PS特效需要一定程度的耐心和毅力。初学者可以从基本的工具和技术开始学习,逐渐提高他们的技能水平。同时,观看更多优秀的特效作...

免费开源的 Windows 截图录屏工具,支持 OCR 识别和滚动截图等

功能很强大、安装很小巧的免费截图、录屏工具,提供很多使用的工具来帮我么能解决问题,推荐给大家。关于ShareXShareX是一款免费的windows工具,起初是一个小巧的截图工具,经过多年的迭...

入门到精通系列PS教程:第13篇 · 拾色器、颜色问题说明及补充

入门到精通系列PS教程:第13篇·拾色器、颜色问题说明及补充作者|侯潇问题说明我的第12篇教程里,有个小问题没有说清楚。要说是错误,又不算是错误,只是没有说准确。写完那篇教程后,因为已经到了深...

PS冷知识:用吸管工具吸取屏幕上的任意颜色

今天,我们给大家介绍PS中的一个冷知识:用吸管工具可以吸取屏幕上的任意颜色。其实,操作起来是非常简单的。大多数情况下,我们认为,PS的吸管工具只能吸取PS软件作图区域范围内的颜色,最多加上画布四周的...

Windows 11 将提供内置颜色选择器工具

Windows11内置了颜色选择器,可以扫描并识别屏幕上的颜色并生成颜色代码。此外,微软还利用人工智能技术,让屏幕上的文本扫描和选择变得更加便捷。这两项功能均已在SnippingToolv1...