一下子发了仨语音模型:
GPT-Realtime-2,号称有 GPT-5 水平的推理能力。
GPT-Realtime-Translate,搞实时翻译的。
GPT-Realtime-Whisper,流式语音转文字。
链接在这:https://openai.com/index/advancing-voice-intelligence-with-new-models-in-the-api/
一下子发了仨语音模型:
GPT-Realtime-2,号称有 GPT-5 水平的推理能力。
GPT-Realtime-Translate,搞实时翻译的。
GPT-Realtime-Whisper,流式语音转文字。
链接在这:https://openai.com/index/advancing-voice-intelligence-with-new-models-in-the-api/
Realtime-Translate这个能处理背景噪音大的环境吗?比如在嘈杂的咖啡馆里打电话,效果会不会大打折扣?我看介绍里没细说这个场景。
马克一下,下班再看。
哇,一下子出三个!那个Realtime-Whisper对我们做会议记录太有用了。我们公司现在用的某家方案,转写准确度还行,但延迟老是高那么一点点,有时候发言人停一下,字幕才哗哗出来,体验很割裂。要是OpenAI这个真能做到低延迟流式,哪怕贵点我们也想申请试试,能省不少会后整理的时间。不过就是担心API调用成本,有没有已经上手的朋友说说实际开销?
是不是用了新的声学模型啊?我不太确定。
第一步,去官网看文档。第二步,申请API权限。第三步,写个简单的Python脚本调用测试。第四步,根据响应时间调整参数。
又来了,发布会吹得天花乱坠,实际用起来一堆坑等着填。等小白鼠们趟完雷再说吧。
会议转写最大的痛点其实是说话人区分这块没解决意义不大
嘈杂环境一直是软肋,建议自己先录段噪音音频测一下
会议记录这种需求量很大,值得跟进试试
一次发三个,OpenAI节奏是真快
一次发三个有点猛,估计是想抢实时语音这块的开发者心智
实测会议场景比上一代延迟低不少
语音模型这波更新主要是延迟降下来了,多轮对话上下文还是不太行
三个一起放出来,野心不小
你说的延迟问题我们也很在意,会议场景半秒延迟体验差很多