顶顶通呼叫中心中间件-一句话语音识别安装步骤

devtools/2024/9/25 13:18:10/

顶顶通呼叫中心中间件-一句话语音识别安装步骤,对接mod_vad。一句话识别(http接口提交录音文件识别)

一、安装asrproxy

1、将下载软件压缩包上传到需要安装的服务器中

2、SSH终端依次执行以下命令:

  1. mkdir -p /ddt/asrproxy
  2. sudo unzip asrproxy_*.zip -d /ddt/asrproxy
  3. cd /ddt/asrproxy
  4. sudo chmod +x install.sh
  5. sudo ./install.sh
  • 启动asrproxy命令:sudo ./asrproxy -uddt
  • 如果能执行到asrproxy run...说明asrproxy启动成功;并且能通过ctrl+c或者shutdown正常退出asrproxy程序,说明asrproxy安装完成,安装完成asr后就可以使用服务的方式去启动asrproxy了

3、服务方式启动asrproxy,SSH终端依次执行以下命令:

  1. sudo systemctl daemon-reload
  2. sudo systemctl enable asrproxy
  3. sudo systemctl start asrproxy
  4. sudo systemctl status asrproxy

二、下载一句话模型

一句话识别(http接口提交录音文件识别),比如对接mod_vad(老电话机器人接口)执行下面的命令即可:

  • curl -s http://down.ddrj.com/getasrmodel.sh | bash -s paraformer-large

模型下载成功后会输出对应的配置信息,把配置信息保存下来,参考配置说明,加入到asrproxy.json,后续可以再次执行下载脚本,得到配置信息。

三、配置asrproxy.json文件

配置asrproxy.json文件,执行完安装一句话模型并且下载好了就可以下面的内容通篇复制,通篇复制之前建议先备份以防万一出现问题,如果有配置第三方的,就必须需要备份,因为这个是没有配置第三方的,这个是专属于顶顶通私有化部署一句话语音识别的,如果不想通篇复制的话可以看下方注释了私有化一句话识别的复制进你asrproxy.json文件即可,配置好了之后还需要重新启动asrproxy。

/*asrproxy启动不了,一般都是JSON格式不对,可以用 http://tools.jb51.net/code/jsonformat 这个工具检查JOSN是否存在错误。*/
{"key":"asrproxy.license",  //授权文件路径"log":{"console_level":0, //输出控制台日志等级0-5(0:DEBUG, 1:INFO, 2:NOTICE, 3:WARNING, 4:CRIT, 5:CONSOLE)"file_level":0,    //输出到文件日志等级0-5(0:DEBUG, 1:INFO, 2:NOTICE, 3:WARNING, 4:CRIT, 5:CONSOLE)"file_maxsize":100, //文件大于多少M就自动创建新的日志文件。"file_number":10 //最大保留日志文件个数},
//配置了一句话识别也需要配置这个"short_sentence_asr":{"listen_ip":"0.0.0.0","listen_port":9990,"users":{// samrtivr.json配置的keylist.id"test":{ "not_validate_signature":true,//是否禁用验证签名,改为true,就是不验证签名         "key":"test",   //smartivr.json配置的 keylist.secret"ip":"*"  //*任意IP都可以访问,也可以限制可以访问的ip}}},"asr":{"listen_ip":"0.0.0.0","listen_port":9988,"storage":"record", //asr录音目录,调用asr时,设置了asr_params.recordfilename才会录音。"acl":"*", //哪些IP可以访问,配置*任意IP都可以访问,多个IP用逗号隔开,如果不配置acl,通过127.0.0.1不需要配置在ACL里面也可以访问。"interface": {//顶顶通私有化一句话识别"paraformer_16K": { "type": "funasr", "engine": "sentence", "quantize": true, "enable_itn": true, "itn-dir": "/ddt/asrproxy/funasr/fst_itn_zh", "vad-dir": "/ddt/asrproxy/funasr/speech_fsmn_vad_zh-cn-16k-common-onnx", "vad-quant": true, "punc-dir": "/ddt/asrproxy/funasr/punc_ct-transformer_zh-cn-common-vocab272727-onnx", "model-dir": "/ddt/asrproxy/funasr/speech_paraformer-large_asr_nat-zh-cn-16k-common-vocab8404-onnx", "online-model-dir": "", "lm-dir": "", "hotword": ""},/*阿里云私有云asr配置例子*/"aliyun_test": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"type": "aliyun","engine": "transcriber", /*transcriber:流接口,recognizer:一句话接口 */"appid": "default","key": "default","token": "default","url": "ws://ip:8101/ws/v1","secret": "default","enable_intermediate_result": true,"enable_punctuation_prediction": false,"enable_inverse_text_normalization": false,"enable_semantic_sentence_detection": false},/*阿里云实时语音识别配置例子 ,参数说明看 https://help.aliyun.com/document_detail/148847.html */"aliyun_01": {"count": 0, //最大多少并发"fault_threshold": 0, //连续错误多少次停用"fault_try_interval": 600, //停用多久后,从新尝试用这个KEY"type": "aliyun", //识别引擎,通过配置指定调用的ASR类型"engine": "transcriber", //transcriber:流接口,recognizer:一句话接口 "appid": "", //项目ID,详细看开通说明 https://help.aliyun.com/document_detail/71936.html"key": "", //AccessKey ID 详细看 https://help.aliyun.com/document_detail/324194.html "secret": "", //AccessKey Secret 详细看 https://help.aliyun.com/document_detail/69835.htm?spm=a2c4g.11186623.0.0.2f773f87BMksCK#section-iqi-ojp-tqk "enable_intermediate_result": true, //设置是否返回中间识别结果"enable_punctuation_prediction": false, //设置是否在后处理中添加标点"enable_inverse_text_normalization": false, //设置是否在后处理中执行数字转换"enable_semantic_sentence_detection": false, //设置是否使用语义断句。"nlpmodel": "", //设置NLP模型名称,开启NLP服务后必填"customizationid": "", //设置定制模型"vocabularyid": "", //设置泛热词"enable_ignore_sentencetimeout": true, //是否忽略实时识别中的单句识别超时, 默认是False"disfluency": true, //是否对识别文本进行顺滑(去除语气词,重复说等), 默认是False"speech_noise_threshold": 0.1, //噪音参数阈值,参数范围:[-1,1]取值越趋于-1:噪音被判定为语音的概率越大,取值越趋于+1:语音被判定为噪音的概率越大,该参数属高级参数, 调整需慎重并重点测试"enable_sdk_log": false},/*阿里云一句话识别配置例子 ,参数说明看 https://help.aliyun.com/document_detail/148702.html*/"aliyun_02": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"type": "aliyun","engine": "recognizer", //transcriber:流接口,recognizer:一句话接口 "appid": "","key": "","secret": "","enable_intermediate_result": true,"enable_punctuation_prediction": false,"enable_inverse_text_normalization": false,"enable_voice_detection": true //设置是否启动自定义静音检测},//讯飞语音听写接口,开通地址 https://www.xfyun.cn/services/voicedictation ,如果需要启用抢话功能,需要开通 "动态修正""xfyun_0": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"connect_timeout":3000,   //建立ws连接最大等待时间"accent" : "mandarin",   //方言,这几个参数的说明看接口文档 https://www.xfyun.cn/doc/asr/voicedictation/API.htm"domain" : "iat",	//应用领域"language" : "zh_cn", //语种"dwa" : "wpgs", //动态修正"pd" : "", //领域个性化参数"rlang" : "zh-cn", //繁体简体"ptt" : 1, //是否开启标点符号添加"nunum" : 1, //将返回结果的数字格式规则为阿拉伯数字格式"type": "xfyun",		//xfyun 标识这个配置试用讯飞云ASR引擎"appid": "",			//APPID"key": "", //APIKey"secret": "" //APISecret},"xfyun_1": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"type": "xfyun","url": "ws://ip:1078/iat", //私有云地址,公有云默认地址ws://iat-api.xfyun.cn/v2/iat,可以不配置。"appid": "",				"key": "",	"secret": ""	},/*"mrcp": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"type": "mrcp","engine": "uni2","grammar": "","appid": "","key": "","secret": ""},*///腾讯语音识别"tencent": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"type": "tencent","engine": "8k_zh","appid": "","key": "","secret": ""},//获取取帐号名、帐号ID、用户名、用户ID、项目名称、项目ID 方法看这里 https://support.huaweicloud.com/api-iam/iam_17_0002.html //区域 列表 https://developer.huaweicloud.com/endpoint?IAM//可用终端节点 https://support.huaweicloud.com/api-sis/sis_03_0004.html 写这个说明的时以下节点可用//华北-北京一 cn-north-1, 华北-北京四 cn-north-4, 华东-上海一 cn-east-3//账户信息 请看 https://support.huaweicloud.com/api-sis/sis_03_0058.html Token认证的描述"huawei": {"type": "huawei","projectname": "", //项目名字实际含义是项目节点 我的凭证处获取,如果没有项目先创建项目"projectid": "", //项目ID 我的凭证处获取"add_punc": true, //表示是否在识别结果中添加标点"digit_norm": true, //表示是否将语音中的数字识别为阿拉伯数字"interim_results": true, //是否输出中间结果"vocabulary_id": "", //热词表id 创建方法看 https://support.huaweicloud.com/api-sis/sis_03_0071.html"engine": "short-audio", //short-audio:一句话接口  https://support.huaweicloud.com/api-sis/sis_03_0095.html"key": "", //Access Key Id 我的凭证(访问密钥)处创建"secret": "" //Secret Access Key 创建访问密钥时下载获取},/* 多方ASR */"duofang": {"type": "duofang","appid": "","key": "","secret": "","im":true,      //中间结果是否返回"itn":true,    //是否开启文本规整"pct":true      //是否添加标点},"asr配置名字:新加ASR配置会自动生效(1分钟之内)": {"说明": "已经存在的修改type,engine,appid,key,secret 不会生效,如果要修改这几个参数只能新添加一个ASR配置或者重启asrproxy程序,其他参数修改后自动生效"}},"groups":{//默认使用的ASR"default":{ "mode":0,  //0:顺序使用,当使用数量等于count的时候切换下一个  1:循环使用"enable": //启用的那些ASR配置["改成要使用的ASR配置"]},//一句话识别和文件识别使用的ASR"shortsentence":{"mode":0,"enable":["paraformer_16K"]},//自定义组,可以话术中指定使用那组ASR配置。"custom":{"mode":0,"enable":[]}}}},"tts":{"storage": "tts", //tts缓存目录"append_silence": 20, //tts后的声音文件前后追加静音"trim_threshold_volume": 50, //tts后的声音文件前后小于多少音量认为是静音去除"listen_ip":"0.0.0.0","listen_port": 9989,"bgtts_thread_count":10,"acl":"*", //哪些IP可以访问,配置*任意IP都可以访问,多个IP用逗号隔开,如果不配置acl,通过127.0.0.1不需要配置在ACL里面也可以访问。"interface":{//阿里云语音合成接口"aliyun":{"count":0,"fault_threshold":0,"fault_try_interval":600,"type":"aliyun","appid":"","key":"","secret":""},//百度语音合成接口"baidu":{"connect_timeout":3000,"response_timeout":60000,"count":0,"fault_threshold":0,"fault_try_interval":600,"type":"baidu","appid":"","key":"","secret":""},//讯飞语音合成接口,开通地址 https://console.xfyun.cn/services/tts"xfyun": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"rdn": "0", //合成音频数字发音方式,参数说明 https://www.xfyun.cn/doc/tts/online_tts/API.html"reg": "0", //设置英文发音方式:"connect_timeout": 3000, //建立ws连接最大等待时间"response_timeout": 60000, //等待tts返回的最大时间"type": "xfyun", //xfyun 标识这个配置试用讯飞云ASR引擎"appid": "", //APPID"key": "", //APIKey"secret": "" //APISecret},//华为语音合成 https://support.huaweicloud.com/api-sis/sis_03_0111.html"huawei": {"connect_timeout": 3000,"response_timeout": 60000,"type": "huawei","projectname": "", //项目名字实际含义是项目节点 我的凭证处获取,如果没有项目先创建项目"projectid": "", //项目ID 我的凭证处获取"key": "", //Access Key Id 我的凭证(访问密钥)处创建"secret": "" //Secret Access Key 创建访问密钥时下载获取},/* 多方TTS */"duofang": {"connect_timeout":3000,"response_timeout":60000,"type": "duofang","appid": "","key": "","secret": ""},/*"mrcp": {"count": 0,"fault_threshold": 0,"fault_try_interval": 600,"type": "mrcp","engine": "uni2","appid": "","key": "","secret": ""}*/},"groups":{"default":{"mode":1,"enable":["改成要使用的TTS配置名"]},//自定义组,可以话术中指定使用那组TTS配置。"custom":{"mode":0,"enable":[]}}}}

四、测试方法

浏览器上传文件测试一句话模型
  • 浏览器一句话测试:对接mod_vad

  • 测试网址:http://服务器IP:9990/test

  • 声音文件要求:8K16位单声道PCM格式

  • 测试方法如图所示:

curl命令测试

可用curl命令测试,为了跳过验证签名步骤,需要把asrproxy.json->short_sentence_asr->users->id(test)里面添加”not_validate_signature”:true这个配置,上面的配置文件是已经有配置好这个的所以可以忽略,如果没有配置就需要配置一下

1、pos提交数据测试,1.wav改成要识别的文件,如果识别的文件是mp3的,datatype:wav也要改成datatype:mp3

curl -H "id:test" -H "engine:shortsentence" -H "datatype:wav" -X POST --data-binary @1.wav  http://服务器IP:9990/asr

http://www.ppmy.cn/devtools/98689.html

相关文章

Axios介绍;前后端分离开发的介绍;YAPI的使用;Vue项目简介、入门;Elementui的使用;nginx介绍

1 Ajax 1.1 Ajax介绍 1.1.1 Ajax概述 我们前端页面中的数据,如下图所示的表格中的学生信息,应该来自于后台,那么我们的后台和前端是互不影响的2个程序,那么我们前端应该如何从后台获取数据呢?因为是2个程序&#xf…

什么是持续集成(持续交付、部署)

文章目录 1 持续集成1.1 持续集成的好处1.2 持续集成的目的1.3 没有持续集成的状况 2 持续交付3 持续部署4 持续交付和持续部署的区别 1 持续集成 持续集成(Continuous integration,简称CI),简单来说持续集成就是频繁地&#xff…

人工智能赋能的认知营销:定制开发AI智能名片商城小程序的未来展望

摘要:随着人工智能技术的飞速发展,其在商业领域的应用日益广泛且深入,特别是在认知营销这一前沿领域。本文旨在探讨人工智能如何通过定制开发AI智能名片商城小程序,为认知营销注入新的活力与可能性。通过深入分析人工智能在数据处…

Pytest框架直接右键运行 testcase.py,不执行最外层conftest

随笔记录 目录 1. 背景介绍 2. workaround method 2.1 通过命令行执行 某个测试用例 1. 背景介绍 Pytest 框架结构如下: TestCases:conftest.pyInstanta: conftest.pytest_instanta_tcpdump_pack_len.py# 当直接右键直接 运行 test_instanta_tcpdump_pack_l…

File的常见成员方法(判断,获取)

一.方法: 二.查询路径的方法: 1.通过属性查询: 例如:右击一个软件(文件/文件夹)后,在属性中可以查看路径 2.右击后直接复制路径: 右击一个软件/文件/文件夹后,会有一个…

Linux:文件权限详解及修改方法

文章目录 1、Linux文件权限1.1、如何查看到文件权限1.2、ll命令介绍 2、权限分类2.1、文件权限2.2、文件夹权限 3、权限修改3.1、修改文件/文件夹权限1)chmod指令2)chmod指令符号 3.2、修改文件/文件夹所属用户3.3、修改文件/文件夹所属群组 4、参考 1、…

vue3 组合式API

<!-- 深度监听 deep 点击按钮控制台&#xff0c;才输出count变化了: 1, 老值: 0;否则控制台不输出 --> <script setup>import { ref,watch } from vueconst state ref({count:0})const setCount () > {state.count.value}watch(state, () > {console.log(…

《python》poetry install下载缓慢,网络问题断开连接--poetry换源镜像下载+国内镜像

在使用打包工具poetry进行打包的是出现了一个问题就是&#xff0c;在使用poetry进行打包的时候出现了&#xff0c;连接断开这样的问题&#xff0c;这个问题是可以通过换源&#xff0c;通过国内的镜像来解决这个问题就可以了。 找到项目中的pyoroject。toml文件这个文件中写了一…