实例介绍
【实例简介】
【实例截图】
【实例截图】
【核心代码】
package com.cool.ise;
import java.util.HashMap;
import java.util.LinkedHashMap;
import java.util.UUID;
import org.apache.cordova.CallbackContext;
import org.apache.cordova.CordovaInterface;
import org.apache.cordova.CordovaPlugin;
import org.apache.cordova.CordovaWebView;
import org.json.JSONArray;
import org.json.JSONException;
import org.json.JSONObject;
import com.google.gson.Gson;
import com.iflytek.cloud.ErrorCode;
import com.iflytek.cloud.EvaluatorListener;
import com.iflytek.cloud.EvaluatorResult;
import com.iflytek.cloud.RecognizerListener;
import com.iflytek.cloud.RecognizerResult;
import com.iflytek.cloud.SpeechConstant;
import com.iflytek.cloud.SpeechError;
import com.iflytek.cloud.SpeechEvaluator;
import com.iflytek.cloud.SpeechRecognizer;
import com.iflytek.cloud.SpeechUtility;
import com.iflytek.cloud.record.c;
import com.iflytek.ise.result.LastResult;
import com.iflytek.ise.result.Result;
import com.iflytek.ise.result.xml.XmlResultParser;
import com.iflytek.speech.util.JsonParser;
import com.iflytek.speech.util.LatResult;
import android.content.Context;
import android.content.SharedPreferences;
import android.os.Bundle;
import android.os.Environment;
import android.text.TextUtils;
import android.util.Log;
import android.widget.Toast;
/**
* 语音测评插件
*
* @author cool
*
*/
public class IsePlugin extends CordovaPlugin {
private SpeechEvaluator mSpeechEvaluator;
private String mLastResult = "";
CallbackContext callbackContext;
private CordovaInterface cordova;
private SharedPreferences sp;
private String uuid = "";
private Toast mToast;
private SpeechRecognizer mIat;
private int ret = 0; // 函数调用返回值
private String voiceResult;
// 用HashMap存储听写结果
private HashMap<String, String> mIatResults = new LinkedHashMap<String, String>();
@Override
public void initialize(CordovaInterface cordova, CordovaWebView webView) {
super.initialize(cordova, webView);
this.cordova = cordova;
SpeechUtility.createUtility(cordova.getActivity(), "appid=57109849");
mSpeechEvaluator = SpeechEvaluator.createEvaluator(cordova.getActivity(), null);
sp = cordova.getActivity().getSharedPreferences("config", Context.MODE_PRIVATE);
}
@Override
public boolean execute(String action, JSONArray args, CallbackContext callbackContext) throws JSONException {
this.callbackContext = callbackContext;
if ("voice2Text".equals(action)) {// 解析测评
showToast("语音识别");
String vadEosRecognizer = args.getString(0);
if (TextUtils.isEmpty(vadEosRecognizer)) {
vadEosRecognizer = "3000";
}
mIat = SpeechRecognizer.createRecognizer(cordova.getActivity(), null);
uuid = FileUtils.generateShortUuid();
setSpeechRecognizerParam(uuid,vadEosRecognizer);
ret = mIat.startListening(mRecognizerListener);
if (ret != ErrorCode.SUCCESS) {
showToast("听写失败,错误码：" ret);
} else {
showToast("请开始说话…");
}
return true;
} else if ("wordEvaluator".equals(action)) {
showToast("开始测评");
sp.edit().putString("category", "read_word").commit();
uuid = FileUtils.generateShortUuid();
String text = args.getString(0);
String vad_eos = args.getString(1);
Log.e("399", "vad_eos" vad_eos);
if (TextUtils.isEmpty(vad_eos)) {
vad_eos = "3000";
}
setParams(uuid,vad_eos);// 设置参数
mSpeechEvaluator.startEvaluating("[word]" text, null, mEvaluatorListener);
return true;
} else if ("sentenceEvaluator".equals(action)) {
showToast("开始测评");
sp.edit().putString("category", "read_sentence").commit();
uuid = FileUtils.generateShortUuid();
String text = args.getString(0);
String vad_eos = args.getString(1);
Log.e("399", "vad_eos" vad_eos);
if (TextUtils.isEmpty(vad_eos)) {
vad_eos = "3000";
}
setParams(uuid,vad_eos);// 设置参数
mSpeechEvaluator.startEvaluating(text, null, mEvaluatorListener);
return true;
}
callbackContext.error("error");
return false;
}
/**
* 语音测评listener
*/
private EvaluatorListener mEvaluatorListener = new EvaluatorListener() {
@Override
public void onVolumeChanged(int volume, byte[] data) {
showToast("当前音量 " volume);
Log.e("399", "当前音量 " volume);
}
@Override
public void onResult(EvaluatorResult result, boolean isLast) {
if (isLast) {
showToast("评测结束");
StringBuilder builder = new StringBuilder();
builder.append(result.getResultString());
mLastResult = builder.toString();
if (!TextUtils.isEmpty(builder)) {
if (!TextUtils.isEmpty(mLastResult)) {
XmlResultParser resultParser = new XmlResultParser();
Result backResult = resultParser.parse(mLastResult);
LastResult lastResult = new LastResult();
lastResult.result = backResult;
lastResult.path = FileUtils.getCachePath(cordova.getActivity()) "msc/" uuid ".wav";
if (null != lastResult) {
Gson gson = new Gson();
callbackContext.success(gson.toJson(lastResult));
} else {
showToast("结析结果为空");
callbackContext.error("结析结果为空");
}
}
// callbackContext.success(builder.toString());
}
Log.e("399", "mLastResult = " builder.toString());
}
}
@Override
public void onEvent(int eventType, int arg1, int arg2, Bundle obj) {
}
@Override
public void onError(SpeechError error) {
if (error != null) {
showToast("error:" error.getErrorCode() "," error.getErrorDescription());
callbackContext.error("error:" error.getErrorCode() "," error.getErrorDescription());
} else {
Log.e("399", "evaluator over");
callbackContext.error("evaluator over");
}
}
@Override
public void onEndOfSpeech() {
Log.e("399", "结束说话");
}
@Override
public void onBeginOfSpeech() {
Log.e("399", "开始说话");
}
};
/**
* 设置语音测评参数
*/
private void setParams(String fileName,String vadeos) {
String category = sp.getString("category", "read_sentence");
// String vad_eos = sp.getString("vad_eos", "1800");
// 设置评测语种
mSpeechEvaluator.setParameter(SpeechConstant.LANGUAGE, "en_us");
// 设置评测题型
mSpeechEvaluator.setParameter(SpeechConstant.ISE_CATEGORY, category);
// 设置试题编码类型
mSpeechEvaluator.setParameter(SpeechConstant.TEXT_ENCODING, "utf-8");
// 设置前、后端点超时
mSpeechEvaluator.setParameter(SpeechConstant.VAD_BOS, "5000");
mSpeechEvaluator.setParameter(SpeechConstant.VAD_EOS, vadeos);
// 设置录音超时，设置成-1 则无超时限制
mSpeechEvaluator.setParameter(SpeechConstant.KEY_SPEECH_TIMEOUT, "-1");
// 设置结果等级，不同等级对应不同的详细程度
mSpeechEvaluator.setParameter(SpeechConstant.RESULT_LEVEL, "complete");
// 设置音频保存路径，保存音频格式支持pcm、wav，设置路径为sd卡请注意WRITE_EXTERNAL_STORAGE权限
// 注：AUDIO_FORMAT参数语记需要更新版本才能生效
mSpeechEvaluator.setParameter(SpeechConstant.AUDIO_FORMAT, "wav");
mSpeechEvaluator.setParameter(SpeechConstant.ISE_AUDIO_PATH,
FileUtils.getCachePath(cordova.getActivity()) "msc/" fileName ".wav");
}
/**
* 设置语音识别参数
*/
private void setSpeechRecognizerParam(String fileName,String vadEosRecognizer) {
// 清空参数
mIat.setParameter(SpeechConstant.PARAMS, null);
// 设置听写引擎
mIat.setParameter(SpeechConstant.ENGINE_TYPE, SpeechConstant.TYPE_CLOUD);
// 设置返回结果格式
mIat.setParameter(SpeechConstant.RESULT_TYPE, "json");
// 设置语言
mIat.setParameter(SpeechConstant.LANGUAGE, "en_us");
// 设置语音前端点:静音超时时间，即用户多长时间不说话则当做超时处理
mIat.setParameter(SpeechConstant.VAD_BOS, "4000");
// 设置语音后端点:后端点静音检测时间，即用户停止说话多长时间内即认为不再输入， 自动停止录音
mIat.setParameter(SpeechConstant.VAD_EOS, vadEosRecognizer);
// 设置标点符号,设置为"0"返回结果无标点,设置为"1"返回结果有标点
mIat.setParameter(SpeechConstant.ASR_PTT, "0");
// 设置音频保存路径，保存音频格式支持pcm、wav，设置路径为sd卡请注意WRITE_EXTERNAL_STORAGE权限
// 注：AUDIO_FORMAT参数语记需要更新版本才能生效
mIat.setParameter(SpeechConstant.AUDIO_FORMAT, "wav");
mIat.setParameter(SpeechConstant.ASR_AUDIO_PATH,
FileUtils.getCachePath(cordova.getActivity()) "msc/" fileName ".wav");
}
/**
* 打印吐司
*
* @param msg
*/
private void showToast(final String msg) {
// cordova.getActivity().runOnUiThread(new Runnable() {
//
// @Override
// public void run() {
// // TODO Auto-generated method stub
// if (mToast == null) {
// mToast = Toast.makeText(cordova.getActivity(), "",
// Toast.LENGTH_SHORT);
// }
// mToast.setText(msg);
// mToast.show();
// }
// });
// Toast.makeText(cordova.getActivity(), msg,
// Toast.LENGTH_SHORT).show();
}
/**
* 语音识别听写监听器。
*/
private RecognizerListener mRecognizerListener = new RecognizerListener() {
@Override
public void onBeginOfSpeech() {
// 此回调表示：sdk内部录音机已经准备好了，用户可以开始语音输入
showToast("开始说话");
}
@Override
public void onError(SpeechError error) {
// Tips：
// 错误码：10118(您没有说话)，可能是录音机权限被禁，需要提示用户打开应用的录音权限。
// 如果使用本地功能（语记）需要提示用户开启语记的录音权限。
showToast(error.getPlainDescription(true));
callbackContext.error(error.getPlainDescription(true));
}
@Override
public void onEndOfSpeech() {
// 此回调表示：检测到了语音的尾端点，已经进入识别过程，不再接受语音输入
showToast("结束说话");
Log.e("399", "结束说话");
}
@Override
public void onResult(RecognizerResult results, boolean isLast) {
printResult(results);
Log.e("399", results.getResultString());
if (isLast) {
// TODO 最后的结果
Log.e("399", "LastResult" voiceResult);
LatResult latResult = new LatResult();
latResult.result = voiceResult;
latResult.path = FileUtils.getCachePath(cordova.getActivity()) "msc/" uuid ".wav";
callbackContext.success(new Gson().toJson(latResult));
}
}
@Override
public void onVolumeChanged(int volume, byte[] data) {
showToast("当前正在说话，音量大小：" volume);
// Log.e("399", "返回音频数据：" data.length);
}
@Override
public void onEvent(int eventType, int arg1, int arg2, Bundle obj) {
// 以下代码用于获取与云端的会话id，当业务出错时将会话id提供给技术支持人员，可用于查询会话日志，定位出错原因
// 若使用本地能力，会话id为null
// if (SpeechEvent.EVENT_SESSION_ID == eventType) {
// String sid = obj.getString(SpeechEvent.KEY_EVENT_SESSION_ID);
// Log.d(TAG, "session id =" sid);
// }
}
};
private void printResult(RecognizerResult results) {
String text = JsonParser.parseIatResult(results.getResultString());
String sn = null;
// 读取json结果中的sn字段
try {
JSONObject resultJson = new JSONObject(results.getResultString());
sn = resultJson.optString("sn");
} catch (JSONException e) {
e.printStackTrace();
}
mIatResults.put(sn, text);
StringBuffer resultBuffer = new StringBuffer();
for (String key : mIatResults.keySet()) {
resultBuffer.append(mIatResults.get(key));
}
voiceResult = resultBuffer.toString();
}
@Override
public void onDestroy() {
super.onDestroy();
if (null != mSpeechEvaluator) {
mSpeechEvaluator.destroy();
mSpeechEvaluator = null;
}
if (mIat != null) {
// 退出时释放连接
mIat.cancel();
mIat.destroy();
}
}
}
好例子网口号：伸出你的我的手 — 分享！
网友评论
小贴士
感谢您为本站写下的评论，您的评论对其它用户来说具有重要的参考价值，所以请认真填写。
- 类似“顶”、“沙发”之类没有营养的文字，对勤劳贡献的楼主来说是令人沮丧的反馈信息。
- 相信您也不想看到一排文字/表情墙，所以请不要反馈意义不大的重复字符，也请尽量不要纯表情的回复。
- 提问之前请再仔细看一遍楼主的说明，或许是您遗漏了。
- 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦，又没人会搭理，于人于己都无利。
关于好例子网
本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享，对搜索内容的合法性不具有预见性、识别性、控制性，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论平台是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定，若资源存在侵权或相关问题请联系本站客服人员，点此联系我们。关于更多版权及免责申明参见 版权及免责申明
支持(0) 盖楼(回复)