实例介绍
【实例简介】
【实例截图】
【实例截图】
【核心代码】
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130 131 132 133 134 135 136 137 138 139 140 141 142 143 144 145 146 147 148 149 150 151 152 153 154 155 156 157 158 159 160 161 162 163 164 165 166 167 168 169 170 171 172 173 174 175 176 177 178 179 180 181 182 183 184 185 186 187 188 189 190 191 192 193 194 195 196 197 198 199 200 201 202 203 204 205 206 207 208 209 210 211 212 213 214 215 216 217 218 219 220 221 222 223 224 225 226 227 228 229 230 231 232 233 234 235 236 237 238 239 240 241 242 243 244 245 246 247 248 249 250 251 252 253 254 255 256 257 258 259 260 261 262 263 264 265 266 267 268 269 270 271 272 273 274 275 276 277 278 279 280 281 282 283 284 285 286 287 288 289 290 291 292 293 294 295 296 297 298 299 300 301 302 303 304 305 306 307 308 309 310 311 312 313 314 315 316 317 318 319 320 321 322 323 324 325 326 327 328 329 330 331 332 333 334 335 336 337 338 339 340 341 342 343 344 345 346 347 348 349 350 351 352 353 354 355 356 357 358 359 360 361 362 363 364 365 366 367 368 369 370 371 372 373 | package com.cool.ise; import java.util.HashMap; import java.util.LinkedHashMap; import java.util.UUID; import org.apache.cordova.CallbackContext; import org.apache.cordova.CordovaInterface; import org.apache.cordova.CordovaPlugin; import org.apache.cordova.CordovaWebView; import org.json.JSONArray; import org.json.JSONException; import org.json.JSONObject; import com.google.gson.Gson; import com.iflytek.cloud.ErrorCode; import com.iflytek.cloud.EvaluatorListener; import com.iflytek.cloud.EvaluatorResult; import com.iflytek.cloud.RecognizerListener; import com.iflytek.cloud.RecognizerResult; import com.iflytek.cloud.SpeechConstant; import com.iflytek.cloud.SpeechError; import com.iflytek.cloud.SpeechEvaluator; import com.iflytek.cloud.SpeechRecognizer; import com.iflytek.cloud.SpeechUtility; import com.iflytek.cloud.record.c; import com.iflytek.ise.result.LastResult; import com.iflytek.ise.result.Result; import com.iflytek.ise.result.xml.XmlResultParser; import com.iflytek.speech.util.JsonParser; import com.iflytek.speech.util.LatResult; import android.content.Context; import android.content.SharedPreferences; import android.os.Bundle; import android.os.Environment; import android.text.TextUtils; import android.util.Log; import android.widget.Toast; /** * 语音测评插件 * * @author cool * */ public class IsePlugin extends CordovaPlugin { private SpeechEvaluator mSpeechEvaluator; private String mLastResult = "" ; CallbackContext callbackContext; private CordovaInterface cordova; private SharedPreferences sp; private String uuid = "" ; private Toast mToast; private SpeechRecognizer mIat; private int ret = 0 ; // 函数调用返回值 private String voiceResult; // 用HashMap存储听写结果 private HashMap<String, String> mIatResults = new LinkedHashMap<String, String>(); @Override public void initialize(CordovaInterface cordova, CordovaWebView webView) { super .initialize(cordova, webView); this .cordova = cordova; SpeechUtility.createUtility(cordova.getActivity(), "appid=57109849" ); mSpeechEvaluator = SpeechEvaluator.createEvaluator(cordova.getActivity(), null ); sp = cordova.getActivity().getSharedPreferences( "config" , Context.MODE_PRIVATE); } @Override public boolean execute(String action, JSONArray args, CallbackContext callbackContext) throws JSONException { this .callbackContext = callbackContext; if ( "voice2Text" .equals(action)) { // 解析测评 showToast( "语音识别" ); String vadEosRecognizer = args.getString( 0 ); if (TextUtils.isEmpty(vadEosRecognizer)) { vadEosRecognizer = "3000" ; } mIat = SpeechRecognizer.createRecognizer(cordova.getActivity(), null ); uuid = FileUtils.generateShortUuid(); setSpeechRecognizerParam(uuid,vadEosRecognizer); ret = mIat.startListening(mRecognizerListener); if (ret != ErrorCode.SUCCESS) { showToast( "听写失败,错误码:" ret); } else { showToast( "请开始说话…" ); } return true ; } else if ( "wordEvaluator" .equals(action)) { showToast( "开始测评" ); sp.edit().putString( "category" , "read_word" ).commit(); uuid = FileUtils.generateShortUuid(); String text = args.getString( 0 ); String vad_eos = args.getString( 1 ); Log.e( "399" , "vad_eos" vad_eos); if (TextUtils.isEmpty(vad_eos)) { vad_eos = "3000" ; } setParams(uuid,vad_eos); // 设置参数 mSpeechEvaluator.startEvaluating( "[word]" text, null , mEvaluatorListener); return true ; } else if ( "sentenceEvaluator" .equals(action)) { showToast( "开始测评" ); sp.edit().putString( "category" , "read_sentence" ).commit(); uuid = FileUtils.generateShortUuid(); String text = args.getString( 0 ); String vad_eos = args.getString( 1 ); Log.e( "399" , "vad_eos" vad_eos); if (TextUtils.isEmpty(vad_eos)) { vad_eos = "3000" ; } setParams(uuid,vad_eos); // 设置参数 mSpeechEvaluator.startEvaluating(text, null , mEvaluatorListener); return true ; } callbackContext.error( "error" ); return false ; } /** * 语音测评listener */ private EvaluatorListener mEvaluatorListener = new EvaluatorListener() { @Override public void onVolumeChanged( int volume, byte [] data) { showToast( "当前音量 " volume); Log.e( "399" , "当前音量 " volume); } @Override public void onResult(EvaluatorResult result, boolean isLast) { if (isLast) { showToast( "评测结束" ); StringBuilder builder = new StringBuilder(); builder.append(result.getResultString()); mLastResult = builder.toString(); if (!TextUtils.isEmpty(builder)) { if (!TextUtils.isEmpty(mLastResult)) { XmlResultParser resultParser = new XmlResultParser(); Result backResult = resultParser.parse(mLastResult); LastResult lastResult = new LastResult(); lastResult.result = backResult; lastResult.path = FileUtils.getCachePath(cordova.getActivity()) "msc/" uuid ".wav" ; if ( null != lastResult) { Gson gson = new Gson(); callbackContext.success(gson.toJson(lastResult)); } else { showToast( "结析结果为空" ); callbackContext.error( "结析结果为空" ); } } // callbackContext.success(builder.toString()); } Log.e( "399" , "mLastResult = " builder.toString()); } } @Override public void onEvent( int eventType, int arg1, int arg2, Bundle obj) { } @Override public void onError(SpeechError error) { if (error != null ) { showToast( "error:" error.getErrorCode() "," error.getErrorDescription()); callbackContext.error( "error:" error.getErrorCode() "," error.getErrorDescription()); } else { Log.e( "399" , "evaluator over" ); callbackContext.error( "evaluator over" ); } } @Override public void onEndOfSpeech() { Log.e( "399" , "结束说话" ); } @Override public void onBeginOfSpeech() { Log.e( "399" , "开始说话" ); } }; /** * 设置语音测评参数 */ private void setParams(String fileName,String vadeos) { String category = sp.getString( "category" , "read_sentence" ); // String vad_eos = sp.getString("vad_eos", "1800"); // 设置评测语种 mSpeechEvaluator.setParameter(SpeechConstant.LANGUAGE, "en_us" ); // 设置评测题型 mSpeechEvaluator.setParameter(SpeechConstant.ISE_CATEGORY, category); // 设置试题编码类型 mSpeechEvaluator.setParameter(SpeechConstant.TEXT_ENCODING, "utf-8" ); // 设置前、后端点超时 mSpeechEvaluator.setParameter(SpeechConstant.VAD_BOS, "5000" ); mSpeechEvaluator.setParameter(SpeechConstant.VAD_EOS, vadeos); // 设置录音超时,设置成-1 则无超时限制 mSpeechEvaluator.setParameter(SpeechConstant.KEY_SPEECH_TIMEOUT, "-1" ); // 设置结果等级,不同等级对应不同的详细程度 mSpeechEvaluator.setParameter(SpeechConstant.RESULT_LEVEL, "complete" ); // 设置音频保存路径,保存音频格式支持pcm、wav,设置路径为sd卡请注意WRITE_EXTERNAL_STORAGE权限 // 注:AUDIO_FORMAT参数语记需要更新版本才能生效 mSpeechEvaluator.setParameter(SpeechConstant.AUDIO_FORMAT, "wav" ); mSpeechEvaluator.setParameter(SpeechConstant.ISE_AUDIO_PATH, FileUtils.getCachePath(cordova.getActivity()) "msc/" fileName ".wav" ); } /** * 设置语音识别参数 */ private void setSpeechRecognizerParam(String fileName,String vadEosRecognizer) { // 清空参数 mIat.setParameter(SpeechConstant.PARAMS, null ); // 设置听写引擎 mIat.setParameter(SpeechConstant.ENGINE_TYPE, SpeechConstant.TYPE_CLOUD); // 设置返回结果格式 mIat.setParameter(SpeechConstant.RESULT_TYPE, "json" ); // 设置语言 mIat.setParameter(SpeechConstant.LANGUAGE, "en_us" ); // 设置语音前端点:静音超时时间,即用户多长时间不说话则当做超时处理 mIat.setParameter(SpeechConstant.VAD_BOS, "4000" ); // 设置语音后端点:后端点静音检测时间,即用户停止说话多长时间内即认为不再输入, 自动停止录音 mIat.setParameter(SpeechConstant.VAD_EOS, vadEosRecognizer); // 设置标点符号,设置为"0"返回结果无标点,设置为"1"返回结果有标点 mIat.setParameter(SpeechConstant.ASR_PTT, "0" ); // 设置音频保存路径,保存音频格式支持pcm、wav,设置路径为sd卡请注意WRITE_EXTERNAL_STORAGE权限 // 注:AUDIO_FORMAT参数语记需要更新版本才能生效 mIat.setParameter(SpeechConstant.AUDIO_FORMAT, "wav" ); mIat.setParameter(SpeechConstant.ASR_AUDIO_PATH, FileUtils.getCachePath(cordova.getActivity()) "msc/" fileName ".wav" ); } /** * 打印吐司 * * @param msg */ private void showToast( final String msg) { // cordova.getActivity().runOnUiThread(new Runnable() { // // @Override // public void run() { // // TODO Auto-generated method stub // if (mToast == null) { // mToast = Toast.makeText(cordova.getActivity(), "", // Toast.LENGTH_SHORT); // } // mToast.setText(msg); // mToast.show(); // } // }); // Toast.makeText(cordova.getActivity(), msg, // Toast.LENGTH_SHORT).show(); } /** * 语音识别听写监听器。 */ private RecognizerListener mRecognizerListener = new RecognizerListener() { @Override public void onBeginOfSpeech() { // 此回调表示:sdk内部录音机已经准备好了,用户可以开始语音输入 showToast( "开始说话" ); } @Override public void onError(SpeechError error) { // Tips: // 错误码:10118(您没有说话),可能是录音机权限被禁,需要提示用户打开应用的录音权限。 // 如果使用本地功能(语记)需要提示用户开启语记的录音权限。 showToast(error.getPlainDescription( true )); callbackContext.error(error.getPlainDescription( true )); } @Override public void onEndOfSpeech() { // 此回调表示:检测到了语音的尾端点,已经进入识别过程,不再接受语音输入 showToast( "结束说话" ); Log.e( "399" , "结束说话" ); } @Override public void onResult(RecognizerResult results, boolean isLast) { printResult(results); Log.e( "399" , results.getResultString()); if (isLast) { // TODO 最后的结果 Log.e( "399" , "LastResult" voiceResult); LatResult latResult = new LatResult(); latResult.result = voiceResult; latResult.path = FileUtils.getCachePath(cordova.getActivity()) "msc/" uuid ".wav" ; callbackContext.success( new Gson().toJson(latResult)); } } @Override public void onVolumeChanged( int volume, byte [] data) { showToast( "当前正在说话,音量大小:" volume); // Log.e("399", "返回音频数据:" data.length); } @Override public void onEvent( int eventType, int arg1, int arg2, Bundle obj) { // 以下代码用于获取与云端的会话id,当业务出错时将会话id提供给技术支持人员,可用于查询会话日志,定位出错原因 // 若使用本地能力,会话id为null // if (SpeechEvent.EVENT_SESSION_ID == eventType) { // String sid = obj.getString(SpeechEvent.KEY_EVENT_SESSION_ID); // Log.d(TAG, "session id =" sid); // } } }; private void printResult(RecognizerResult results) { String text = JsonParser.parseIatResult(results.getResultString()); String sn = null ; // 读取json结果中的sn字段 try { JSONObject resultJson = new JSONObject(results.getResultString()); sn = resultJson.optString( "sn" ); } catch (JSONException e) { e.printStackTrace(); } mIatResults.put(sn, text); StringBuffer resultBuffer = new StringBuffer(); for (String key : mIatResults.keySet()) { resultBuffer.append(mIatResults.get(key)); } voiceResult = resultBuffer.toString(); } @Override public void onDestroy() { super .onDestroy(); if ( null != mSpeechEvaluator) { mSpeechEvaluator.destroy(); mSpeechEvaluator = null ; } if (mIat != null ) { // 退出时释放连接 mIat.cancel(); mIat.destroy(); } } } |
好例子网口号:伸出你的我的手 — 分享!
网友评论
小贴士
感谢您为本站写下的评论,您的评论对其它用户来说具有重要的参考价值,所以请认真填写。
- 类似“顶”、“沙发”之类没有营养的文字,对勤劳贡献的楼主来说是令人沮丧的反馈信息。
- 相信您也不想看到一排文字/表情墙,所以请不要反馈意义不大的重复字符,也请尽量不要纯表情的回复。
- 提问之前请再仔细看一遍楼主的说明,或许是您遗漏了。
- 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦,又没人会搭理,于人于己都无利。
关于好例子网
本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享,对搜索内容的合法性不具有预见性、识别性、控制性,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论平台是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定,若资源存在侵权或相关问题请联系本站客服人员,点此联系我们。关于更多版权及免责申明参见 版权及免责申明
支持(0) 盖楼(回复)