有道智云實(shí)時(shí)語(yǔ)音翻譯SDK 簡(jiǎn)介
概述
(1) 概念解釋
實(shí)時(shí)語(yǔ)音翻譯:可實(shí)現(xiàn)對(duì)連續(xù)音頻流的實(shí)時(shí)識(shí)別,實(shí)時(shí)識(shí)別和翻譯a語(yǔ)音輸入的內(nèi)容,轉(zhuǎn)換成文本信息并返回對(duì)應(yīng)文字流。
(2) 說明
Hi,您好,歡迎使用有道智云實(shí)時(shí)語(yǔ)音翻譯iOS SDK。如果您想快速體驗(yàn)服務(wù),建議您前往 實(shí)時(shí)語(yǔ)音翻譯體驗(yàn)中心 或者在體驗(yàn)中心右下側(cè)找到小程序二維碼,掃描進(jìn)行體驗(yàn)。
本文檔主要針對(duì)需要集成實(shí)時(shí)語(yǔ)音翻譯服務(wù)iOS SDK的開發(fā)工程師,詳細(xì)描述有道智云實(shí)時(shí)語(yǔ)音翻譯能力及集成過程。
如果您有與我們商務(wù)合作的需求,可以通過以下方式聯(lián)系我們:
商務(wù)郵箱: AIcloud_Business@corp.youdao.com
如果您對(duì)文檔內(nèi)容有任何疑問,可以通過以下幾種方式聯(lián)系我們:
客服QQ:1906538062
智云語(yǔ)音技術(shù)交流QQ群:861723255
聯(lián)系郵箱: zhiyun@corp.youdao.com
溫馨提示:
本文檔主要針對(duì)開發(fā)人員,接入測(cè)試前需要在后臺(tái)創(chuàng)建iOS應(yīng)用,并綁定實(shí)時(shí)語(yǔ)音翻譯實(shí)例;如果您還沒有,請(qǐng)按照新手指南 操作。
平臺(tái)向每個(gè)賬戶贈(zèng)送50元的體驗(yàn)金,供用戶集成前測(cè)試所用,具體資費(fèi)規(guī)則詳見 實(shí)時(shí)語(yǔ)音翻譯服務(wù)報(bào)價(jià) 。
功能介紹
有道智云實(shí)時(shí)語(yǔ)音翻譯 SDK 是有道智云開放平臺(tái)提供的云服務(wù)之一,是有道在線實(shí)時(shí)語(yǔ)音翻譯接口的一種實(shí)現(xiàn),支持在線實(shí)時(shí)語(yǔ)音翻譯。
兼容性
支持設(shè)備:運(yùn)行了iOS 8.0及以上系統(tǒng)的 iOS 設(shè)備
實(shí)時(shí)語(yǔ)音翻譯 IOS SDK集成指南
集成前提
開始集成SDK之前開發(fā)者需要登錄有道智云平臺(tái) ,創(chuàng)建應(yīng)用獲取應(yīng)用ID(或者通過運(yùn)營(yíng)人員獲取應(yīng)用ID),以便使用實(shí)時(shí)語(yǔ)音翻譯服務(wù)。
集成步驟
SDK包導(dǎo)入
實(shí)時(shí)語(yǔ)音翻譯 SDK 由如下幾個(gè) SDK 組成,YDStreamSpeechTrans.h、base.h 、libbase.a、libStreamSpeechTrans.a
(1). 添加頭文件和庫(kù)文件:將實(shí)時(shí)語(yǔ)音翻譯 SDK 添加到工程中,包括 YDStreamSpeechTrans.h 和 base.h 頭文件、libbase.a和libStreamSpeechTrans.a文件。
(2). 設(shè)置工程Other Linker Flags為-ObjC。
(3). 在工程build Phases – Link Binary With Libraries中添加libbase.a, AdSupport.framework, CoreTelephony.framework, SystemConfiguration, libz.tbd和libsqlite3.tbd。
SDK初始化
說明:所有的查詢都需要初始化appkey,只執(zhí)行初始化一次即可。
注:appKey即應(yīng)用ID。
//初始化appkey
YDTranslateInstance *yd = [YDTranslateInstance sharedInstance];
yd.appKey = @"your appkey";
功能集成
說明:支持實(shí)時(shí)實(shí)時(shí)語(yǔ)音翻譯,目前支持多達(dá)80余種語(yǔ)言的相互翻譯,請(qǐng)參考 demo 中 StreamSpeechTransVController 的使用,其語(yǔ)言的代碼可參考本文檔支持語(yǔ)言列表中的內(nèi)容,其已經(jīng)在base.h中的YDOnlineLanguageTool類中被封裝好,可以選擇自定義或直接使用;
1. 參數(shù)說明
格式支持:只支持wav格式。
采樣率:16k。
編碼:16bit位深的單聲道
2. 構(gòu)造識(shí)別器
YDSpeechTranslate *translate = [YDSpeechTranslate sharedTranslate];
translate.delegate = self;
YDSpeechTranslateParam *param = [YDSpeechTranslateParam param];
param.from = @"zh-CHS";//源語(yǔ)言類型,目前支持多達(dá)80余種
param.to = @"en";//目標(biāo)語(yǔ)言類型,目前支持多達(dá)80余種。 注:中英混合和粵語(yǔ)不能作為to
param.rate = @"16000";//采樣率
param.format = @"wav";//語(yǔ)音文件格式
param.vadBOS = 2000;//前端點(diǎn)靜音檢測(cè)時(shí)長(zhǎng),ms
param.vadEOS = 2000;//后端點(diǎn)靜音檢測(cè)時(shí)長(zhǎng),ms
translate.delegate = param;
3. 執(zhí)行識(shí)別過程
執(zhí)行[self.translate startListening];
開始實(shí)時(shí)語(yǔ)音翻譯,結(jié)果將在代理方法中回調(diào)給開發(fā)者;
#pragma mark - YDSpeechTranslateDelegate
- (void)onBeginOfSpeech {
[self startSpeakingAnimation];
NSLog(@"------speech start-----");
}
- (void)onEndOfSpeech {
[self endSpekingAnimation];
NSLog(@"------speech end-----");
}
- (void)onResults:(NSDictionary *)result {
NSString *context = result[@"context"];
NSString *tranContent = result[@"tranContent"];
BOOL isPartial = [result[@"partial"] boolValue];
NSString *showContext = [NSString stringWithFormat:@"%@%@", self.displayingText, context];
NSString *showTranContent = [NSString stringWithFormat:@"\n\n%@%@", self.displayingTranText, tranContent];
NSMutableAttributedString *contextAtt = [self getShowText:showContext textColor:[UIColor grayColor] font:[UIFont systemFontOfSize:13]];
NSMutableAttributedString *tranContentAtt = [self getShowText:showTranContent textColor:[UIColor blackColor] font:[UIFont boldSystemFontOfSize:15]];
[contextAtt appendAttributedString:tranContentAtt];
self.recognizedTV.attributedText = contextAtt;
if (!isPartial) {
[self.displayingText appendString:context];
[self.displayingTranText appendString:tranContent];
}
}
- (void)onCompleted:(NSError *)speechError {
[self endSpekingAnimation];
NSLog(@"------speech completed-----");
}
- (void)onConstantlyQuietIsBOS:(BOOL)isBOS {
NSLog(@"檢測(cè)到%@靜音", isBOS ? @"前端點(diǎn)" : @"后端點(diǎn)");
}
4. 識(shí)別結(jié)果說明
參數(shù) | 含義 | 說明 |
---|
bg | 分句開始時(shí)間 | 單位毫秒/ms |
ed | 分句結(jié)束時(shí)間 | 單位毫秒/ms |
context | 識(shí)別結(jié)果 |
tranContent | 翻譯結(jié)果 |
partial | 是否是中間結(jié)果 | true:中間結(jié)果;false:完整句子 |
segId | 分句 id | 從 0 開始遞增 |
支持語(yǔ)言
代碼 | 語(yǔ)言 |
---|
zh-CHS | 簡(jiǎn)體中文 |
en | 通用英文 |
enzh | 中英混合 |
ar-IL | 阿拉伯語(yǔ)(以色列) |
ar-JO | 阿拉伯語(yǔ)(約旦) |
ar-AE | 阿拉伯語(yǔ)(阿拉伯聯(lián)合酋長(zhǎng)國(guó)) |
ar-BH | 阿拉伯語(yǔ)(巴林) |
ar-DZ | 阿拉伯語(yǔ)(阿爾及利亞) |
ar-SA | 阿拉伯語(yǔ)(沙特阿拉伯) |
ar-IQ | 阿拉伯語(yǔ)(伊拉克) |
ar-KW | 阿拉伯語(yǔ)(科威特) |
ar-MA | 阿拉伯語(yǔ)(摩洛哥) |
ar-TN | 阿拉伯語(yǔ)(突尼斯) |
ar-OM | 阿拉伯語(yǔ)(阿曼) |
ar-PS | 阿拉伯語(yǔ)(巴勒斯坦國(guó)) |
ar-QA | 阿拉伯語(yǔ)(卡塔爾) |
ar-LB | 阿拉伯語(yǔ)(黎巴嫩) |
ar-EG | 阿拉伯語(yǔ)(埃及) |
pl | 波蘭語(yǔ)(波蘭) |
da | 丹麥語(yǔ)(丹麥) |
de | 德語(yǔ)(德國(guó)) |
ru | 俄語(yǔ) |
fr | 法語(yǔ)(法國(guó)) |
fr-CA | 法語(yǔ)(加拿大) |
fi | 芬蘭語(yǔ)(芬蘭) |
ko | 韓語(yǔ)(韓國(guó)) |
nl | 荷蘭語(yǔ)(荷蘭) |
cs | 捷克語(yǔ)(捷克共和國(guó)) |
hr | 克羅地亞語(yǔ)(克羅地亞) |
lv | 拉脫維亞語(yǔ)(拉脫維亞) |
ro | 羅馬尼亞語(yǔ)(羅馬尼亞) |
ms | 馬來(lái)語(yǔ)(馬來(lái)西亞) |
pt-BRA | 葡萄牙語(yǔ)(巴西) |
pt | 葡萄牙語(yǔ)(葡萄牙) |
ja | 日語(yǔ)(日本) |
sv | 瑞典語(yǔ)(瑞典) |
te | 泰盧固語(yǔ)(印度) |
ta | 泰米爾語(yǔ)(印度) |
ta-SG | 泰米爾語(yǔ)(新加坡) |
ta-LK | 泰米爾語(yǔ)(斯里蘭卡) |
ta-MY | 泰米爾語(yǔ)(馬來(lái)西亞) |
th | 泰語(yǔ)(泰國(guó)) |
tr | 土耳其語(yǔ)(土耳其) |
es | 西班牙語(yǔ)(西班牙) |
es-AR | 西班牙語(yǔ)(阿根廷) |
es-BO | 西班牙語(yǔ)(玻利維亞) |
es-CL | 西班牙語(yǔ)(智利) |
es-COL | 西班牙語(yǔ)(哥倫比亞) |
es-CR | 西班牙語(yǔ)(哥斯達(dá)黎加) |
es-EC | 西班牙語(yǔ)(厄瓜多爾) |
es-SV | 西班牙語(yǔ)(薩爾瓦多) |
es-US | 西班牙語(yǔ)(美國(guó)) |
es-GT | 西班牙語(yǔ)(危地馬拉) |
es-HN | 西班牙語(yǔ)(洪都拉斯) |
es-MEX | 西班牙語(yǔ)(墨西哥) |
es-NI | 西班牙語(yǔ)(尼加拉瓜) |
es-PA | 西班牙語(yǔ)(巴拿馬) |
es-PY | 西班牙語(yǔ)(巴拉圭) |
es-PE | 西班牙語(yǔ)(秘魯) |
es-PR | 西班牙語(yǔ)(波多黎各) |
es-DO | 西班牙語(yǔ)(多米尼加共和國(guó)) |
es-UY | 西班牙語(yǔ)(烏拉圭) |
es-VE | 西班牙語(yǔ)(委內(nèi)瑞拉) |
it | 意大利語(yǔ)(意大利) |
hi | 印地語(yǔ)(印度) |
en-AUS | 英語(yǔ)(澳大利亞) |
en-CA | 英語(yǔ)(加拿大) |
en-GH | 英語(yǔ)(加納) |
en-GBR | 英語(yǔ)(英國(guó)) |
en-IND | 英語(yǔ)(印度) |
en-IE | 英語(yǔ)(愛爾蘭) |
en-KE | 英語(yǔ)(肯尼亞) |
en-NZ | 英語(yǔ)(新西蘭) |
en-NG | 英語(yǔ)(尼日利亞) |
en-PH | 英語(yǔ)(菲律賓) |
en-SG | 英語(yǔ)(新加坡) |
en-ZAF | 英語(yǔ)(南非) |
en-TZ | 英語(yǔ)(坦桑尼亞) |
en-US | 英語(yǔ)(美國(guó)) |
vi | 越南語(yǔ)(越南) |
zh-TWN | 臺(tái)灣普通話(中國(guó)臺(tái)灣) |
lo | 老撾語(yǔ)(老撾) |
bn | 孟加拉語(yǔ)(孟加拉) |
bn-IN | 孟加拉語(yǔ)(印度) |
tl | 菲律賓語(yǔ) |
錯(cuò)誤代碼列表
錯(cuò)誤碼 | 含義 |
---|
101 | 缺少必填的參數(shù) |
102 | 不支持的語(yǔ)言類型 |
103 | 翻譯文本過長(zhǎng) |
104 | 不支持的API類型 |
105 | 不支持的簽名類型 |
106 | 不支持的響應(yīng)類型 |
107 | 不支持的傳輸加密類型 |
108 | 應(yīng)用ID無(wú)效,注冊(cè)賬號(hào),登錄后臺(tái)創(chuàng)建應(yīng)用和實(shí)例并完成綁定,可獲得應(yīng)用ID和應(yīng)用密鑰等信息 |
109 | batchLog格式不正確 |
110 | 無(wú)相關(guān)服務(wù)的有效實(shí)例 |
111 | 開發(fā)者賬號(hào)無(wú)效 |
113 | q不能為空 |
114 | 不支持的圖片傳輸方式 |
201 | 解密失敗,可能為DES,BASE64,URLDecode的錯(cuò)誤 |
202 | 簽名檢驗(yàn)失敗 |
203 | 訪問IP地址不在可訪問IP列表 |
205 | 請(qǐng)求的接口與應(yīng)用的平臺(tái)類型不一致,如有疑問請(qǐng)參考入門指南 |
206 | 因?yàn)闀r(shí)間戳無(wú)效導(dǎo)致簽名校驗(yàn)失敗 |
207 | 重放請(qǐng)求 |
301 | 辭典查詢失敗 |
302 | 翻譯查詢失敗 |
303 | 服務(wù)端的其它異常 |
304 | 會(huì)話閑置太久超時(shí) |
401 | 賬戶已經(jīng)欠費(fèi)停 |
402 | offlinesdk不可用 |
411 | 訪問頻率受限,請(qǐng)稍后訪問 |
412 | 長(zhǎng)請(qǐng)求過于頻繁,請(qǐng)稍后訪問 |
1001 | 無(wú)效的OCR類型 |
1002 | 不支持的OCR image類型 |
1003 | 不支持的OCR Language類型 |
1004 | 識(shí)別圖片過大 |
1201 | 圖片base64解密失敗 |
1301 | OCR段落識(shí)別失敗 |
1411 | 訪問頻率受限 |
1412 | 超過最大識(shí)別字節(jié)數(shù) |
2003 | 不支持的語(yǔ)音聲道 |
2004 | 不支持的語(yǔ)音上傳類型 |
2005 | 不支持的語(yǔ)言類型 |
2006 | 不支持的識(shí)別類型 |
2201 | 識(shí)別音頻文件過大 |
2301 | 識(shí)別音頻時(shí)長(zhǎng)過長(zhǎng) |
2411 | 不支持的音頻文件類型 |
2412 | 不支持的發(fā)音類型 |
3001 | 不支持的語(yǔ)音格式 |
3002 | 不支持的語(yǔ)音采樣率 |
3003 | 不支持的語(yǔ)音聲道 |
3004 | 不支持的語(yǔ)音上傳類型 |
3005 | 不支持的語(yǔ)言類型 |
3006 | 不支持的識(shí)別類型 |
3007 | 識(shí)別音頻文件過大 |
3008 | 識(shí)別音頻時(shí)長(zhǎng)過長(zhǎng) |
3009 | 不支持的音頻文件類型 |
3010 | 不支持的發(fā)音類型 |
3201 | 解密失敗 |
3301 | 語(yǔ)音識(shí)別失敗 |
3302 | 語(yǔ)音翻譯失敗 |
3303 | 服務(wù)的異常 |
3411 | 訪問頻率受限,請(qǐng)稍后訪問 |
3412 | 超過最大請(qǐng)求字符數(shù) |
4001 | 不支持的語(yǔ)音識(shí)別格式 |
4002 | 不支持的語(yǔ)音識(shí)別采樣率 |
4003 | 不支持的語(yǔ)音識(shí)別聲道 |
4004 | 不支持的語(yǔ)音上傳類型 |
4005 | 不支持的語(yǔ)言類型 |
4006 | 識(shí)別音頻文件過大 |
4007 | 識(shí)別音頻時(shí)長(zhǎng)過長(zhǎng) |
4201 | 解密失敗 |
4301 | 語(yǔ)音識(shí)別失敗 |
4303 | 服務(wù)的異常 |
4411 | 訪問頻率受限,請(qǐng)稍后訪問 |
4412 | 超過最大請(qǐng)求時(shí)長(zhǎng) |
5001 | 無(wú)效的OCR類型 |
5002 | 不支持的OCR image類型 |
5003 | 不支持的語(yǔ)言類型 |
5004 | 識(shí)別圖片過大 |
5005 | 不支持的圖片類型 |
5006 | 文件為空 |
5201 | 解密錯(cuò)誤,圖片base64解密失敗 |
5301 | OCR段落識(shí)別失敗 |
5411 | 訪問頻率受限 |
5412 | 超過最大識(shí)別流量 |
9001 | 不支持的語(yǔ)音格式 |
9002 | 不支持的語(yǔ)音采樣率 |
9003 | 不支持的語(yǔ)音聲道 |
9004 | 不支持的語(yǔ)音上傳類型 |
9005 | 不支持的語(yǔ)音識(shí)別 Language類型 |
9301 | ASR識(shí)別失敗 |
9303 | 服務(wù)器內(nèi)部錯(cuò)誤 |
9411 | 訪問頻率受限(超過最大調(diào)用次數(shù)) |
9412 | 超過最大處理語(yǔ)音長(zhǎng)度 |
10001 | 無(wú)效的OCR類型 |
10002 | 不支持的OCR image類型 |
10004 | 識(shí)別圖片過大 |
10201 | 圖片base64解密失敗 |
10301 | OCR段落識(shí)別失敗 |
10411 | 訪問頻率受限 |
10412 | 超過最大識(shí)別流量 |
11001 | 不支持的語(yǔ)音識(shí)別格式 |
11002 | 不支持的語(yǔ)音識(shí)別采樣率 |
11003 | 不支持的語(yǔ)音識(shí)別聲道 |
11004 | 不支持的語(yǔ)音上傳類型 |
11005 | 不支持的語(yǔ)言類型 |
11006 | 識(shí)別音頻文件過大 |
11007 | 識(shí)別音頻時(shí)長(zhǎng)過長(zhǎng),最大支持30s |
11201 | 解密失敗 |
11301 | 語(yǔ)音識(shí)別失敗 |
11303 | 服務(wù)的異常 |
11411 | 訪問頻率受限,請(qǐng)稍后訪問 |
11412 | 超過最大請(qǐng)求時(shí)長(zhǎng) |
12001 | 圖片尺寸過大 |
12002 | 圖片base64解密失敗 |
12003 | 引擎服務(wù)器返回錯(cuò)誤 |
12004 | 圖片為空 |
12005 | 不支持的識(shí)別圖片類型 |
12006 | 圖片無(wú)匹配結(jié)果 |
13001 | 不支持的角度類型 |
13002 | 不支持的文件類型 |
13003 | 表格識(shí)別圖片過大 |
13004 | 文件為空 |
13301 | 表格識(shí)別失敗 |
15001 | 需要圖片 |
15002 | 圖片過大(1M) |
15003 | 服務(wù)調(diào)用失敗 |
17001 | 需要圖片 |
17002 | 圖片過大(1M) |
17003 | 識(shí)別類型未找到 |
17004 | 不支持的識(shí)別類型 |
17005 | 服務(wù)調(diào)用失敗 |
-1000 | 未知錯(cuò)誤 |
-2000 | 查詢輸入為空 |
常見問題及注意事項(xiàng)
運(yùn)行程序崩潰?
檢查下是否對(duì)應(yīng)的 `SDK靜態(tài)庫(kù)包` 是否放到當(dāng)前工程目錄下。
翻譯沒結(jié)果?
檢查下翻譯接口回調(diào)的錯(cuò)誤信息,保證申請(qǐng)的應(yīng)用ID是有效且提前綁定了。
如何獲得應(yīng)用ID
注冊(cè)賬號(hào),登錄后臺(tái)創(chuàng)建應(yīng)用和實(shí)例并完成綁定, 可獲得應(yīng)用ID和應(yīng)用密鑰等信息。
添加翻譯 SDK 之后審核沒有通過?
翻譯 SDK 使用了 AdSupport 框架獲取設(shè)備 IDFA 信息用以統(tǒng)計(jì)計(jì)費(fèi),提交審核時(shí)對(duì)應(yīng)用是否有廣告選項(xiàng)請(qǐng)選擇“是”。
版本更新記錄
上線日期 | 版本號(hào) | 更新內(nèi)容 |
---|
2019.06.20 | v1.0.0 | 增加流式語(yǔ)音翻譯 |
2019.09.19 | v1.1.0 | 擴(kuò)充小語(yǔ)種 |