国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片

Dolphin

AI工具6個(gè)月前更新 AI工具集
387 0 0

Dolphin – 清華聯(lián)合海天瑞聲推出的語(yǔ)音識(shí)別大模型

Dolphin

Dolphin是清華大學(xué)電子工程系語(yǔ)音與音頻技術(shù)實(shí)驗(yàn)室與海天瑞聲共同研發(fā)的一款面向東方語(yǔ)言的語(yǔ)音識(shí)別大模型。它支持40種東方語(yǔ)言的語(yǔ)音識(shí)別,尤其在中文方面,涵蓋22種方言(包括普通話),能夠精準(zhǔn)捕捉不同地區(qū)的語(yǔ)言特征。Dolphin的訓(xùn)練數(shù)據(jù)總時(shí)長(zhǎng)達(dá)到21.2萬(wàn)小時(shí),其中高質(zhì)量專(zhuān)有數(shù)據(jù)為13.8萬(wàn)小時(shí),開(kāi)源數(shù)據(jù)為7.4萬(wàn)小時(shí)。與同等尺寸的Whisper模型相比,Dolphin在詞錯(cuò)率(WER)上表現(xiàn)出色,如base版本的平均WER下降了63.1%,而small版本則降低了68.2%。該模型采用CTC-Attention架構(gòu),結(jié)合E-Branchformer編碼器與Transformer解碼器,通過(guò)4倍下采樣層提升計(jì)算速度,同時(shí)保留關(guān)鍵信息。

Dolphin是什么

Dolphin是由清華大學(xué)電子工程系語(yǔ)音與音頻技術(shù)實(shí)驗(yàn)室與海天瑞聲共同推出的針對(duì)東方語(yǔ)言的語(yǔ)音大模型。它支持40種東方語(yǔ)言的語(yǔ)音識(shí)別,中文方面涵蓋22種方言(包括普通話),能夠精準(zhǔn)識(shí)別不同地區(qū)的語(yǔ)言特點(diǎn)。模型的訓(xùn)練數(shù)據(jù)總時(shí)長(zhǎng)達(dá)到21.2萬(wàn)小時(shí),其中高質(zhì)量專(zhuān)有數(shù)據(jù)占13.8萬(wàn)小時(shí),開(kāi)源數(shù)據(jù)為7.4萬(wàn)小時(shí)。Dolphin在性能上表現(xiàn)優(yōu)異,其詞錯(cuò)率(WER)明顯低于同尺寸的Whisper模型,base版本平均WER降低63.1%,small版本降低68.2%。該模型采用CTC-Attention架構(gòu),結(jié)合E-Branchformer編碼器與Transformer解碼器,通過(guò)4倍下采樣層加速計(jì)算并保留關(guān)鍵語(yǔ)音信息。

Dolphin的主要功能

  • 多語(yǔ)言及方言識(shí)別:Dolphin支持40種東方語(yǔ)言的語(yǔ)音識(shí)別,廣泛覆蓋不同語(yǔ)言環(huán)境,滿足多樣化的語(yǔ)音識(shí)別需求。
  • 高精度語(yǔ)音轉(zhuǎn)文字:Dolphin能夠高效且準(zhǔn)確地將語(yǔ)音信號(hào)轉(zhuǎn)換為文本,確保在多語(yǔ)言和方言的識(shí)別任務(wù)中保持較高的準(zhǔn)確率,減少錯(cuò)誤和誤解。
  • 自定義語(yǔ)言和地區(qū)設(shè)置:用戶可以根據(jù)需求靈活指定識(shí)別的語(yǔ)言和地區(qū)。Dolphin采用兩級(jí)語(yǔ)種標(biāo)簽系統(tǒng),第一標(biāo)簽指定語(yǔ)種(如<zh>表示中文),第二標(biāo)簽指定地區(qū)(如<CN>表示中國(guó)),使模型能夠精準(zhǔn)捕捉同一種語(yǔ)言內(nèi)不同方言和口音的差異,從而提高識(shí)別效果。
  • 開(kāi)源支持與二次開(kāi)發(fā):Dolphin的base與small版本模型以及推理代碼完全開(kāi)源,為開(kāi)發(fā)者提供了極大的便利。通過(guò)開(kāi)源特性,開(kāi)發(fā)者能夠根據(jù)自身需求對(duì)模型進(jìn)行二次開(kāi)發(fā)和優(yōu)化,滿足個(gè)性化需求,推動(dòng)語(yǔ)音識(shí)別技術(shù)在更多領(lǐng)域的應(yīng)用與創(chuàng)新。
  • 方便快捷的使用方式:Dolphin提供多種使用方式,包括命令行調(diào)用和Python接口調(diào)用,用戶可以通過(guò)簡(jiǎn)單的命令行指令快速啟動(dòng)語(yǔ)音識(shí)別任務(wù),或在Python環(huán)境中靈活調(diào)用模型進(jìn)行語(yǔ)音處理,提高開(kāi)發(fā)效率和應(yīng)用靈活性。

Dolphin的技術(shù)原理

  • CTC-Attention架構(gòu):Dolphin采用CTC-Attention架構(gòu),結(jié)合了CTC的序列建模能力與注意力機(jī)制的上下文捕捉能力,有效處理復(fù)雜音頻輸入時(shí),保持高效處理速度,提升模型準(zhǔn)確性和效率。
  • E-Branchformer編碼器:E-Branchformer編碼器采用并行分支結(jié)構(gòu),有效捕捉輸入語(yǔ)音信號(hào)的局部與全局依賴(lài)關(guān)系,為模型提供豐富特征表示,提升識(shí)別準(zhǔn)確性。
  • Transformer解碼器:Dolphin的解碼器采用Transformer架構(gòu),在序列到序列任務(wù)中表現(xiàn)優(yōu)秀,生成高質(zhì)量文本輸出。自注意力機(jī)制有效捕捉文本中的長(zhǎng)距離依賴(lài),確保輸出文本的連貫性與質(zhì)量。
  • 4倍下采樣層:為進(jìn)一步提升訓(xùn)練效率與性能,Dolphin引入4倍下采樣層,減少輸入特征序列長(zhǎng)度,加速計(jì)算,同時(shí)保留重要語(yǔ)音信息,確保模型識(shí)別效果。
  • 兩級(jí)語(yǔ)種標(biāo)簽系統(tǒng):Dolphin引入創(chuàng)新性的兩級(jí)語(yǔ)種標(biāo)簽系統(tǒng),第一標(biāo)簽指定語(yǔ)種(例如<zh>表示中文),第二標(biāo)簽指定地區(qū)(例如<CN>表示中國(guó)),增強(qiáng)模型對(duì)方言和語(yǔ)言相似性的捕捉能力。

Dolphin的項(xiàng)目地址

Dolphin的應(yīng)用場(chǎng)景

  • 會(huì)議記錄:自動(dòng)將會(huì)議中的語(yǔ)音內(nèi)容轉(zhuǎn)化為文字記錄,提升工作效率。
  • 語(yǔ)音輸入法:在智能設(shè)備上,用戶能夠通過(guò)語(yǔ)音輸入文字,減少手動(dòng)輸入的煩惱,提升輸入速度與便利性。
  • 智能語(yǔ)音助手:支持多種語(yǔ)言和方言,能夠更好地理解用戶的語(yǔ)音指令,提供準(zhǔn)確反饋,減少因方言或口音引起的誤解。
  • 智能家居:用戶可以通過(guò)語(yǔ)音控制智能家居設(shè)備,例如燈光、空調(diào)等,提升家居智能化和便利性。
  • 新聞媒體:快速將新聞采訪、播客等語(yǔ)音內(nèi)容轉(zhuǎn)化為文字,方便編輯與發(fā)布。
  • 語(yǔ)言學(xué)習(xí):支持多種語(yǔ)言和方言的識(shí)別,幫助學(xué)生練習(xí)發(fā)音與語(yǔ)言表達(dá)。

常見(jiàn)問(wèn)題

  • Dolphin支持哪些語(yǔ)言和方言?:Dolphin支持40種東方語(yǔ)言的語(yǔ)音識(shí)別,其中中文涵蓋了22種方言。
  • 如何使用Dolphin進(jìn)行語(yǔ)音識(shí)別?:用戶可以通過(guò)命令行或Python接口調(diào)用Dolphin進(jìn)行語(yǔ)音識(shí)別任務(wù),使用簡(jiǎn)單的指令即可啟動(dòng)。
  • Dolphin是開(kāi)源的嗎?:是的,Dolphin的base和small版本模型及推理代碼均已開(kāi)源,開(kāi)發(fā)者可以使用和改進(jìn)。
  • 如何進(jìn)行模型微調(diào)?:用戶可以根據(jù)自身需求,利用開(kāi)源代碼進(jìn)行模型的二次開(kāi)發(fā)和微調(diào),以適應(yīng)特定的應(yīng)用場(chǎng)景。
閱讀原文
? 版權(quán)聲明
蟬鏡AI數(shù)字人

相關(guān)文章

蟬鏡AI數(shù)字人

暫無(wú)評(píng)論

暫無(wú)評(píng)論...
国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片
<span id="3dn8r"></span>
    1. <span id="3dn8r"><optgroup id="3dn8r"></optgroup></span><li id="3dn8r"><meter id="3dn8r"></meter></li>

        97久久超碰国产精品电影| 久久久久成人黄色影片| 精品99999| 精品夜夜嗨av一区二区三区| 欧美一级日韩免费不卡| 麻豆91精品91久久久的内涵| 2023国产精品视频| 国产精品123| 一区二区三区欧美亚洲| 91精品麻豆日日躁夜夜躁| 国内外精品视频| 亚洲三级在线免费| 欧美一卡2卡3卡4卡| 夫妻av一区二区| 亚洲成人av一区| 久久人人超碰精品| 欧美性欧美巨大黑白大战| 久久精品国产澳门| 亚洲精品久久久蜜桃| 精品久久一区二区| 色老头久久综合| 国产中文字幕一区| 一区二区三区国产精品| 久久亚洲欧美国产精品乐播| 一本久久a久久精品亚洲| 毛片一区二区三区| 亚洲一区二区欧美| 国产蜜臀97一区二区三区| 制服丝袜中文字幕一区| 国产福利不卡视频| 日本aⅴ亚洲精品中文乱码| 一区在线中文字幕| 欧美激情中文不卡| 久久综合中文字幕| 3d动漫精品啪啪| 欧美日韩免费高清一区色橹橹| 国产成人亚洲综合a∨婷婷| 日韩影院免费视频| 亚洲午夜精品网| 亚洲人精品一区| 欧美国产日韩在线观看| 精品美女在线观看| 欧美草草影院在线视频| 91精品国产色综合久久不卡蜜臀| 在线看日韩精品电影| 91啦中文在线观看| 99精品国产99久久久久久白柏| 国产一区二区三区不卡在线观看| 亚洲一区二区高清| 亚洲综合色噜噜狠狠| 亚洲精品一二三| 一区二区三区美女| 一区二区三区久久久| 一区二区高清在线| 亚洲国产成人va在线观看天堂| 亚洲激情校园春色| 亚洲主播在线观看| 五月激情六月综合| 久久精品国产一区二区| 蜜臀久久久99精品久久久久久| 青青草原综合久久大伊人精品优势 | 性欧美疯狂xxxxbbbb| 亚洲小少妇裸体bbw| 五月婷婷久久综合| 日本欧洲一区二区| 久久精品久久精品| 韩国成人在线视频| 大美女一区二区三区| zzijzzij亚洲日本少妇熟睡| 色老汉一区二区三区| 欧美精品久久天天躁| 日韩三级伦理片妻子的秘密按摩| 日韩精品一区二区三区在线观看 | 欧美日韩精品欧美日韩精品一综合| 色婷婷久久久综合中文字幕| 欧美伊人精品成人久久综合97| 欧美日韩美女一区二区| 久久久国产精华| 亚洲美女视频在线观看| 奇米四色…亚洲| 丁香婷婷综合五月| 欧美午夜电影在线播放| 欧美mv和日韩mv国产网站| 中文av字幕一区| 天堂影院一区二区| 粉嫩在线一区二区三区视频| 91丨porny丨户外露出| 欧美一区在线视频| 综合久久久久久久| 蜜桃精品视频在线| 91丨九色丨尤物| 欧美va在线播放| 亚洲精品高清视频在线观看| 久久精品国产精品青草| 91麻豆免费观看| 精品久久人人做人人爰| 最新欧美精品一区二区三区| 美女国产一区二区| 在线观看成人小视频| 国产校园另类小说区| 午夜日韩在线电影| 波波电影院一区二区三区| 欧美成人性战久久| 亚洲高清在线精品| 日本韩国视频一区二区| 久久精品男人的天堂| 日韩va亚洲va欧美va久久| 一本色道久久加勒比精品| 久久久亚洲精华液精华液精华液 | 久久九九99视频| 午夜伊人狠狠久久| 一本久久a久久免费精品不卡| 久久久精品天堂| 六月丁香综合在线视频| 欧美日韩激情在线| 亚洲欧洲制服丝袜| a4yy欧美一区二区三区| 国产亚洲女人久久久久毛片| 日本视频中文字幕一区二区三区| 一本到高清视频免费精品| 欧美极品aⅴ影院| 国产精品一区二区三区四区| 日韩欧美成人激情| 久久精品国产99国产| 日韩欧美电影一二三| 日本成人在线一区| 欧美一级xxx| 九一九一国产精品| 精品国产亚洲一区二区三区在线观看 | 理论电影国产精品| 日韩午夜激情电影| 老司机精品视频一区二区三区| 91精品国产全国免费观看| 亚洲成人免费电影| 91精品国产综合久久香蕉麻豆| 亚洲.国产.中文慕字在线| 欧美日韩精品三区| 美腿丝袜在线亚洲一区 | 国产精品午夜在线观看| 国产高清视频一区| 国产精品高潮呻吟久久| 色偷偷久久一区二区三区| 一区二区三区在线视频观看58| 在线观看一区二区视频| 亚洲国产精品久久不卡毛片| 91精品国产综合久久蜜臀 | 精品视频资源站| 国产精品久久久一区麻豆最新章节| 日韩一级免费一区| 色狠狠综合天天综合综合| 国产一区二区三区四区五区入口 | 日韩欧美综合一区| 国产综合色产在线精品| 国产精品视频九色porn| 91久久精品国产91性色tv| 婷婷综合另类小说色区| 久久伊人中文字幕| jlzzjlzz欧美大全| 午夜精品免费在线观看| 久久青草欧美一区二区三区| 色哟哟国产精品免费观看| 日本中文字幕一区| 国产精品妹子av| 欧美女孩性生活视频| 精品一区二区三区在线观看国产| 国产精品丝袜91| 欧美一区二区三区小说| 成人av网址在线| 日韩成人一区二区| 中文字幕一区二区三区蜜月| 欧美日韩综合色| 成人综合婷婷国产精品久久免费| 亚洲一区二区不卡免费| 国产日韩欧美制服另类| 欧美日韩第一区日日骚| 成年人午夜久久久| 看电影不卡的网站| 亚洲第一av色| 日本一区二区三区dvd视频在线| 欧亚洲嫩模精品一区三区| 国产精品中文字幕日韩精品 | 亚洲一区二区三区中文字幕| 久久女同精品一区二区| 欧美日韩不卡视频| 午夜视频一区在线观看| 欧美日韩激情一区二区三区| 国产女人水真多18毛片18精品视频| 国产精品免费视频观看| 一本久久精品一区二区| 精品一区二区日韩| 亚洲福利一二三区| 久久久99精品久久| 日韩午夜激情视频| 欧美精品v国产精品v日韩精品| youjizz久久| 国产成人午夜精品影院观看视频 | 丁香五精品蜜臀久久久久99网站 | 欧美日韩综合在线| 97se亚洲国产综合自在线不卡 | 久久亚洲一区二区三区明星换脸 |