Cantonese Voice Benchmark粵語語音基準
EN繁中

版本 1.0 · 適用於 Cantonese Voice Benchmark 2026.1

規則

你參賽即代表同意嘅事、我哋相應承擔嘅責任,同埋出事嗰陣會點處理。寫出嚟係畀你認真睇一次,唔係擺喺度畀人跳讀。

邊個可以參加

任何擁有可運作粵語語音系統嘅公司或研究團隊。免費參加,亦冇任何獨家安排。要排名就要做齊三個核心範疇——語音辨識、語言理解同語音合成,呢三個加埋就係核心分數。對話範疇自由參加,唔計入核心分數,而且由主辦方負責進行,唔係參賽者自己開始。少做幾個範疇一樣可以,逐個範疇照樣公布,只係唔會入排名。帳戶由主辦方開立;有咗帳戶之後,喺 portal 提交列明參加範疇嘅申請即告參賽,申請一經提交即時批核。

匿名

排行榜預設用代號識別你。具名係自願,由你自己揀,而且喺成績公布之前隨時可以改變主意。未經書面同意,我哋喺報告入面永遠唔會提你個名。呢一段擺喺規則正文,而唔係收埋喺條款入面,因為呢個係大部分參賽者最先想知嘅事。

點樣計分

每個公布嘅數字都附有自助抽樣置信區間;區間重疊嘅隊伍會並列公布,而唔會排先後。計分前套用嘅文字正規化係以可執行嘅程式碼公開,而唔係文字描述,所以你可以自己計出同我哋一模一樣嘅數字。完整評測方法

你冇參加嘅範疇會顯示為「未參加」,永遠唔會當作零分。因為我哋平台故障而失敗嘅測試,唔會對你不利,亦唔會用掉你嘅配額。

一次正式評測喺你遞交之前只係草稿:淨係你自己睇到,唔會入排名,我哋亦唔會幫你遞交——要喺該次測試嘅頁面撳「遞交」,而且要喺回合截止之前。排行榜每個範疇顯示你最後遞交嗰次,所以跑得差嗰次唔交,對你冇任何影響。

點樣入到下一輪

整個計劃分輪進行。資格賽決定邊個可以繼續;正式賽決定最後公布嘅名次。要跑邊幾輪、每輪幾長、每輪可以用幾多次計分測試,由主辦單位設定,並且喺該輪開放期間顯示喺你嘅參賽者頁面。

晉級線由機器決定,用嘅係該輪公布嘅同一個分數,並且只計該輪列為必考嘅範疇。冇人會憑主觀意見令你晉級或者出局,而該輪亦唔會用一個佢冇要求你參加嘅範疇嚟排你。

並列唔會被拆開。排行榜拒絕將置信區間重疊嘅隊伍分先後,晉級線亦跟同一個規矩:如果條線落喺一個並列區間入面,成個區間一齊晉級——所以「頭四名晉級」有時會變成五隊。用一個本評測公開講過量度唔到嘅差距去淘汰一隊,係更差嘅做法。至於跑咗但計唔到分嘅隊伍,唔會當佢哋包尾:主辦單位會另外收到名單,逐隊人手決定。

誠信

  • 回應限時。 每段語音都有一個限時,由語音結束計到你第一個回應位元組為止。對一個正常運作嘅系統嚟講好寬鬆,對人手抄寫嚟講就遠遠唔夠。呢個就係設限時嘅目的。
  • 輪換語音。 每個評測時段抽取嘅子集都唔同,抽取時用嘅種子值會記錄低,所以任何一次歷史抽取都可以喺爭議期間完整重現。
  • 保留集驗證。 最終名次會用一套冇人見過嘅語音、透過即時連線再確認一次,無論之前用嘅係邊種提交方式。
  • 容許使用託管 API。 你營運嘅係一個伺服器,背後叫咩由你決定,包括第三方託管模型。但要喺系統說明入面申報所有託管組件 —— 一個冇人講得出係點嚟嘅成績,唔算成績。同時附帶兩項責任:呢啲錄音係真實客戶通話,轉發出去即係你成為咗處理者,你必須有權咁做;另外延遲係喺我哋條 socket 度量,供應商慢就係你嘅數字,唔係佢哋嘅。
  • 每個時段三次正式測試。 練習次數不限,亦唔計分。
  • 系統說明。 一至兩頁,喺成績定案之前必須提交——喺 portal 度填寫,入面列咗六條要答嘅問題。未交之前總分會扣起,核心分數則不受影響。喺正式測試中有未申報嘅人手參與,係唯一一項會直接終止參賽資格嘅事。

我哋唔會聲稱啲聲音錄唔到。語音係串流去你嘅程序,梗係錄得到。我哋只係講一件範圍窄啲但真確嘅事:回應限時令人手抄寫做唔到,每一份語料包都發給一位具名收件人並有紀錄,而最終嗰套語音係全新嘅。我哋冇喺語音入面加數碼水印,亦冇聲稱有:追溯責任靠嘅係發放紀錄,上面有名有姓,所以係可以執行嘅。

數據

評測語音係香港客服中心嘅真實錄音,已經移除個人資料。本屆期間你可以用佢嚟產生提交結果。你不得轉發、不得公開發布、亦不得用嚟訓練。所有取用都有紀錄。本屆結束之後三十日內,你手上所有副本都要刪除。

爭議

分數只增不改:更正會以一個新數值加註釋嘅方式公布,永遠唔會靜靜雞改咗算數。如果你認為某個數字有錯,可以提出爭議,我哋會畀你睇背後逐段嘅紀錄,包括邊啲失敗我哋歸咎於自己。成績喺公布之前會有一段覆核期,等分歧可以先私下解決。

退出

喺成績公布之前,你隨時可以退出——喺你自己嘅 portal 度撳,唔使問任何人。你所有分數會作廢,並且即刻喺排行榜上消失。測試紀錄會保留,所以之前已經提出嘅爭議仍然可以有答覆。成績公布之後,匿名嘅仍然匿名,而具名嘅可以要求改返代號。

申請權限 · 評測方法 · 關於語料庫