這篇內容是為了 解鎖高效工作秘訣 OpenAI ChatGPT X Dify工作流 這堂課程所特別準備的加碼章節,對如何運用AI服務建立自己的工作流,請參考該堂課程內容,本篇內容將著重在提供AI會議紀錄工作流前的”語音轉文字”這項工作部分。

“語音轉文字”技術早已發展多年,從最初需要講話”字正腔圓”,到如今即使說話帶有台灣國語口音,甚至中英文混合的語句,在AI技術的加持下,這些都不再是難題。然而,這樣的技術目前主要適用於”短時間語音處理”的場景,像是日常對話的辨識。對於市面上多數的AI語音辨識API,它們更側重於”對話式”的功能。然而,當商務需求涉及到”研討會”或”會議討論”這種長時間語音,處理起來就複雜得多了。
如今,隨著線上會議的普及,許多公司都開始在虛擬會議中加入AI語音逐字稿的功能。例如,Google Meet和微軟Teams就已逐步增加了AI自動生成會議紀錄和總結的功能,這對於線上會議來說相當便捷。然而,當會議不再是線上進行,而是實體面對面的情況下,具備這樣功能的廠商卻寥寥無幾,能提供完整解決方案的廠商少得可用一隻手數完。

以往,公司在進行會議時,會專門指派”會議記錄員”或是”專案負責人”來負責會議紀錄。然而,不同記錄者之間的理解能力不同,導致紀錄的質量參差不齊,這在實際工作中容易引發各種問題。有時,會議紀錄和與會者的實際記憶會出現不符的情況,這時就需要依賴錄音來進行核對與討論,確保重要資訊不會因個人理解的偏差而丟失。
在過去的幾年裡,我對錄音設備的投資可以說是相當可觀,從學生時期的MD(MiniDisc)錄音方式,到後來的各種格式的錄音設備,再到今天廣泛使用的MP3錄音設備。我在這方面的經驗豐富,見證了錄音技術的不斷進步。尤其是近幾年,隨著AI語音轉文字技術的發展,這些設備已成為我日常工作中的重要幫手。

然而,即使有了高品質的錄音設備,如果你自己親耳聽取並手動整理出文字紀錄,當然不會出現太大問題。但如果你希望依靠目前最前沿的語音轉文字技術來”偷懶”,就可能會遭遇不小的挑戰。
基本上,我已經試用了市面上推薦的、廣受好評的各類語音轉文字服務。然而,老實說,即使在錄音品質非常優秀的情況下,這些服務的辨識準確率也只能達到70分左右。更糟的是,當會議場景中有多人同時發言時,辨識出的結果通常混亂不堪,根本無法準確反映會議內容。看著那些像是”到底講了什麼”的轉文字紀錄,我時常不得不重新一字一句地自己聽取和修正,這讓我感到比自己一開始手動整理會議紀錄還更費時費力。

舉個例子,早些年我曾購買過一款號稱”語音辨識準確度極高”的飛利浦AI晶片錄音筆,當時的價格約在三千元左右。儘管它的錄音檔案音質表現還算不錯,但語音轉文字的品質實在不敢恭維,準確度差到讓我直想罵髒話。相比之下,近期我發現一款來自訊飛的SR502錄音筆,不僅錄音品質非常出色,而且其語音轉文字的辨識準確度也有了顯著提升,雖然未達官方宣稱的97%,但也有80%以上的水準,足以讓人感到滿意。

不過,這台設備的價格並不便宜,算是我在錄音設備上花費最高的一台。訊飛的商業模式也非常靈活:如果你購買的是硬體設備,那麼可以免費使用語音辨識功能;但如果只購買軟體服務,則需要付費上傳聲音檔案來進行轉檔。SR502本身設計頗具競爭力,配備了六個方向的收音孔和兩組高音質全方位麥克風,最遠的收音距離可達15米,這一點甚至超過了我曾經最愛的SONY錄音筆,收音品質非常出色。
此外,SR502還具有OCR辨識能力,能夠處理中文繁體字型。不過,在語音轉文字方面,系統只能生成簡體中文。這應該是為了因應不同市場的策略限制。雖然這可能會對某些使用者造成不便,但現今繁簡轉換已不再是難題,無論是透過網頁還是各類AI工具,都能輕鬆完成轉換。
這邊我提供一段透過SR502錄製的研討會現場錄音,我距離講者滿遠的距離但現場透過音箱撥放音量很大,設備我就放在座位前方的電腦包上頭,讓他進行收音紀錄。這檔案我直接以設備提供的WAV格式並可供大家下載,若有興趣想針對其他的語音轉文字其他工具進行測試與後續這篇文章進行比較,也可以自由下載試試看看了。

之所以選擇SR502,除了它的收音功能外,還因為它搭配了訊飛的星火模型。這個模型操作簡單,效果也不錯。使用星火模型的網頁版本,我可以將錄製好的語音檔案上傳,並進行所謂的”語篇規整”處理,這個功能可以讓語音轉出的文字更加通順易讀,幫助修正語音轉文字時出現的一些錯誤,讓最終結果更接近自然語言表達。對我來說,這就像是有一個AI助手幫我做初步的文字優化。
除了基本的語音轉文字功能,SR502還附帶了”會議整理”功能。根據我的使用經驗,只要錄音品質良好,即使在會議中有多人發言,系統也能生成不錯的會議紀錄。不過,如果會議討論過於激烈,出現多人同時說話的情況,系統的辨識能力仍然會受到影響,這時生成的文字紀錄可能需要手動進行校正。因此,這款設備特別適合有秩序的會議或研討會,這種情況下,它能夠提供令人滿意的結果。

接下來,我將展示一份由SR502生成的會議紀錄,供大家參考。這款設備主要負責我工作流程中語音轉文字的初步處理。我會將SR502生成的簡體中文會議紀錄輸入到Dify的會議紀錄助手中,該助手根據我們預設的Prompt指令和格式,進行更詳細的會議紀錄整理。
下面也有SR502錄好的原始檔案,如果有興趣想拿來給其他語音辨識功能比較看看,這個4分鐘的版本也會比較適合先給基礎註冊好的新帳號,免費初期試用階段較好評估。

會選擇SR502除了考量他收音功能本身就很不錯,另外就是根據訊飛目前賣設備包服務的商務模式,目前搭配可免費使用的星火模型算非常簡單的操作並且AI處理的結果也屬很不錯。

透過與設備一同搭配的星火模型網頁版本,錄製好的語音檔案上傳後可以直接透過他的”語篇規整”(實在搞不懂這到底是甚麼含意),只能直覺認定就是把一些語音轉文字怪怪的地方透過他的AI算法幫你”處理”一下,這樣辨識出來的整段話會”讀起來更通順”,基本上我就當他是”人為修改與優化”功能看待了。

瞧瞧看透過這”語篇規整”修改前後你看看是否有差異?

雖然SR502搭配的星火模型會議紀要功能是固定流程,無法根據具體需求進行調整,但自建的AI助手則可以進行更多的個性化設定,根據不同的會議需求來調整重點。雖然目前我在優化這個流程上還遇到一些挑戰,例如,AI助手有時會漏掉部分重要資訊,不同的會議也會有不同的需求和優先事項,但我相信隨著技術的進步,這些問題最終都能得到解決。

對於這些問題,我曾考慮過提供原始的語音轉文字資料,並將我們手動整理的會議紀錄一併交給AI進行比對,找出需要改進的地方。但目前我還未找到最佳的解決方法,如果有熟悉這方面技術的朋友,歡迎分享你的經驗和見解。

基本上我要SR502與我自己的工作流作業上是處理最前面的起始環節,我只取他幫我辨識轉好的語音文字資料,有了這部分的中文簡中語音轉文字資料,我直接將他丟給由Dify做好的會議紀錄助手,它就能根據我們自己的Prompt指令與格式進行我們專屬的會議紀錄整理。
基本上SR502搭配星火模型的會議紀要你是無法干預背後的Prompt指令,他整理出的內容與流程就是固定的版本,但自己建置的AI助手就可以根據自己想挑整的部分進行指令修改,但我目前也是有優化上卡關的點,有時透過會議紀錄助手整理後的結果發現有漏掉的資訊,不同的會議有不同的忽略重點差異,這部分要怎麼教給助手改進優化呢? 本來想除提供原始的語音轉文字資料,再給AI我們自己做的會議紀錄版本,讓他與他做的會議紀錄兩者比較,找出它需要改進的地方,但是以AI工作流的方式我不知道這樣的優化流程該怎麼提供,這邊是我自己卡住的瓶頸階段了! 如果有先進們知道有甚麼好的方式,也期待你能分享一下你的使用與開發經驗了!

最後,我將展示兩份會議紀錄——一份是由SR502搭配星火模型生成的會議紀錄,另一份是由Dify工作流助手處理後的紀錄,供大家比較看看,感受兩者之間的差異。
總結來說,AI技術正在飛速發展,尤其是語音轉文字技術在不斷進步。儘管長語音辨識因前後文關係、多方對話等複雜因素而具有更高的技術難度,但這塊市場潛力巨大,未來將有更多解決方案浮現。訊飛科技目前是這方面的佼佼者,不斷推出優秀的產品。我會繼續關注並分享語音轉文字技術如何在實際工作中

如果你對 AI 的實際應用感興趣,歡迎來看看我的這堂線上課程!
[線上課程] 解鎖高效工作秘訣 OpenAI ChatGPT X Dify工作流
現在運用AI來幫你增加職場競爭力! 別再猶豫! 一起解鎖 AI 的無限潛力吧!
覺得值得分享這篇文章:
常見問題
市面上的語音轉文字服務準確度真的有那麼高嗎?
根據實測經驗,大多數商用語音轉文字服務在理想錄音環境下準確度約七成左右,遠低於行銷宣稱。當會議場景出現多人同時發言時,辨識結果更容易混亂。訊飛SR502在配備專業收音設備的情況下,可達八成以上準確度,相對表現較佳,但仍需後製調整。
為什麼SR502錄音筆比傳統錄音設備更適合會議紀錄?
SR502搭載六向收音孔與雙麥克風陣列,收音距離達15米,能有效捕捉現場聲音。更重要的是內建訊飛星火模型,提供語篇規整功能讓轉文字更通順,加上會議整理功能可自動整理多人發言,形成完整工作流而非單純的硬體設備。
Dify工作流如何搭配SR502提升會議紀錄品質?
SR502負責語音轉文字的初步處理,生成簡體中文文稿,再將其匯入Dify客製化的會議紀錄助手。透過自設Prompt指令,能根據特定會議需求調整重點與格式,相比SR502內建的固定流程,提供更高度的個性化與靈活性。
長語音辨識遇到多人同時發言時該如何處理?
當會議討論激烈或多人同時發言時,目前AI技術仍會導致辨識混亂。實務上最佳做法是確保會議秩序有序進行,讓與會者輪流發言。若無法避免,可預先透過會議紀錄員標記發言人身分,或在後製時手動校正AI無法準確判斷的片段。