在數發部數產署支持下，工研院於10月29日宣布成立台灣首座「AI測試實驗室」。未來國內應用語言模型進行AI相關開發的公司，都能帶上自家模型，到實驗室進行評估與檢測。
工研院表示，AI測試實驗室的主要目標是協助國內廠商評估及改進語言模型，以確保語言模型、AI應用能在各種不同場景中保持穩定和可靠性，同時滿足企業和使用者需求。
具體而言，AI測試實驗室有哪些重要任務？
任務1：解除資安疑慮
生成式AI應用範圍日益拓展，作為AI理解文本、生成內容、語音辨識、情感分析等重要依據的語言模型，卻容易因為數據偏差或失真，導致產生錯誤或不當資訊，在處理敏感數據時亦存在資安風險。
因此，工研院參考國際可信賴AI的相關框架及標準，透過AI產品與系統評測中心（Artificial Intelligence Evaluation Center，AIEC）專家以及技術委員會，建設可信任語言模型評測工具，提供包括準確性、公平性、可靠性、隱私及資安等自動化語言模型測試方案。
工研院表示，台灣過去欠缺對AI模型進行可信任測試的第三方認證組織，開發者只能自行運用國外大型雲端公司的模型測試，除了檢測項目不夠彈性切合需求之外，也害怕有資安疑慮。
任務2：測試是否符合繁中語境
AI測試實驗室除了有專業人員協助人工檢測項目，廠商亦可以將模型放入機器、利用系統性的題庫進行自動化審查，以測試模型準確率。工研院也補充，實驗室還有一項重要功能，便是為客戶確認新開發的模型是否符合繁體中文語境。
任務3：協助企業取得國際檢測報告、證書
工研院量測技術發展中心執行長藍玉屏表示，透過參考國際以及國內專家審議的測試題庫，將促進企業在應用AI技術時更具信心。未來，企業在語言模型通過AI測試實驗室的檢測後，也能夠獲發檢測報告與證書。
此外，為了強化國際合作，工研院也同時與法國國家計量院（LNE）簽署合作協議，針對AI進行國際合作與技術交流，助力台灣AI評測技術接軌國際。
工研院向《數位時代》表示， 目前AI測試實驗室處於試營運階段，為了鼓勵台灣企業使用，暫時不需收費，預計明年起研擬收費機制。 而已經預約檢測服務的廠商則有5、6家，包含應用範圍廣泛的智能客服機器人。
未來，工研院也希望將測試服務往醫療、金融和教育等AI智慧領域擴展。
責任編輯：李先泰
