問:目前市場上有一些測試集來驗證各家大模型的效果,現在是否有相對權威的測評體系?
答:一套科學、系統的評測體系是非常必要的,認知智能全國重點實驗室牽頭設計了通用認知大模型評測體系,并與中科院人工智能產學研創新聯盟和長三角人工智能產業鏈聯盟共同探討形成了覆蓋7大類481個細分任務類型。主要包括:1、多風格、多任務的長文本生成能力;2、多層次跨語種語言理解;3、泛領域開放式知識問答;4、情境式思維鏈邏輯推理;5、多題型可解析數學能力;6、多功能多語言代碼能力;7、多模態輸入和表達能力。
問:看國內的一些第三方機構評測,訊飛星火已經在國內處于領先,請問星火大模型后續還有哪些新版本規劃?
答:5月6日發布會上,劉慶峰董事長提出了星火大模型后續清晰明確的里程碑規劃:
6月9日:突破開放式問答(即實時問答),通過類搜索插件獲取知識,以更人性化的方式呈現。此外,升級多輪對話能力,數學能力還會再上一個新的臺階。
8月15日:升級代碼能力,讓開發者、合作伙伴高效方便使用,訊飛內部已經在使用代碼生成能力。同時,多模態交互能力正式開放給客戶。
10月24日(科大訊飛全球開發者節):通過科學、系統的評測方法在通用認知大模型能力上能夠對標ChatGPT,在中文上超越,在英文上達到跟它相當的水平。
問:教育C端業務整體進展如何?
個性化學習手冊截止到2022年底已經在1400所學校商業化運營,2023年預計新增校600所,營收增長目標38%。單校運營質量持續提升,續購率提升至22年的91%,付費轉化率超過70%,成熟運營校的產值提升16%。2023年一季度營收同比增長超過40%;
AI學習機2022年營收同比增長53%,NPS凈推薦值持續保持行業第一,今年2月6日,AI學習機T20Pro全新升級上市,為3-8歲、8-12歲、12-18歲的孩子分別匹配啟蒙益智精準學、自主輔學精準學、學業提升精準學,通過環環相扣的“個性特征識別-自主閉環學習-真實效果反饋”三大模塊幫助孩子減輕學業負擔,AI學習機2023年一季度營收同比增長超過20%,且搭載大模型技術落地后市場,銷量顯著提升。
問:訊飛開放平臺賦能開發者的模式進展如何?訊飛星火大模型發布后,后續基于AI開放平臺構建的商業生態會不會進一步打開空間?
訊飛AI開放平臺開發者生態持續保持良性發展,現在有400多萬實名認證的開發者、500多萬的合作伙伴。開放平臺星火大模型未來可以進一步降低技術開發門檻,幫助更多開發者完成諸多智慧涌現的工作,同時集成越來越多的專業插件,聯合各行業合作伙伴共建大模型“星火”生態。發布會之前已有36個行業、超3000家企業與訊飛達成了明確合作意向。