OPPO聯合聯發科共建大模型端側化部署方案,基于AndesGPT的新小布將開啟新一輪公測
2023-10-12 10:30:57 OPPO10月11日,OPPO宣布與聯發科技合作共建輕量化大模型端側部署方案,通過采用4位量化技術,實現精度不掉點效果下端側化性能更優,共同推動 AndesGPT 大語言模型和多模態大模型在端側逐步落地。
AndesGPT 作為OPPO自主訓練的生成式用戶專屬大模型。該模型以“端云協同”為基礎架構設計思路,推出從10億至千億多種不同參數規模的模型規格,實現在本地與云端協同運作的效果。
AndesGPT 對大模型端側推理引擎進行算子融合與優化,使得結果生成速度大于人類正常閱讀速度,從而能更好滿足用戶需求。目前,AndesGPT 已經入選 C-Eval 全球中文榜單,并以 79.9 高分登該榜榜首。
同日,基于AndesGPT大模型打造的全新小布助手開啟新一輪公測,全新小布助手對傳統語音助手進行內核級升級,為用戶帶來更智能的體驗。在知識與問答方面,通過引入高質量的知識圖譜、QA問答數,并結合對預訓練和指令精調技術的優化,顯著提升了大語言模型知識與百科能力的覆蓋面和準確性。
今年9月,AndesGPT登上SuperCLUE榜單,在十大基礎能力排行榜的“知識與百科”能力測試中得到98.33的高分,大幅度領先其他大模型,僅次于GPT4排名國內第一,并在“角色扮演能力”測試中排名前三。
自2020年起,OPPO已啟動AI大模型相關技術的探索與實踐,曾獲得大規模知識圖譜問答KgCLUE行業評測的第一名,中文自然語言理解CLUE第一名。未來,AndesGPT將持續加持OPPO智能助手小布的AI能力,為用戶帶來更好的使用體驗,并逐步應用于更多OPPO核心產品中。
11月16日,ColorOS 14 將于OPPO開發者大會中亮相,AndesGPT更多元化的應用場景或將同步發布,敬請期待。