云財經訊，2025年1月26日，百川智能宣布正式上線Baichuan-Omni-1.5開源全模態模型。該模型不僅支持文本、圖像、音頻和視頻的全模態理解，還具備文本和音頻的雙模態生成能力。在視覺、語音及多模態流式處理等方面，Baichuan-Omni-1.5的表現均優于GPT-4。交互型多模態大模型是指跨越單一模態的限制，支持文本、音頻、圖像、視頻等模態任意組合的輸入輸出，能做出實時的、“類人”的理解和反饋，可以跟人無障礙交流的大模型。西部證券分析師認為，應用是連接人類意圖與信息及技術實現的媒介，其本質是交互。在大模型迭代過程中，性能提高固然重要，但交互的升級也同樣具有重大價值，交互型多模態大模型的出現有望推動人機交互變革，向更為簡單的自然語言交互形式發展。其進一步指出，交互型多模態大模型主要應用場景包括教育、編程、醫療健康、游戲、情感陪伴等。相關上市公司拓爾思(300229)數字經濟研究院及相關研發團隊已經完成康養大模型第一版本的訓練，加入了情感支持、主動問答以及多模態的能力，正在與虛擬人進行整合。