模塊化重構LLaVA，替換組件只需添加1-2個文件，開源TinyLLaVA Factory來了

AIGC動態歡迎閱讀

原標題：模塊化重構LLaVA，替換組件只需添加1-2個文件，開源TinyLLaVA Factory來了
關鍵字：模型,報告,代碼,組件,編碼器
文章來源：機器之心
內容字數：4562字

內容摘要：

AIxiv專欄是機器之心發布學術、技術內容的欄目。過去數年，機器之心AIxiv專欄接收報道了2000多篇內容，覆蓋全球各大高校與企業的頂級實驗室，有效促進了學術交流與傳播。如果您有優秀的工作想要分享，歡迎投稿或者聯系報道。投稿郵箱：liyazhou@jiqizhixin.com；zhaoyunfeng@jiqizhixin.comTinyLLaVA 項目由清華大學電子系多媒體信號與智能信息處理實驗室 (MSIIP) 吳及教授團隊和北京航空航天大學人工智能學院黃雷老師團隊聯袂打造。清華大學 MSIIP 實驗室長期致力于智慧醫療、自然語言處理與知識發現、多模態等研究領域。北航團隊長期致力于深度學習、多模態、計算機視覺等研究領域。
近日，清華和北航聯合推出了 TinyLLaVA Factory, 一款支持定制、訓練、評估多模態大模型的代碼庫，代碼和模型全部開源。該代碼庫以軟件工程的工廠模式作為設計理念，模塊化地重構了 LLaVA 代碼庫，注重代碼的可讀性、功能的擴展性、和實驗效果的可復現性。方便研究者和實踐家們更容易地探索多模態大模型的訓練和設計空間。Github 項目：https://gi

原文鏈接：模塊化重構LLaVA，替換組件只需添加1-2個文件，開源TinyLLaVA Factory來了

聯系作者

文章來源：機器之心
作者微信：almosthuman2014
作者簡介：專業的人工智能媒體和產業服務平臺