清华系出手 全球第一款端侧全模态理解模型Megrez-3B开源via cnBeta全文版

12月16日报道，今日，清华系AI Infra创企无问芯穹正式开源端侧解决方案中的全模态理解小模型Megrez-3B-Omni，并同步开源其纯语言模型版本Megrez-3B-Instruct。Megrez-3B-Omni为端侧而生，选择了最适合手机、平板等端侧设备的30亿参数黄金尺寸，结构规整，单模态版本的推理速度最大领先同精度模型300%。 该模型同时具备图片、音频、文本三种模态数据的处理能力，并在三个模态的多种测评基准中取得了同尺寸下最优性能。 其多模态能力可灵活切换，响应非常迅速。比如先随手拍张单…