国内首个农业多模态大模型ChatAgri V2--能看，能听，能说，能读，能写

国内首个农业多模态大模型ChatAgri V2--能看，能听，能说，能读，能写

原创 王@agriai 花卉农作物人工智能种植 2024年01月06日 17:55 河北

ChatAgri V2--国内首个多模态农业大模型，能看，能听，能说，能读，能写

看图（视频）—分析作物图像，识别生长情况；

语音—听您说，和您说；

文字—与您交流，知无不言，言无不尽

   熟悉300种花卉绿植养护栽培，143种农作物的栽培管理，病虫害（识别近5000余种植物病虫害）防治，土壤养分施用。您身边的7*24小时植物医生。识别病害→解决方案→推荐治疗药剂，一站式问题解决。

  大模型从早期只处理文本数据，到目前需要同时处理图像数据、视频数据和语音数据，其MoE架构的基本原理非常简单明了，它主要包括两个核心组件：GateNet和Experts。GateNet的作用在于判定输入样本应该由哪个专家模型接管处理。而Experts则构成了一组相对独立的专家模型，每个专家负责处理特定的输入子空间。

训练使用的数据包括以下三类：

●农业院校教材，如：植物生理学、作物栽培耕作、植物病理学、土壤学等

●行业内技术文档：作物生长图片，文字类技术手册，技术讲座语音等

●行业内数据：土壤检测数据、病害发生数据、作物生长数据等

多模态大模型（MoE架构）同时处理图片、文字、语音，能看、能听、能说、能写

ChatAgri V2效果演示（多模态）

直接输入图片（或者拍照），模型自动分析图中植物（农作物）生长情况，第1判断是否生长健康，第2是否缺乏营养元素（氮、磷、钾、钙、锌等）、以及第3发生的病害是哪种（如玉米叶斑病，黄瓜霜霉病、柑橘炭疽病、月季白粉病、文竹叶枯病等近近5000余种植物病虫害）

演示视频

，时长01:06

ChatAgri V1效果演示（仅支持文字交流）

体验多模态农业大模型ChatAgri V2