自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(7)
  • 收藏
  • 关注

原创 山东大学软件学院创新实训-角色疆界(七)

大模型辅助评估技术是一种利用大规模预训练模型(如GPT-3.5、GPT-4等)进行数据分析和评估的方法。这类技术在自然语言处理(NLP)、计算机视觉、推荐系统等领域有广泛应用。:这些模型通常在大量的文本或其他形式的数据上进行预训练,学习到丰富的语言模式和知识,使其能够理解和生成自然语言。:预训练模型可以通过微调来适应特定任务。这种方法被称为迁移学习,它使得模型能够在特定领域中表现出色,而不需要从零开始进行训练。:大模型可以用于自动化评估任务,如文本分类、情感分析、问答系统等。

2024-06-23 20:45:03 558

原创 山东大学软件学院创新实训-角色疆界(零)

项目目标理解电影信息:让大模型能够理解Movie101数据集中101部电影的内容,包括情节、角色和背景。视频帧序列处理:开发模型的能力,使其能够处理用户上传的关键视频帧序列。多任务处理:使模型能够在以下五个任务中表现出色:对话预测:预测角色之间的对话内容和走向。行为预测:预测角色的下一步行动。关系判断:分析角色之间的关系和互动。情感分析:识别和分析角色的情感状态。逻辑分析:进行剧情的逻辑性和连贯性分析。用户交互:提供用户友好的接口,使用户能够方便地上传视频帧和问题,并获得模型的回答。

2024-06-23 20:39:42 485

原创 山东大学软件学院创新实训-角色疆界(六)

Q: 袁华此时作诗和之前作诗时的差别在哪?A: 袁华之前作诗带有批判性,让夏洛很没有面子;原因在于夏洛和袁华的社会地位发生了翻天覆地的变化。为了之后的做之后的模型评估工作,为一些数据可视化评估做准备。我们制定如下五个任务:对话预测、行为预测、关系识别、情感分析、逻辑分析。Q: 袁华接下来会做出怎么样的行为?A: 袁华接下来会在漫天飞雪中哭泣。A: 可是我最爱的人被别人夺走了。Q: 夏洛和马冬梅是什么关系?A: 夏洛和马冬梅是夫妻关系。Q: 袁华此时的心情如何?A: 此时袁华的心情是悲伤的。

2024-06-23 20:29:29 231

原创 山东大学软件学院创新实训-角色疆界(五)

本阶段任务为适配、并编写LoRA的训练代码,使得模型训练可引入Low-Rand Adaption技术,以大幅减少训练所需内存空间与训练时间。

2024-06-23 20:00:01 320

原创 山东大学软件学院创新实训-角色疆界(三)

本阶段任务是设计部署流程、编写lora部署代码。

2024-06-23 19:34:25 177

原创 山东大学软件学院创新实训-角色疆界(二)

我们的训练策略是,首先利用先前处理好的Movie101电影数据集中的解说台词进行模型训练。为了确保模型的准确性和实用性,我们在训练过程中严格按照数据预处理的规范进行操作。接着,我们使用人工标注的五个不同任务的测试集对模型进行推理测试,以评估其性能。这些测试集涵盖了模型需要掌握的不同技能和任务,通过这种全面的测试方法,我们能够更好地了解模型在实际应用中的表现,并进行针对性的优化和改进。

2024-06-23 19:32:00 911

原创 山东大学软件学院创新实训-角色疆界(一)

本阶段任务是从Movie101下载数据集并对数据集进行处理,得到能够使mPlug-Owl进行学习训练的数据格式。Movie101包含101部电影的视频(从爬取),以及带有时间戳的解说文本(由ASR获取并人工修正)和演员台词(由OCR获取)。根据电影片段解说 (MCN) 任务和时序解说定位 (TNG) 任务的要求。

2024-06-23 19:28:27 484

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除