自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(8)
  • 收藏
  • 关注

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(八)

通过上述神经网络,我们可以预测输入图像进行处理的最优分辨率,但选择哪个神经网络也是一个问题。因为上述优点,同时结合我们对不同神经网络的不同效果,选择resnetv2作为最优化图片分辨率的神经网络。

2024-06-24 15:20:54 433

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(四)

将维基百科中的数据集划分为训练集测试集验证集合。

2024-06-24 14:08:05 175

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(七)

本周尝试在“将图片公式转化为latex格式”这一任务中加入神经网络,预测图片的最优分辨率,因为我们当前的网络处理分辨率较低的图像效果较好。选定了resnetv2,densenet,resnet,vgg四个网络来完成此任务。通过上述神经网络,我们可以预测输入图像进行处理的最优分辨率,但选择哪个神经网络也是一个问题。因为上述优点,同时结合我们对不同神经网络的不同效果,选择resnetv2作为最优化图片分辨率的神经网络。

2024-06-24 09:57:37 136

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(六)

由上面代码我们可以发现一个重要参数 load_args_from_ckpt_dir,这个参数是用来表明是否读取参数,按照理论来说,如果我们将它改为false,就可以实现使用原模型进行运行,但我们从下面的init函数的逻辑中可以知道,模型会要求你先将load_args_from_ckpt_dir设为True,才可以运行。首先,我先将微调代码下载到本地,并下载相应的SWIFT库,这样就可以深入的了解,调用库中的函数对参数的要求。在下一步工作中,我们打算使用school_math数据集对微调后模型进行评估。

2024-05-31 14:22:01 247

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(五)

组内的王同学提出要集成一些小工具到"知之"中去,其中姜同学负责“”这一环节。我和姜同学合作来实现这个工作。我负责在前期,并在中期确定使用深度学习后进行。姜同学负责去决策选择何种技术,写代码debug,以及后期对识别精度的优化(比如探讨图像分辨率对识别精度的影响)。

2024-05-31 14:13:56 1585

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(三)

思维链式模型提供了一种对复杂问题进行推理和解决的方法,模拟人类的思维过程,解决语言理解难题,并推动人工智能在自然语言处理和推理方向上的发展。Zhao团队,2023b),并且随着模型规模的增大,出现了许多新的功能,例如上下文学习和思维链推理(Brown团队,2020;Wei团队,2022b,a;推理过程线性化的限制,并且在不同模态之间的交互上存在困难,只能从前向后推理,无法发散思维且回溯其推理过程。可以使用树、图等较为复杂的拓扑结构,随着模型从线性链过渡到层次树和复杂的图形,增强了解决复杂问题的能力。

2024-05-30 21:26:10 195

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(二)

本周了解到了魔搭社区可以获得很多模型库以及数据集,同时该社区会有一定时长的免费GPU资源供使用,使用本周尝试一下魔搭社区。不过还是有报错:AssertionError: Torch not compiled with CUDA enabled。选择Meta-Llama-3-8B-Instruct进行尝试。在文档中心处学习魔搭社区的基本使用方法。用了gpu环境就可以运行了。首先,完成注册,进入界面。

2024-05-30 21:18:01 213

原创 教育领域“知之”大模型--山东大学软件学院2024年项目实训(一)

本周组内确定了分工,阅读了一些关于LLM的文献扩充知识,对所阅读文献大致介绍如下:大型语言模型(LLMs)的基本背景涵盖了多个关键方面:

2024-05-30 19:54:13 568

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除