- 博客(36)
- 收藏
- 关注
RSS订阅原创 Python处理扫描的PDF文件：图像OCR处理+pytesseract安装+文字提取
利用OCR （Optical Character Recognition，光学字符识别）技术，把扫描的pdf变成文字版本
2024-05-31 09:41:16
1557
原创 RLLIB：algo = Algorithm.from_checkpoint(ckpt)遇到error 3
rllib的algo = Algorithm.from_checkpoint(ckpt)遇到error 3，从c盘拷贝文件到c盘发现路径不存在，两个路径一个比一个奇怪。升级ray的版本，我之前是2.6，升级到2.8就好了。
2023-12-09 10:46:32
102
原创 RLlib五：如何丝滑使用RLlib
您可以提供在策略评估期间调用的回调。这些回调可以访问当前事件的状态。某些回调，如on_postprocess_trajectory、on_sample_end和on_train_result也是可以对中间数据或结果应用自定义后处理的地方。用户定义的状态可以为迭代中的episode.user_data dict，以及通过保存值到来报告的自定义标量指标 episode.custom_metrics dict。这些自定义指标custom_metrics将被聚合并作为训练结果的一部分报告。
2023-11-14 19:51:46
519
原创 RLlib四：Algorithms 强化学习典型算法总结
现有的基本强化学习方法总结，RLlib包含的RL算法总结，包括PPO,DQN等，包括多智能体RL算法简介
2023-11-14 10:35:24
786
原创 RLlib三：环境
RLlib适用于几种不同类型的环境，包括Farama-Foundation Gymnasium、用户定义、多智能体环境以及批处理环境。并非所有环境都适用于所有算法。查看算法概述以获取更多信息。
2023-11-14 10:07:17
415
1
原创 RLlib二：强化学习（RLlib）的关键概念
算法类的**training_step()**方法定义了位于任何算法核心的可重复执行逻辑。将其视为研究论文中算法伪代码的python实现。您可以使用training_step（）来表达您希望如何协调从环境中收集样本、将这些数据移动到算法的其他部分，以及跨不同分布式组件更新和管理策略权重。简而言之，如果开发人员想要对现有算法进行自定义更改、从头开始编写自己的算法或从论文中实现一些算法，他们将需要覆盖/修改“training_step”方法。
2023-11-13 21:01:02
547
原创 【STABLE_BASELINE3】强化学习算法实战：模型的保存，读取，再训练
STABLE-BASELINE3，模型读取，再训练：有时候需要在已经训练好的模型基础上进行再次训练。
2023-05-16 10:34:20
3085
2
原创 研究生文献笔记（obsidian模板分享！！）：zotero+bookxnote pro+obsidian
研究生（本科生）文献阅读：提高生产力
2022-10-11 17:00:50
12410
原创 强化学习-Q learning
强化学习笔记在线学习与离线学习(online learning and offline learning）内容onlineoffline理解1一次使用一个数据，一个数据点训练完了直接更新权重一次使用所有数据，一个batch（训练操作）训练完才更新权重理解2定义一个模型，并在把这个模型放入实
2022-10-11 15:14:10
1396
原创 python 读取文件 txt csv
def get_tag_info(txt_name):‘’’导入并整理单个txt数据，但不做“清洗”输入：txt路径输出：dict格式‘’’data_after = {“编号”:[], “坐标x”:[], “坐标y”:[], “坐标z”:[], “距离”:[]}with open(txt_name, ‘r’, encoding=‘utf-8’) as f: #导入单个txt文件数据og_data = f.read()data = [line for line in og_data.spli
2021-10-28 19:52:01
440
原创 WORD图、表标号——题注
WORD图、表、公式标号——题注Word中题注的作用就是给文档里的图片、表格、图表或公式等元素添加自动标注，即编号和注释文字。下面以为图片添加题注为例进行讲解（注：为表格、图表或公式添加题注的方法与为图片添加题注基本相同）。（1）选中图片，点击【引用】-【题注】-【插入题注】。（2）打开“题注”对话框，这里是为图片添加题注，所以我们在“标签”下拉列表中选择“图”。（3）如果需要对图片设置说明信息，则在题注编号后面输入相应的说明文字，然后单击“确定”按钮即可。（4）这样我们就为第一张图片添加好
2021-06-05 15:16:21
8703
4
原创 大学生如何合理运用Microsoft365+ipad
word手打公式太麻烦了ipad可以手写但不能打公式ipad适合看文档不适合做文档如何结合电脑和ipad的手写功能？Microsoft 365，微软的“腾讯文档”，大学生免费实用！1.登录学校的VPN，不登录VPN超级慢2.进入Microsoft365官网Microsoft学生注册网站3.使用自己学校的邮箱注册注意邮箱验证码可能要多等几分钟，最好多刷新自己的学校邮箱几次4.在ipad中下载word，并且使用刚刚申请的账号登录，登录可能需要多刷新几次，网络贼差5.网页版的Microso
2021-03-31 11:32:43
1326
1
原创 python-matplotlib-柱状堆积图
matplot的画图，虽然好像很简单，但是又很搞人bar官方文档import pandas as pdimport matplotlib.pyplot as pltimport numpy as npbar_data = pd.read_csv('data.csv', header=None)plt.rcParams['font.family'] = "Times New Roman"fig, ax = plt.subplots(figsize=(5, 3), dpi=200)# 这里的数
2021-03-30 10:56:57
513
原创 anaconda安装tensorflow
这里写自定义目录标题anaconda安装tensorflow管理员运行Anaconda Prompt安装keras功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入anaconda安装tensorflow你好！ 这是你第一次使用
2021-02-17 11:06:02
42087
30
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人