OpenSource
文章平均质量分 64
后续全部开源,不再收费,只需关注我即可,也可顺便关注我的视频号,感谢。
小李飞刀李寻欢
视频号:小明哥直播间
展开
-
python 实现文件重命名
• 使用datetime.datetime.now().strftime("%Y%m%d")获取当前日期,并格式化为字符串。• 对于每个文件,如果其扩展名为.txt,则构造新的文件名,并使用os.path.splitext()分离文件名和扩展名。• 目录路径:确保指定的目录路径是正确的,并且你有足够的权限访问该目录。• 使用os.path.join()构造旧文件和新文件的完整路径。• 使用os.path.join()构造旧文件和新文件的完整路径。""" 批量重命名目录中的文件 """原创 2024-09-12 13:41:32 · 276 阅读 · 0 评论 -
多线程中任务的取消
为了实现一旦有一个请求返回并且score大于0.9就停止其他请求的功能,我们需要在多线程或多进程中加入一个机制来监听请求的结果。• 定义一个check_and_stop函数来检查每个任务的结果,如果score大于0.9,则设置stop_flag为True,并尝试取消其他未完成的任务。4. 定义综合请求和处理逻辑的函数:fetch_score函数调用fetch_data和process_response函数,完成整个请求和处理过程。""" 处理响应数据,确保包含'score'字段 """原创 2024-09-11 17:34:54 · 712 阅读 · 0 评论 -
使用多进程或多线程进行requests请求数据并比较score
要在Python中使用多进程或多线程并发地向多个接口请求数据,并且每个接口返回一个包含score字段的字典,可以使用requests库结合concurrent.futures模块来实现。2. 定义请求函数:fetch_score函数用于向单个URL发送请求,并返回包含score字段的字典。• JSON解析:假设API返回的是JSON格式的数据,如果返回的是其他格式,需要相应地调整解析逻辑。""" 发送请求并返回包含'score'字段的字典 """""" 发送请求并返回包含'score'字段的字典 """原创 2024-09-11 15:15:01 · 826 阅读 · 0 评论 -
requests请求设置超时时间python
要使用Python的requests库来发送一个HTTP请求,并且设置一个超时时间,使得如果请求在指定时间内未得到响应,则直接放弃请求并抛出异常,可以使用requests库中的timeout参数来实现。3. 发送请求:使用requests.get方法发送GET请求,并通过timeout参数设置请求的超时时间为10秒。• 如果请求的URL是一个较慢响应的服务器,那么在10秒之内没有返回的情况下,程序会立即进入requests.exceptions.Timeout异常处理部分,并输出相应的信息。原创 2024-09-11 14:17:21 · 552 阅读 · 0 评论 -
pydantic.errors.PydanticSchemaGenerationError: Unable to generate pydantic-core schema for <class ‘s
Pydantic 无法生成 Request 类型的模式,因为它不是一个基本的 Python 类型,也没有实现 __get_pydantic_core_schema__ 方法来告诉 Pydantic 如何处理它。如果你想在模型中使用 Request 类型,但不关心其具体的验证逻辑,可以通过设置 arbitrary_types_allowed=True 来忽略这个错误。2. 复杂场景:如果需要对 Request 对象进行复杂的验证和处理,建议使用方案三,将请求处理和模型验证分离。方案一:允许任意类型。原创 2024-09-10 17:52:46 · 576 阅读 · 0 评论 -
lancedb基础学习
具体来说,Rust 代码期望从 Python 生成器对象中获取 RecordBatch,但在尝试调用 to_batches 方法时失败了,因为生成器对象没有这个方法。• 从堆栈跟踪来看,错误发生在 lancedb.table._to_record_batch_generator 函数中,这表明在尝试将数据转换为 RecordBatch 时发生了错误。检查你的代码逻辑,特别是在调用 _to_record_batch_generator 函数之前的数据准备部分,确保传入的数据是正确的类型。原创 2024-09-10 10:16:55 · 773 阅读 · 0 评论 -
Chroma使用基础1
chroma使用基础原创 2024-09-09 18:21:25 · 328 阅读 · 0 评论 -
关于 export HF_ENDPOINT=https://hf-mirror.com
为了提高访问速度和降低延迟,Hugging Face 提供了镜像服务,用户可以通过设置环境变量 `HF_ENDPOINT` 来指定使用特定的镜像地址。在开发和测试阶段,你可以设置 `HF_ENDPOINT` 指向本地服务器或私有云,这样可以在不依赖外部网络的情况下进行开发和测试。如果你的项目部署在特定的地理位置,使用当地的 Hugging Face 镜像可以显著降低请求的延迟,提高应用的响应速度。在网络条件不佳或网络拥堵的情况下,使用镜像可以提供更稳定的访问体验,确保你的应用不会因为网络问题而受到影响。原创 2024-09-06 18:17:55 · 424 阅读 · 0 评论 -
pandas 读取excel不同sheet的方法
pandas读取sheet的方法原创 2024-09-04 10:04:31 · 803 阅读 · 0 评论 -
docker国内镜像源报错解决方案
docker镜像国内源解决方案原创 2024-09-02 20:04:16 · 682 阅读 · 1 评论 -
docker将conda python环境容器化
docker镜像容器化python环境原创 2024-09-02 19:45:36 · 748 阅读 · 0 评论 -
将conda python环境打包成docker镜像
容器化python环境以及迁移原创 2024-09-02 19:39:45 · 744 阅读 · 0 评论 -
RecordManager 替换方案redis及es方法
RecordManager 替换方案redis及es方法原创 2024-08-29 10:58:28 · 577 阅读 · 0 评论 -
elasticsearch安装在服务器并进行向量检索
es进行向量检索方法原创 2024-08-29 10:43:28 · 1051 阅读 · 0 评论 -
redis服务器安装流程
redis安装在Ubuntu服务器,成功了原创 2024-08-29 10:33:56 · 1240 阅读 · 0 评论 -
python库pdf转word
pdf转word不花钱原创 2024-08-28 17:10:22 · 981 阅读 · 0 评论 -
python = “^3.8“ 这个表示啥意思
python版本确定原创 2024-08-28 10:22:04 · 318 阅读 · 0 评论 -
Poetry was unable to find a compatible version. If you have one, you can explicitly use it via the “
poetry安装依赖包遇到的问题原创 2024-08-28 10:13:18 · 438 阅读 · 0 评论 -
poetry 是什么命令,poetry install 呢?
poetry安装依赖包原创 2024-08-28 09:55:51 · 826 阅读 · 0 评论 -
bfloat16 与float16的区别
大模型的精度影响范围原创 2024-08-27 15:38:49 · 610 阅读 · 0 评论 -
ValueError: Bfloat16 is only supported on GPUs with compute capability of at least 8.0. Your Tesla V
大模型glm4-9b-chat加载报错原创 2024-08-27 15:34:20 · 511 阅读 · 0 评论 -
采用java或者python获取视频流的方法
获取视频流的方法java实现原创 2024-08-26 18:25:00 · 292 阅读 · 0 评论 -
调用火山大模型的方法
火山大模型的使用方法原创 2024-08-26 18:18:52 · 461 阅读 · 0 评论 -
shell命令查看服务器使用端口port
服务器端口查看原创 2024-08-26 18:08:34 · 774 阅读 · 0 评论 -
function call学习之2
大模型学习之function功能函数原创 2024-08-23 18:39:25 · 615 阅读 · 0 评论 -
function call使用基础
大模型请求的function功能示例原创 2024-08-23 18:12:00 · 371 阅读 · 0 评论 -
langchain写指令基础之2
langchain指令写作之2原创 2024-08-23 18:03:11 · 408 阅读 · 0 评论 -
基于langchain的prompt指令代码编写
大模型调用基础原创 2024-08-23 17:59:34 · 512 阅读 · 0 评论 -
RoBERTa-www-ext 解读及使用方法
RoBERT中文预训练模型用于排序原创 2024-08-14 15:23:42 · 1178 阅读 · 0 评论 -
NLP排序中的基础模型
NLP中排序模型构建原创 2024-08-14 14:43:27 · 340 阅读 · 0 评论 -
用于NLP领域的排序模型最佳实践
NLP大模型排序原创 2024-08-13 15:17:52 · 606 阅读 · 0 评论 -
RuntimeError: PytorchStreamReader failed reading zip archive: failed finding central directory
torch大模型下载报错原创 2024-08-13 15:13:38 · 669 阅读 · 0 评论 -
pip 安装的清华源
pip安装指定清华源原创 2024-08-12 11:09:59 · 2079 阅读 · 0 评论 -
centos下如何解决av.codec.codec.UnknownCodecError: libx264
视频解码264如何在av实现原创 2024-08-08 14:57:18 · 455 阅读 · 0 评论 -
av.codec.codec.UnknownCodecError: libx264
视频编解码libx264原创 2024-08-08 14:42:09 · 637 阅读 · 0 评论 -
RuntimeError: Expected all tensors to be on the same device, but found at least two devices, cuda:0
这个错误通常意味着你在 PyTorch 中尝试执行的操作涉及到了位于不同设备(通常是 CPU 和 GPU)上的张量。如果你确定所有的操作都应该在 GPU 上完成,你可以使用 .cuda() 方法来简化张量的移动过程。通过上述步骤,你应该能够确保所有张量和模型都在同一个设备上,从而避免出现跨设备操作的错误。一旦确认了张量所在的设备,你需要确保所有张量都在同一个设备上。如果问题仍然存在,你可能需要在代码的关键部分添加更多的打印语句来检查张量和模型的状态。如果你正在使用一个模型,确保模型也在正确的设备上。原创 2024-08-08 13:41:47 · 1123 阅读 · 0 评论 -
relocation error: /lib64/libpthread.so.0: symbol __libc_dl_error_tsd version GLIBC_PRIVATE not defin
glibc等gcc文件不能瞎装原创 2024-08-06 15:46:58 · 378 阅读 · 0 评论 -
centos 安装ffmpeg
如何安装ffmpeg在centos上原创 2024-08-05 14:46:59 · 731 阅读 · 2 评论 -
ffmpeg获得视频的音频文件
ffmpeg提取视频中的音频文件原创 2024-08-05 14:46:02 · 820 阅读 · 0 评论 -
bezier_align_forward miss in module _ext
modelscope缺少某个模块原创 2024-08-01 13:55:06 · 494 阅读 · 1 评论