会发paper的学渣-CSDN博客

原创 langchain 基于ES的数据向量化存储和检索

3、多语言模型：BAAI/bge-m3 支持的输入长度

2024-05-08 21:06:45 725

send_email("name1@yourcompany.com",["name2@qq.com"],"test","hi, 大家好",save_file_path)#此处决定你发送的邮件范围，多个用空格分开，比如要发送给111555555@qq.com则对应的域名为qq.com。创建一个邮件目录，如/opt/email，并进入/opt/email。5、 telnet localhost 9925 验证是否部署成功。3、编辑docker-compose文件。2、在当前目录下编辑main.cf。

2024-03-19 15:26:04 424

原创 ASR语音识别纠错-fast correct

vi train_pretrain.sh (第9行数据赋值为data-bin，第12行为data-pretrain，第13行修改增加CUDA_VISIBLE_DEVICES=3,4)align_cal_werdur_v2.py original_query_file target_query_file 可以将纠错内容进行对齐生成对齐数据集。**********************下载sentencepiece对应的模型*************************************

2024-03-12 19:51:25 1438

原创 python 服务 fastapi

服务执行：uvicorn correct_service:app --host 0.0.0.0 --port 22101。fast api 服务。

2024-03-11 19:17:03 466

原创 gpu 相关知识

CUDA_VISIBLE_DEVICES 进行多GPU使用时，决定哪几块GPU对程序可见，多用于多GPU训练推理等。

2024-03-05 16:29:06 326

原创 python第三方包总结（有好用的包欢迎留言）

python 优秀的第三方包工具总结

2024-02-23 10:58:25 366

原创 basicsr 安装问题

安装时，如果使用单一源安装，由于原的包不完整性，容易导致安装失败：tb-nightly清华源不存在。basicsr依赖torch和torchvision和tb-nightly。其中torch根据自己的需要指定版本（不指定会使用最高版本）

2024-02-20 15:06:23 1415 1

原创 AIGC:文本生成视频

AIGC：文本到视频生成的算法模型总结积累

2023-11-29 19:23:53 518

原创 pyqt5使用经验总结

值为：Lib\site-packages\PyQt5\Qt\plugins。健名：QT_QPA_PLATFORM_PLUGIN_PATH。

2023-10-02 20:50:25 436

原创大模型lora微调-chatglm2

llm_question="ddsfdsfddsfsdg\nA. 非常满意\nB. 满意\nC. 不满意\nD. 非常不满意\n答案：".format(line_format)[{"instruction":"阅读下列短文，从每题所给的四个选项《A、 B、 C和D)中。[{"instruction":"阅读下列短文，从每题所给的四个选项《A、 B、 C和D)中。"output:"A"}]训练数据文件配置到dataset_info.json中。ckpt_path = "lora微调后的模型"

2023-09-25 17:45:11 578

原创 elasticsearch 遍历索引数据

【代码】elasticsearch 遍历索引数据。

2023-08-22 15:58:50 246

原创已经开源的中文大模型对比，支持更新

已经开源的中文大模型对比

2023-08-17 13:40:59 912

原创 hive 和hadoop相关总结

7、表查询聚类(先聚类-再查询-再排序)：select a,count(*) as frequency from mydb.t1 group by name order by frequency desc;11、给已经存在的表级联插入新列：alter table mydb.t1 add columns (name string) cascade;10、给已经存在的表插入新列：alter table mydb.t1 add columns (name string);1、表复制(五分区表复制)

2023-07-26 20:06:52 390

原创 bark 环境部署相关

conda create -n bark python=3.10.9 cudnn=8.4.1.50 cudatoolkit=11.7.0 ffmpeg x264conda activate barkpip install torch==2.0.0+cu117 torchvision==0.15.1+cu116 torchaudio==2.0.1 --index-url https://download.pytorch.org/whl/cu117pip install -r requirmen

2023-05-15 15:24:08 356