- 博客(8)
- 收藏
- 关注
原创 论文阅读2:RoG
KL散度是两个概率分布P和Q差别的非对称性的度量,在消息系统中称为相对熵。相对熵为非负数对于离散随机变量,概率分布P和Q的KL散度为:等价于。
2024-07-07 17:13:14
954
原创 论文阅读1:GNN-RAG
训练时,给定question-answer pairs,把QA当成node- classification任务来训练(判断每个实体是answer还是 not answer),即L层GNN后获得每个实体的分数,然后打分。推理时,把超过一个分数阈值的实体都当成候选答案,并且给出每个answer对应的最短路径(从question entity到当前的answer)。实际使用中,GNN retriever抽取的路径、LLM-based抽取的路径结合起来传到LLM中。本文训了2个GNN,一个用的是预训练的。
2024-07-04 20:45:46
618
原创 requests包的使用和常见bug(https代理问题)
通过requests包获取一些网页、API的资源。直接pip安装。获取一些网页的内容这个过程就是发送一个请求。http常见请求常用请求有GET、POST。我们写请求报文,发送给web服务器。web服务器解析请求,返回一个响应,我们从响应中解析需要的数据。请求报文包括了请求行、请求头、空行、请求数据4个部分。重点是请求头。响应报文包括了状态行、消息报头、空行、响应正文4个部分。重点是状态行。
2024-06-01 19:42:12
415
原创 如何在本地计算机上查看远程服务器上的网页?
ngrok不能用代理->关闭远程服务器的代理设置->远程服务器没网->ngrok需要有网->远程服务器需要设置代理->ngrok不能用代理。目前了解的可以端口转发或者快速构建web并支持端口转发的包有ngrok、flask、uvicorn、gradio。但是如果远程服务器上本来能联网不需要代理,可能可以正常使用ngrok。我使用的远程服务器上是没有网的,需要用我本地计算机的代理。ngrok的使用需要NGROK_AUTHTOKEN。但是我在远程服务器上没有管理员账号,所以我在个人账户下安装了ngrok。
2024-06-01 15:23:15
616
原创 huggingface相关: 下载、使用和参数generationConfig介绍
以text_generation为例。huggingface GenerationConfig参数介绍。
2024-05-15 14:38:57
1076
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人