- 博客(47)
- 收藏
- 关注
RSS订阅原创 ASR(Automatic Speech Recognition)调研，当前sota的架构
本文主要讲述nvidia和openai的模型架构，应为他们两家霸榜。小白也能阅读了解一下当前sota的asr架构是什么样的。
2024-08-05 16:20:02
866
原创 TypeError Cannot read property ‘getUserMedia‘ of undefined
使用Chrome参数开启可以解决这个问题，在浏览器框中输入下述代码。将你需要访问的IP填入后重启浏览器，就能解决报错。所以直接访问ip地址会出现报错。localhost正常访问。
2024-08-01 09:07:09
322
原创 完全移动huggingface模型仓库（不是简单mv）
我重新创建了新的映射文件到新的模型目录中，然后以此类推操作，将所有模型的权重都重新映射，则可以完全转移模型。路径一定要绝对路径，不要出现。可以看到粉色的条目就是映射路径。在你下载的模型目录中，输入。中，因此需要修改映射。然后加入新的映射路径。
2024-07-25 15:37:01
309
原创 vllm减小显存 | vllm小模型大显存问题
这也是为什么有时候你跑1.5b模型也会显存拉满。实际测试也是如此，我使用下述命令，会报错。vllm日志输出的内容，你可以设置。
2024-07-16 21:04:23
702
原创 Qwen2本地web Demo
千问2前段时间发布了，个人觉得千问系列是我用过最好的中文开源大模型，所以这里基于streamlit进行一个千问2的web搭建，来进行模型的测试。
2024-06-24 13:14:45
1645
原创 embedding模型API启动
针对一些需要使用api调用的大模型框架，可以用该方法启动Embedding模型。环境问题不过多赘述，代码如下。上进行知识库的向量编码。
2024-05-29 14:06:40
414
原创 对比表征学习（二）Setence Embedding
主要阐述Sentence Embedding。绝大部分视觉应用中的对比方法依赖于创造每个图像的增强版本，但是在句子扩增中会变得非常有挑战性。因为不同于图片，在扩增句子的同时非常容易改变句子本身的语义。
2024-05-27 20:57:41
916
原创 对比表征学习（一）Contrastive Representation Learning
主要参考翁莉莲的，本文主要聚焦于对比损失函数对比表示学习（Contrastive Representation Learning）可以用来优化嵌入空间，使相似的数据靠近，不相似的数据拉远。同时在面对无监督数据集时，对比学习是一种极其有效的自监督学习方式。
2024-05-27 14:25:25
832
原创 UserWarningFound duplicate [‘libcudart.so‘, ‘libcudart.so.11.0‘, ‘libcudart.so.12.0‘]
出现此类报错代表环境中存在cuda版本冲突，路径在中在该路径下输入检查一下输出形式，出现下述情况会报错。
2024-05-17 20:16:06
173
原创 ollama pull Permission Denied 拉取Ollama模型时的权限问题
是你存放ollama模型的默认目录，如果你修改了环境变量的路径需要你实际存放ollama模型的路径。遇到ollama的权限问题一直报错，尝试重新给予权限。依次输入上述命令后再进行。
2024-05-14 22:07:42
751
原创 ubuntu启动修复（BIOS无法找到GRUB | 引导加载器）
笔者的一台双系统主机，里面有两个硬盘，1T的硬盘装的是windows系统，2T硬盘装的是ubuntu20.04系统。因为长期使用ubuntu系统，所以选择格式化了1T的硬盘，但这导致我开机时bios无法识别启动项（循环进入bios不进系统），无法进入原先的ubuntu系统。如果你是双系统，需要考虑你的引导加载器在哪个盘，这对你后续处理硬盘很重要该方法对开机时无法找到硬盘引导加载器的Ubuntu系统适用。
2024-05-09 20:17:47
1252
原创 Langchain快速上手
本文基于jupyter对langchain进行一个非常简单的入门教学，让大家对langchain有个初步概念。具体细节参考。
2024-05-07 14:43:55
513
原创 DRL(Deep Reinforced Learning) PPO算法（Proximal Policy Optimization）
PPO(Proximal Policy Optimization)最好先看一下策略梯度优化，再看这篇文章，不然公式推不明白PPO是Openai默认的强化学习策略On-policy：学习的agent和与环境交互的agent是同一个∇Rˉθ=Eτ∼pθ(τ)[R(τ)∇logpθ(τ)]\nabla \bar{R}_\theta = E_{\tau \sim p_\theta(\tau)}[R(\tau) \nabla \log p_\theta(\tau)]∇Rˉθ=Eτ∼pθ(τ)
2024-04-30 18:37:48
912
原创 DRL(Deep Reinforced Learning) Policy Gradient 策略梯度优化
参考强化学习有三个基础的组成部分 （坦克大战为例）env 和 reward function 是无法控制的调整actor中的policy，来获得最大的reward （控制坦克达成最大击杀）policy决定actor的行为， policy部分就是一个network（即下图的Actor就是一个网络，可以通过网络来算出aireward不是标量（scalar）而是随机变量（random variable）Trajectoryτs1a1s2a2sTaT。
2024-04-30 14:24:12
813
原创 Lasso回归、岭回归、弹性网回归
偏差（bais）与方差（variance）的区别机器学习方法无法捕捉真实关系的现象被称为偏差一般来说，训练集中偏差较小的测试集中方差可能很大交叉验证（cross-validation）最小二乘法（least square）逻辑回归knn是一个有监督方法k-means是无监督方法。
2023-11-14 18:43:45
142
原创 使用虚拟机搭建Hadoop（伪分布式搭建、分布式搭建）
学了一个学期的Hadoop，终于把这块大骨头啃掉了，泪目！！！这篇文章更像是一个学习Hadoop的总结Hadoop伪分布式、分布式搭建一、准备工作1、hadoop压缩包2、jdk压缩包3、Xshell4、Xftp5、VM虚拟机二、Hadoop伪分布式1、安装Java2、配置环境变量3、安装Hadoop4、格式化NameNode5、配置Hadoop、start-dfs.sh和start-yarn.sh环境变量6、启动Hadoop7、通过Web端口访问HDFS三、Hadoop分布式0、安装Java1、修改
2022-01-01 17:25:15
7770
1
原创 数据可视化大屏分析避孕套（爬虫+jieba分词+pyecharts可视化大屏）
基于python语言的大数据安全套分析，使用爬虫+jieba分词+pyecharts可视化大屏
2021-12-28 13:58:45
1559
原创 解决java使用API连接HBase超时、连不上问题
连接超时报错、连不上问题的解决一、连接超时的问题我配置的HBase使用的是自带的zookeeper，所以一开始使用的配置文件里没有配zookeeper，导致连接超时并且挂掉。如果你使用的是HBase自带的zookeeper，那么在你maven工程的resources(资源文件)中的hbase-site.xml加入如下配置<property> <name>hbase.zookeeper.quorum</name> <value&
2021-12-27 14:35:26
4274
1
原创 樱桃键盘Ubuntu（Linux系统）卡顿延迟解决方案
最近使用乌班图系统时候，发现自己的樱桃键盘延迟非常严重，按下去要一秒钟以上才有反应。下面介绍一下解决方案一、打开樱桃官网官网链接二、点击右下角客服和客服说明你的情况、键盘型号，邮箱，然后客服会给你的邮箱发对应型号的升级压缩文件，里面有升级用的exe包，解压点开后会看到键盘出现波浪灯光效果，等到可以打字之后再进入乌班图系统，就可以正常使用键盘了我是MX3.0-RGB，下面是压缩包的文件预览如果樱桃客服给的exe文件还是解决不了的话，建议换个键盘????...
2021-12-06 19:14:31
2606
1
原创 dvc push报错（win32timezone）
先附上dvc官方文档链接：https://dvc.org/doc有两个问题1、windows系统本身，建议换成Linux系统使用，在GitHub上dvc的开发人员也说了他们不用Windows2、环境，你的全局环境和dvc的环境有冲突，你可以打开pycharm检查一下，在你的虚拟环境控制台输入pip list，显示的是全局的pip list还是当前虚拟环境的pip list。当你报这个错，如果不是Windows本身的问题，大概率就是环境冲突。重新创个新的环境环境目录不要出现中文执行下列操作（把目
2021-11-28 20:42:05
823
原创 dvc push报错(ERROR: configuration error...)
当你push不上去的时候，看看你的remote仓库到底是有没有存到对应的文件上去点开你的.div文件，里面有两个config开头的文件，config和config.local如果你的config.local里面存了你的remote仓库地址而config里面啥都没有那么恭喜你！成功躺枪！解决方法：在dvc去识别你远程仓库的目录时，找的是你的config文件下的目录，而不是config.local，把config.local文件删了，然后再remote add你的仓库路径，之后就能push上去了。
2021-11-28 15:37:30
525
原创 HBase基础原理知识（为什么使用HBase + HBase结构（ZooKeeper、RegionServer等） + 架构图），非常适合初学者和基础不清晰的朋友
HBase学习初识HBase1、为什么使用HBase基于Hadoop衍生出来的HBase存储，可以实现高吞吐量的数据集应用程序。HBase采用Key/Value的存储方式，即使数据量增大，也几乎不会导致查询性能的下降。HBase并不快，只是当数据量很大的时候它慢的不明显数据分析是HBase的弱项，因为它基本不支持表的关联，group by或order by的实现非常复杂。所以当你的大体情况符合以下任意一种情况：主要需求是数据分析，比如报表单表数据不超过千万建议使用Mysql之类的产
2021-11-24 21:31:45
2434
原创 matplotlib圆环图、环形图绘制（不需要用空白圆圈去叠加）
绘制圆环图pie（）中有自带参数可以完成圆环图radius 设置圆的半径wedgeprops = { ‘width’ : 值 }设置中心空白的宽度不需要再新创建个白色圆再覆盖上去，pie里面有参数可以直接调整
2021-11-08 20:36:46
349
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人