- 博客(7)
- 收藏
- 关注
RSS订阅原创 deepspeed的bug调试
将miniconda3/lib 库中的数据拷贝到miniconda3/lib64里面去，需要mkdir lib64文件夹。安装deepspeed 后，跑程序报错。
2024-03-13 17:35:49
395
原创 Seq2seq
以下图片来自网络。Seq2seq中使用语义向量C的方式，有两种：decoder里只有第一个h1直接使用。decoder中每个词都和输入一起使用。使用attention之后，每次解码用到的Ci会根据权重变化调整，Ci一般是对编码器每一步的隐层输出hi的加权求和。注意力分配概率分布，用输出句子i-1时刻的隐层节点状态Hi-1去一一和输入句子Source中每个单词隐层节点状态hj进行对比，即通过函数F(hj,Hi-1)来获得目标单词yi和每个输入单词对应的对齐可能性，这个F函数在不
2020-09-24 17:39:57
106
原创 pytorch 1.3.0的C++版在windows 10 的使用~
环境：pytorch 1.3.1release cpu版，windows 10 ，visual studio 2017 community版D盘新建example-app目录在example-app目录 新建CMakeLists.txt：cmake_minimum_required(VERSION 3.0 FATAL_ERROR)project(example-app)...
2019-12-12 16:14:24
196
1
转载 老版本电脑装tensorflow出错
在老版本电脑上 安装完tensorflow后，import tensorflow或出现如下错误：ModuleNotFoundError: No module named '_pywrap_tensorflow_internal'Failed to load the native TensorFlow runtime.新版本的 TensorFlow（1.6以上）会出现此问题，根据 TensorFlo...
2018-05-25 14:23:31
850
原创 使用pip报错
Script file 'f:\ProgramData\Anaconda3\Scripts\pip-script.py' is not present.只需用easy_install pip再装一次pip即可解决
2018-03-28 01:10:35
5379
原创 将词头、词条二次索引，用多进程并行化统计文档频率
以下程序是得到词条在论文中的文档频率、篇名文档词频、摘要文档词频、关键词文档频率。由于词条太多，论文又太多，为了提高效率，对词条、词头均进行了索引，相比直接去数据库查询，将统计的时间复杂度从最初的O(N*M)降低到了O(N)。通过多进程的方式将统计任务并行化。采用了经典的生产者-消费者模型，cores个生产者（通过进程池管理）负责在文本中查找包含的词条，1个消费者负责对查找的词进行文档频率的统
2018-01-26 10:03:50
260
原创 简单的python多进程 生产者/消费者
主进程作为消费者，进程池pool中的进程作为生产者def produce(para): i,q=para q.put(i) returnif __name__ == '__main__': pool = Pool(2) #进程池，充当生产者 q=Manager().Queue() a=[[1,q],[2,q],[3,q]] po
2018-01-25 11:06:20
1219
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人