2021年03月_znsoft

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 DGL 中的update_all函数的详细理解

所有讨论是以以下代码为基础进行：import dglimport torch as thfrom dglfn import dgl_fnimport dgl.function as fn # https://blog.csdn.net/CY19980216/article/details/110629996?device=th.device("cuda" if th.cuda.is_available() else 'cpu')u= th.tensor([0,1,2,3,4.

2021-03-28 22:04:09 3628 6

转载 GoldenDict 上的那些精美版权词典（附下载地址）（英语、俄语、梵语、印地语）

转载▼标签：杂谈国内的有道词典和金山词典由于使用方便、宣传到位得到了许多同学的喜爱。在开源软件的领域，也有一款非常好用的词典GoldenDict，它的强项在于可以直接使用众多词典厂商的词库。那些正规的词典厂商通常购买了词典的版权，在词条的数目、内容的完整性，多媒体文件的齐全性、排版的美观性等方面比其他词典要好很多。不信可以看一下图文介绍（介绍引自互联网，图片是手机上的截图，在电脑上显示更精美）一、朗文当代英语词典第五版朗文出版社官方出...

2021-03-22 06:59:22 20462 2

原创 TVM 可以加载编译的模型种类

示例用法： tvm.relay.frontend.from_onnx("/path/to/onnx/model") 加载onnx模型tvm.relay.frontendFunctions: from_caffe(init_net,predict_net,…) Convert from caffe model into compatible relay Function. from_caffe2(init_net,predi...

2021-03-22 06:54:22 370 1

原创 TVM 0.7版起 API改变情况

tvm.module->tvm.runtime.module tvm.module.load->tvm.runtime.load_module tvm.module.enabled->tvm.runtime.enabled tvm.module.system_lib->tvm.runtime.system_lib tvm.relay.Module->tvm.IRModule tvm.create_schedule->tvm.te.crea...

2021-03-21 09:08:03 205

原创 TVM Windows下全功能编译方法：从入门到劝退

1. 安装git Windows版本、cmake工具及LLVM2. 安装 anaconda 环境3. 获取源码4 编译Windows动态库5 安装tvm

2021-03-20 23:32:48 2591 14

原创 pytorch中一些CV模型的预训练模型下载并转换为onnx模型

import torchimport onnx# https://github.com/rwightman/gen-efficientnet-pytorch/blob/master/hubconf.pymodel=torch.hub.load("rwightman/pytorch-image-models","mobilenetv3_large_100")model.eval()batch_size=1input_shape = (3,244,244)export_onnx_file="m.

2021-03-20 18:41:56 447 1

原创修改 pytorch中的model zoo下载后的模型的保存目录

网上看到有人暴力修改代码实现将下载的hub或model zoo的保存目录修改为自己喜欢的位置。本质上pytorch已经提供环境变量重新定义模型下载后的保存目录：import osos.environ["TORCH_HOME"]="E:\\pth2onnx\\models" #你要的保存目录，修改环境变量即可...

2021-03-20 17:49:35 747

原创 torchvision 中的预训练模型及相关参数

可以用以下代码加载模型，注意，只需要加载一种即可import torchvision.models as modelsresnet18 = models.resnet18(pretrained=True)'''alexnet = models.alexnet(pretrained=True)squeezenet = models.squeezenet1_0(pretrained=True)vgg16 = models.vgg16(pretrained=True)d.

2021-03-20 17:20:26 1719 2

原创 pytorch load 模型时出错： A load persistent id instruction was encountered, but no persistent_load functio

Exception has occurred: UnpicklingErrorA load persistent id instruction was encountered, but no persistent_load function was specified.运行torch.load(）时报错，原因是保存和加载模型时的pytorch版本不一致导致的，换用一致的版本即可。...

2021-03-20 14:39:27 11599 5

原创 TVM 实战：用llvm提高人工智能模型推理速度

下面为记录人工智能推理加速过程，基于TVM总体脉络：1. TVM 安装2. TVM 测试3. Auto TVM 使用4. 编译导出 so/dll5.在C++中调用生成的so/dll

2021-03-20 11:37:35 2157

原创 OPENSSL下大数据运算库内部数据表示的小坑

某个代码，由于是逆向而来的，没有正确的rsa计算表示方式。程序在32位下时运行正常，但是在64位下则不正常，百思不得其解。后来用hex/bin大法解决了，具体参见下面的代码。通过比较得到，32/64下BN结构中的数据区的表示地址刚好相反，有点类似主机/网络字节顺的问题，也就是大端小端问题。但是同一台机器下，只是32、64位的差异，区有如此的不一样，比较困惑。int rsa_decrypt_new(unsigned char* szInput, int nInLen, unsig...

2021-03-16 15:06:08 366

原创 onnx模型的量化处理

默认是uint8量化，需要安装onnx 1.8或以上版本。目前在ubuntu 20.04下测试通过model_fp32 = ‘path/to/the/model.onnx’ model_quant = ‘path/to/the/model.quant.onnx’ quantized_model = quantize_dynamic(model_fp32, model_quant, weight_type=QuantType.QUInt8)- QAT quantization```p..

2021-03-10 15:46:30 12960 22

原创 onnxruntime中传入特定数据类型，比如fp16,int8

typedef enum ONNXTensorElementDataType { ONNX_TENSOR_ELEMENT_DATA_TYPE_UNDEFINED, ONNX_TENSOR_ELEMENT_DATA_TYPE_FLOAT, // maps to c type float ONNX_TENSOR_ELEMENT_DATA_TYPE_UINT8, // maps to c type uint8_t ONNX_TENSOR_ELEMENT_DATA_TYPE_INT8, .

2021-03-09 14:53:52 5181 2

原创 DGL 常见错误： Check failed: (out-＞dtype).code == kDLFloat

这是由于dgl支持的特征值是float32或float64, 如果传递int进去，就会出错，方法是确认dgl的顶点和边的特征值是float32/或float64 即可。import dglimport torch as thfrom dglfn import dgl_fnimport dgl.function as fn u= th.tensor([0,1,2,3,4,3])v=th.tensor([2,0,1,5,3,2])g=dgl.graph((u,v))#print(

2021-03-09 08:14:54 1015

原创使用winmltools API 将onnx模型转换为半精度以加快推理速度

from winmltools.utils import convert_float_to_float16from winmltools.utils import load_model, save_modelonnx_model = load_model('model.onnx')new_onnx_model = convert_float_to_float16(onnx_model)save_model(new_onnx_model, 'model_fp16.onnx')

2021-03-08 17:02:55 2053 1

原创图神经网络框架DGL中的消息函数、聚合函数及更新函数的理解与说明

在DGL框架中，当我们明显了边、顶点、图以及边和顶点的属性后，接下来需要了解的概念就是三座大山了：消息函数聚合函数更新函数消息函数默认的消息函数是ϕ，它接受的参数是edges ,类型是dgl.EdgeBatch. edges有src，dst和data三个属性，分别是源顶点、目标顶点和边，可以用这三个属性访问各自的特征。表示： node + node -> edge内置消息函数：一元： copy 函数二元： add, sub, mul, div, dot 函...

2021-03-08 07:36:00 5672 1

原创可视化 DGL 图神经网络，显示节点值和边的值

dgl的网络转为networkx后，边的标签数据格式不对，需要重新处理下import dglimport torch as thimport networkx as nximport matplotlib.pyplot as pltu= th.tensor([0,1,2])v=th.tensor([2,0,1])g=dgl.graph((u,v))print(g.edges())g.ndata["desc"]=th.tensor([1,2,3])g.edata["weigh.

2021-03-06 19:52:49 5001 4

cs224N-2019最新自然语言处理教程视频 -曼宁-斯坦福

cs224N-2019最新自然语言处理教程视频 -曼宁-斯坦福. 最牛的基于神经网络的自然语言处理视频，2019新版。

2019-07-02

机器学习数学基础 2019.7新版 (剑桥大学出版社）

人工智能数学基础教材，除了必要的数学知识外，还有他们在机器学习算法中的应用。实例与理论教学相结合，难得的人工智能数学基础教材。 pdf 清晰可读版本，无行号干扰。

2019-07-02

2019-Automated Machine Learning Methods, Systems, Challenges, 正式版，Frank

2019(正式，非草稿） Automated Machine Learning Methods, Systems, Challenges, 带彩色封面的正式出版版本，非草稿。作者： Frank Hutter

2019-06-19

机器学习数学基础 2019.6新版 (剑桥大学出版社）

2019-05-27

《基于深度学习的自然语言处理》中文PDF+英文PDF.rar

基于深度学习的自然语言处理作者: Yoav Goldberg 译者: 车万翔 / 郭江 / 张伟男 / 刘铭基于深度学习的自然语言处理的重磅书籍，目前唯一系统教程。

2019-05-21

变分法基础_老大中_第三版.pdf

变分法老大中 2015 第三版国防工业出版社，人工智能必看书籍。

2019-05-16

The Inner Workings - of - word2vec ：一文搞懂word2vec

The Inner Workings - of - word2vec, 国内唯一版本，重金购买于国外，谢绝转载。给喜欢研读word2vec原理的人。目前为止最清晰易懂版本。

2019-03-20

理工科概率论（五本连发，良心资源），适用于人工智能及计算机

Probability and Statistics for Engineers and Scientists 4th （Anthony Hayter） Probability and Statistics for Engineering and the Sciences 9th （JAY DEVORE） Probability and Statistics for Computer Science（David Forsyth） Probability and Statistics 4th (Morris H. DeGroot) Probability & Statistics for Engineers & Scientists 9th (Walpole )

2019-03-17

机器学习数学基础 2019.3新版 (剑桥大学出版社）

2019-03-17

A mind at play 香农传记

信息论大拿香农，它的传记 a mind at play 全本。网上很难找到的资源。

2019-02-21

Python 进阶中文版

深⼊浅出的风格在每个章节的讨论中都得到了体现：每个章节都⾮常精简，5分钟就能看完，⽤最简洁的例⼦精辟地展现了原理每个章节都会通过疑问，来引导读者主动思考答案每个章节都引导读者做延伸阅读，让有兴趣的读者能进⼀步举⼀反三每个章节都是独⽴的，你可以挑选任意的章节开始阅读，⽽不受影响总之，这本书⾮常⽅便随时选取⼀个章节进⾏阅读，⽽且每次阅读⼀个章节，你都可能会有⼀些新的发现。

2019-01-30

点集拓扑讲义 (第四版)(熊金城编) pdf高清，真第四版+第三版的讲义答案，二合一包。

2018-11-27

加州理工数学教材，实分析，算子理论，调和分析，复分析

加州理工数学教材，实分析，算子理论，调和分析，复分析, 全套教材 3000页以上。

2018-11-27

实变函数-苏孟龙-吉林大学出版社

实变函数-苏孟龙-吉林大学出版社，目前为止最容易读明白的实变函数教材。

2018-11-24

Munkres Topology，拓朴学第二版芒里克斯，中英文全本加题解

Munkres Topology，拓朴学第二版芒里克斯，中英文全本加题解。一个压缩包包括中英文全本及题解。良心系列。

2018-11-22

MIT线性代数笔记105页完整版

MIT线性代数笔记105页完整版，全csdn唯一资源。其它网站要29元人民币。吐血奉献。

2018-11-08

Handbook of Natural Language Processing Second Edition(真正第二版）

Handbook of Natural Language Processing Second Edition。自然语言处理好书，传统方法，统计方法。各种方法的论文集合。

2018-11-01

Natural Language Processing，自然语言处理，Gatech 雅可布教授2018新作（无行号干净版）

Natural Language Processing Jacob Eisenstein October 15, 2018

2018-10-25

最优化导论（第四版）中文，英文，题解

最优化导论（第四版）中文，英文，题解. AN INTRODUCTION TO OPTIMIZATION 4th.包括英文版书，中文清晰版本，课后题解。一包在手，永远不愁。机器学习，人工智能之优化理论经典书典。

2018-10-15

Getting Started with Kudu Perform Fast Analytics on Fast Data

Getting Started with Kudu Perform Fast Analytics on Fast Data kudu第一书，数据分析。ok. 重金搞来。

2018-10-11

elegantbook latex 中英文书籍模板 texstudio+texlive 2023测试通过

elegantbook latex 中英文书籍模板 texstudio+texlive 2023测试通过。原版在texstudio+texlive 2023下无法使用，此为修改后版本，可正常编译使用。

2023-10-06

微软concept graph数据，可以使用neo4j进行使用

微软concept graph数据，可以使用neo4j进行使用。原始网站concept.research.microsoft.com已经挂掉，幸好下载保存了一份数据，可以用neo4j进行调用，教程： https://blog.csdn.net/znsoft/article/details/127169659

2022-10-05

imac 27 2011 mid 最新windows 10 显卡驱动，比bootcamp中的新，解决win10蓝屏。

imac 27 2011 mid 最新显卡驱动，比bootcamp中的新，解决win10蓝屏。bootcamp中的驱动在播放视频时会偶尔蓝屏。这个是较新的驱动，从amd网站下载。解决windows 10下蓝屏。新驱动安装后显示的日期为： 2015/8/19 原始的bootcamp为 2013/12/14

2022-10-02

HEIC 格式照片转换工具，可以将heic格式图片转成png/jpg, 完全免费，无限制。

2022-01-26

wenet 2万小时开源语音数据集

wenet数据集.开源版本，超过20000小时（2万小时以上），可以用来训练自动语音识别以及声纹识别。

2021-10-26

jdk1.8.0 32位解压即用包 windows XP系统

2021-09-27

54种编程语言训练数据集

54种编程语言训练数据集，包括训练集、验证集与测试集。全部200万以上文件，各语言数量平衡。

2021-09-12

wenet 自动语音识别开发库及测试程序（ASR)，windows版本

wenet 自动语音识别开发库及测试程序（ASR)，windows版本（很难编译）

2021-07-16

树莓派4B下的pytorch环境

树莓派4B下的pytorch环境，包括 1.7/1.8/1.9

2021-07-03

Windows 11 TPM 安装绕过补丁

Windows 11 TPM 安装绕过补丁. 将解开的dll放到安装盘下的sources 目录下

2021-06-21

TVM 0.8 测试代码及模型文件

深度学习编译引擎TVM. 也可以加群讨论： 61719120x (不有广告，最后一个用x代表，有心的人自己猜群号吧） TVM 0.8版起新api测试代码，模型文件 all in one, 编译好后就可以测试使用。使用全新API. 无需param/json, 只有一个so/dll 配合本人的编译教程食用更美。方便大家，不动态调分。只要5分

2021-03-21

百度百科５６３万数据２０１９年新版

百度百科５６３万数据２０１９年新版，一行一条，json格式

2021-01-31

sciter UI框架之 CMake演示工程，vscode即可编译，跨平台

sciter UI框架之CMake演示工程，vscode即可编译，跨平台,基于c++

2021-01-27

pytorch for ROCM 安装包，amd显卡

pytorch for ROCM 安装包whl , 支持ubuntu 18.04及以上系统， amd Radeon Vii 显卡。里面带配置手册（rocm分版本安装方法)

2020-10-18

pytorch 1.4 on ROCM 3.1 （AMD GPU) for ubuntu 18.04

AMD GPU用户的福音。用AMD GPU学习人工智能吧。 pytorch 1.4 on ROCM 3.1 for ubuntu 18.04, ROCM 版本３．１预编译版本，直接pip install xxxx.whl 使用，省事省力。提前安装好rocm平台驱动。

2020-03-13

人工智能数学一本通（1896页）：代数、拓朴、微积分及最优化内容（滨夕法尼亚大学）

人工智能数学一本通，滨夕法尼亚大学 Jean Gallier 编。包括需要的所有数学知识： Algebra, Topology, Differential Calculus, and Optimization Theory For Computer Science and Engineering

2019-07-29

机器学习数学基础 2019.7.27新版带算法示例(剑桥大学出版社）

人工智能数学基础教材，除了必要的数学知识外，还有他们在机器学习算法中的应用。实例与理论教学相结合，难得的人工智能数学基础教材。 pdf 清晰可读版本，无行号干扰。新版带算法示例用jupyter notebook 文件。

2019-07-27

112页PPT-深度学习数学基础-以色列特拉维夫大学

112页PPT-深度学习数学基础-以色列特拉维夫大学, Mathematics of deep learning.pdf 图文并茂的数学学习材料，容易入门。