- 博客(22)
- 资源 (28)
- 收藏
- 关注
转载 08_索引与切片,Indexing,Python风格的索引,index_select()选择特定索引,使用...索引任意多的维度,使用mask索引,take索引
1.8.索引与切片1.8.1.Indexing1.8.2.Python风格的索引1.8.3.index_select()选择特定索引1.8.4.使用…索引任意多的维度1.8.5.使用mask索引1.8.6.take索引1.8.索引与切片转自:https://www.jb51.net/article/167917.htm1.8.1.Indexing根据Tensor的shape,从前往后索引,依次在每个维度上做索引。# Importing the PyTorch libraryimpor
2021-01-31 23:49:32 436
原创 07_创建tensor,从numpy创建,从List创建,设置默认类型,rand/rand_like,randint,full,arange,linspace/logspace,linspace等等
1.7.创建Tensor1.7.1.Import from numpy1.7.2.Import from List1.7.3.set default type1.7.4.rand/rand_like,randint1.7.5.full()1.7.6.arange()1.7.7.linspace/logspace1.7.7.1.torch.linspace()1.7.7.2.torch.logspace()1.7.8.ones/zeros/eye1.7.8.1.ones1.7.8.2.
2021-01-31 23:35:35 708
原创 06_2_Pytorch的基础数据类型、CPU tensor类型和GPU tensor类型、判断数据类型、CPU或GPU张量之间的转换、数据类型转换、1-4维向量、Tensor张量、Variable等
1.6.2.Pytorch的基础数据类型1.6.2.1.Torch定义了的七种CPU tensor类型和八种GPU tensor类型1.6.2.2.基础数据类型1.6.2.3.Pytorch数据类型1.6.2.4.判断数据类型1.6.2.5.CPU或GPU张量之间的转换1.6.2.6.数据类型转换1.6.2.7.常用向量1.6.2.7.1. 1维向量1.6.2.7.2. 2维向量1.6.2.7.3. 3维向量1.6.2.7.4. 4维向量1.6.2.8.Tensor张
2021-01-24 20:16:13 1667
原创 06_1.Pytorch中如何表示字符串、word embedding、One - hot、Embedding(Word2vec、BERT、Glove)【学习总结】
1.6.1.如何表示字符串1.6.1.1.word embedding1.6.1.1.1.文本表示(Representation)1.6.1.1.2.独热编码 | one-hot representation1.6.1.1.3.整数编码1.6.1.1.4.什么是词嵌入 | word embedding ?1.6.1.1.5. 2中主流的word embedding算法1.6.1.1.6.百度百科和维基百科1.6.1.1.7.维基百科版本1.6.1.2.One - hot1.6.1.2.
2021-01-23 19:21:54 2073
原创 05,pytorch_手写数字案例
本节内容来自网易云课堂课程,主讲人为:龙良曲1、关于MNIST每个数字都有7000张图片(each number owns 7000 images)训练集/测试集 数量比例:60k vs 10k (train/test splitting: 60k vs 10k)2、NO deep learning, just function mapping3 Loss ?4、In a nutshell5、Non-linear Factor6、Gradient Descent7、Infe
2021-01-22 15:08:40 244
原创 07/08_flink shell,基本原理及应用场景、特点、架构图、集群解剖、JobManager、TaskManagers、tasks和操作链、Session/job集群、组件介绍等、应用场景
1.7.Flink scala shell代码调试1.7.1.Flink scala shell代码调试语法1.8.Flink基本原理及应用场景1.8.1.Flink特点1.8.2.Flink架构图1.8.2.1.Flink集群的解剖1.8.2.1.1.JobManager1.8.2.1.2.TaskManagers1.8.2.1.3.Tasks and Operator Chains1.8.2.1.4.Task Slots 和 Resources1.8.2.1.5.Flink Appl
2021-01-20 01:39:12 455 2
原创 06_Flink命令行界面、作业管理示例、Savepoints、语法(run、通用配置、yarn-cluster、info、list、stop、cancel、savepoint等)
1.6.Flink命令行界面1.6.1.Deployment targets1.6.2.例子1.6.3.作业管理示例1.6.4.Savepoints1.6.5.语法1.6.Flink命令行界面此篇内容来自:https://ci.apache.org/projects/flink/flink-docs-release-1.11/zh/ops/cli.htmlFlink提供了一个命令行接口(CLI)来运行打包为JAR文件的程序,并控制它们的执行。CLI是任何Flink设置的一部分,可以在本地单节
2021-01-20 01:05:57 1361
原创 05_Flink-HA高可用、JobManager HA、JobManager HA配置步骤、Flink Standalone集群HA配置、Flink on yarn集群HA配置等
1.5.Flink-HA高可用1.5.1.JobManager高可用(HA)1.5.2.JobManager HA配置步骤1.5.3.Flink Standalone集群HA配置1.5.3.1.HA集群环境规划1.5.3.2.开始配置1.5.3.3.配置环境变量1.5.3.4.启动1.5.4.Flink on yarn集群HA配置1.5.4.1.HA集群环境规划1.5.4.2.开始配置+启动1.5.4.3.启动flink on yarn,测试HA1.5.4.4.在hadoop4上启动
2021-01-20 00:47:04 677
转载 Linear Regression、Logistic Regression、激励函数activation function(relu,sigmoid, tanh, softplus)
1.5.2.Linear Regression1.5.2.1.Linear Regression1.5.2.1.1.案例11.5.2.1.2.案例21.5.2.1.3.案例3源码(带有保存模型)1.5.2.2.Logistic Regression1.5.2.2.1.案例11.5.2.2.2.更深更宽的网络1.5.2.2.3.逻辑回归案例:1.5.2.3.Classification1.5.2.4.激励函数activation function(relu,sigmoid, tanh, s
2021-01-20 00:10:13 714
转载 优化器(AdaGrad,AdaDelta,RmsProp,Adam,Nadam,Nesterovs,Sgd,momentum)
以下来自:https://my.oschina.net/u/2935389/blog/2967242https://mp.weixin.qq.com/s/NmSVXezxsQOZzK8pne3pCw1.5.1.1.AdaGrad(自适应学习率算法)1.5.1.2.AdaDelta1.5.1.3.RmsProp1.5.1.4.Adam1.5.1.5.AdaMax1.5.1.6.Nadam1.5.1.7.AMSGrad1.5.1.8.Nesterovs(动量的随机梯度下降法)1.5.1.9
2021-01-17 01:10:35 3330
原创 04_Pytorch生态、PyTorch能做什么、PyTorch之Autograd、autograd案例、GPU加速案例
1.4.初见PyTorch1.4.1.PyTorch生态1.4.2.PyTorch能做什么?GPU加速自动求导常用网络层nn.Linearnn.Conv2dnn.LSTMnn.ReLUnn.Sigmoidnn.Softmaxnn.CrossEntropyLossnn.MSE1.4.3.PyTorch之Autograd以下部分来自:https://www.cnblogs.com/xueqiuqiu/p/7513721.html在PyTorch中,autograd是
2021-01-14 23:28:26 334 1
原创 02/03_Pytorch安装、Conda安装Pythorch,换源、pytorch官网、验证、安装jupyter、卸载、安装、启动jupyter、配置Jupyter notebook、使用
1.2.Pytorch安装1.2.1.Conda安装Pythorch,换源1 conda添加清华镜像源查看源conda config --show-sources由于从官方的conda源中下载速度过于缓慢,我们需要配置清华镜像源:conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/conda config --add channels https://mirrors.tuna.
2021-01-14 23:20:33 1174
转载 01_Win10下CUDA的安装、查看并升级Nvidia显卡驱动、安装CUDA、设置环境变量、测试CUDA是否安装成功
1.1.Win10下CUDA的安装(此部分只是记录一下安装过程,和上面版本可能不对应)以下部分来自:https://blog.csdn.net/weixin_41762173/article/details/1042612491.1.1.查看并升级Nvidia显卡驱动A:在win10系统里,点击右下角的向上箭头,看到缩略图,英伟达的logo下方有个“!”,提示驱动有更新,若已是最新版本,跳过以下2、3两步。B: 点击后跳转到NVIDIA官网,点击“自动驱动程序更新”下的下载按钮C: 下载完成并
2021-01-14 23:08:52 6903 1
转载 [机器学习] ML重要概念:梯度(Gradient)与梯度下降法(Gradient Descent)
本文转自:https://blog.csdn.net/walilk/article/details/50978864引言机器学习栏目记录我在学习Machine Learning过程的一些心得笔记,涵盖线性回归、逻辑回归、Softmax回归、神经网络和SVM等等,主要学习资料来自网上的免费课程和一些经典书籍,免费课程例如Standford Andrew Ng老师在Coursera的教程以及UFLDL Tutorial,经典书籍例如《统计学习方法》等,同时也参考了大量网上的相关资料(在后面列出)。前言机
2021-01-14 20:39:41 477
转载 梯度下降(Gradient Descent)小结
本博文转自:https://www.cnblogs.com/pinard/p/5970503.html
2021-01-14 19:54:06 178
转载 PyTorch 的 Autograd、计算图、叶子张量、inplace 操作、动态图,静态图(来自知乎)
本博文来自:https://zhuanlan.zhihu.com/p/69294347 非常感谢此博主!PyTorch 作为一个深度学习平台,在深度学习任务中比 NumPy 这个科学计算库强在哪里呢?我觉得一是 PyTorch 提供了自动求导机制,二是对 GPU 的支持。由此可见,自动求导 (autograd) 是 PyTorch,乃至其他大部分深度学习框架中的重要组成部分。了解自动求导背后的原理和规则,对我们写出一个更干净整洁甚至更高效的 PyTorch 代码是十分重要的。但是,现在已经有了很多封
2021-01-14 15:18:15 1348 1
原创 04_Flink-HA高可用、Standalone集群模式、Flink-Standalone集群重要参数详解、集群节点重启及扩容、启动组件、Flink on Yarn、启动命令等
1.4. Flink-HA高可用1.4.1.Standalone集群模式1.4.2.Flink-Standalone集群重要参数详解1.4.3.集群节点重启及扩容1.4.3.1.启动jobmanager1.4.3.2.启动taskmanger1.4.3.3.Flink standalone集群中job的容错1.4.4.Flink on Yarn1.4.4.1.原理介绍1.4.4.2.FLINK on yarn集群部署1.4.5.Flink on Yarn的两种运行方式1.4.5.1.第
2021-01-07 02:00:58 1764
原创 03_Flink本地安装、分别解压scala和Flink、配置环境变量、启动集群、提交一个job、停止集群
1.3.Flink本地安装1.3.1.分别解压scala和Flink1.3.2.配置环境变量1.3.3.启动集群1.3.4.提交一个job1.3.5.停止集群1.3.Flink本地安装如果想安装FLink,只需要安装Java8或11,可以通过执行下面的命令检查java的安装:java -version下载wget https://downloads.lightbend.com/scala/2.12.12/scala-2.12.12.tgzwget https://mirrors.bf
2021-01-07 00:40:39 296
原创 02_Flink vs storm vs SparkStreaming、Flink vs storm对比图、实时框架如何选择
1.2.Flink vs storm vs SparkStreaming1.2.1.对比图1.2.2.Flink vs storm对比图1.2.3.实时框架如何选择需要关注流数据是否需要进行状态管理At-least-once或者Exectly-once消息投递模式是否有特殊要求对于小型独立的项目,并且需要低延迟的场景,建议使用storm如果你的项目已经使用了spark,并且秒级别的实时处理可以满足需求的话,建议使用sparkStreaming要求消息投递语义为 Exactly
2021-01-07 00:05:02 321
原创 01_Apache Flink是什么,Apache Flink的优势,Apache Flink用户,Flink介绍(流场景使用案例、正确性保证、API分层体系、Operational Focus等)
1.1. Apache Flink是什么?1.1.1. Apache Flink的优势1.1.2. Apache Flink用户1.1.3. Flink介绍1.1.3.1.流场景使用案例1.1.3.2.正确性保证1.1.3.3. API分层体系1.1.3.4. Operational Focus1.1.3.5. 适用于各种应用场景Scales to any use case1.1.3.6.高性能1.1.Apache Flink是什么?作为没有接触过Flink的人,当听到外界说的Flin
2021-01-06 23:37:18 217
原创 mysql数据实时同步:Canal安装部署、kafka安装、zk安装、mysql安装、Canal Server+Canal Client HA,Canal+mysql+Kafka,相关验证(学习笔记)
目录Canal安装部署 1.1. 服务器准备 1.2. 设置主机名并配置hosts 1.3. 免密设置 1.4. 设置ntp时间 1.5. 关闭防火墙 1.6. 关闭selinux 1.7. 安装JDK 1.8. 安装zookeeper 1.9. 安装scala安装Kafka 2.1. 解压 2.2. 配置环境变量 2.3. 修改配置文件 2.4. 再次修改server.properties 2.5. 创建日志目录 2.6. Kafka集群启动与测试 2.7. topi
2021-01-04 01:31:25 3519
easyui资料
2014-02-22
17个在线编辑器,包括kindeditor,STEditor,HTMLArea3.0last20071025等
2012-07-22
二手购物网源码
2012-05-31
强大的购物网代码(java)
2012-05-30
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人