自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

pdn的博客

coder

  • 博客(70)
  • 收藏
  • 关注

原创 docker从零开始搭建Hadoop完全分布式(二)

docker从零开始搭建Hadoop完全分布式

2022-10-21 18:06:40 241

原创 docker搭建hadoop集群一

docker搭建hadoop集群

2022-10-21 18:02:18 270

转载 KafkaManager

kafka-manager是kafka集群管理工具,由雅虎开源,用户可以在Web界面执行一些简单的集群管理操作。具体支持以下内容(从githup上kafka-manag...

2020-02-02 14:11:26 482 1

转载 yarn的队列

文章目录0. 起因1.查看...

2020-01-18 19:18:37 4921

原创 @RequestBody @Parameter 普通的接受请求

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声...

2019-11-23 21:39:29 1247 1

原创 idea 2019 1.2 创建 maven web项目

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-11-13 15:15:35 1560

原创 CSDN-markdown编辑器

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Ma...

2019-11-13 15:14:42 93

原创 python执行得效率

python的执行效率在很多时候,和你的写法有关所以最好写python推荐的语法

2019-10-23 20:18:03 142

原创 @tf.function

将python的函数编译成tensorflow的图结构,所以可以方便的直接使用python的语法去写深度学习的一些函数代码易于将模型导出为GraphDef+checkpoint和saveModel使得eager exection默认打开。如果不使用@tf.function,虽然可以使用eager exection去写代码,但是模型的中间结果无法保存,所以无法进行预测tf1.0的代码可以经过...

2019-10-22 16:16:02 6409

原创 transform源码解读

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-10-03 09:48:48 1771

原创 attention all you need源码

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-10-03 09:43:49 171

原创 transofrm

The Illustrated Transformer Discussions:Hacker News (65 points, 4 comments), Reddit r/MachineLearning (29 points, 3 comments)Translations: Chinese (Simplified), KoreanWatch: MIT’s Deep...

2019-10-02 20:46:19 213

原创 tf.nn.embedding_lookup

import tensorflow as tfimport numpy as nptf.enable_eager_execution()emb = [ [1, 1, 1], [2, 2, 2], [3, 3, 3],]emb = np.array(emb)ids = [ [1, 1], [2, 2],]ids = np.array(i...

2019-09-25 17:16:39 91

原创 python读取大文件

with open(filename, 'rb') as f: for line in f: <do something with the line>

2019-09-25 09:02:09 78

原创 tf.reshape

tf.enable_eager_execution()zeros = tf.zeros(shape=[2, 3, 4])print(zeros)tf.Tensor([[[0. 0. 0. 0.] [0. 0. 0. 0.] [0. 0. 0. 0.]] [[0. 0. 0. 0.] [0. 0. 0. 0.] [0. 0. 0. 0.]]], shape=(2, 3,...

2019-09-17 15:24:20 59

原创 tf.concat

import tensorflow as tftf.enable_eager_execution()embedding = []embedding.append([ [1, 1], [2, 2]])embedding.append([ [3, 3, 3], [4, 4, 4]])print(embedding)[[[1, 1], [2, 2]]...

2019-09-17 14:31:13 121

转载 pickle.dump和pickle.load

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-09-15 17:52:29 129

原创 np.random.choice

# 从3个数a,b,c里面随机的选择1个。每个字母被选择的概率是pchoice = np.random.choice(['a', 'b', 'c'], size=1, p=[0.1, 0.3, 0.6])print(choice)结果为'c'

2019-09-15 15:15:01 247

原创 tf.split

import tensorflow as tftf.enable_eager_execution()x = tf.random_normal(shape=[1, 3, 1])print(x)print('"""""""""')x = tf.reshape(x, shape=(-1, 3))print(x)print('"""""""""')# 用于得到一個tensor的lis...

2019-09-15 10:26:05 152 1

原创 collections.Counter

快速的统计一个字典里面每个元素出现的次数import collectionsmost_common = collections.Counter(['a', 'a', 'b' ]).most_common()print(most_common)[('a', 2), ('b', 1)]注意上面的参数必须是list类型的,不能是二维的,或者其他维度的比如下面的代码因为维度不对,就会报错...

2019-09-14 21:57:16 1558

转载 保存和加载模型

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-09-12 17:47:14 147

原创 tf.assign更新变量

# 实现阶乘import tensorflow as tffinally_sum = tf.Variable(initial_value=1, dtype=tf.int64, name='finally_sum')i = tf.placeholder(dtype=tf.int64, name='i')tmp_sum = finally_sum * iassign = tf.as...

2019-09-12 14:35:01 195

原创 name_scope / variable_scope

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-09-12 11:29:54 127

原创 np.argsort

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。 ...

2019-09-08 16:46:09 690

原创 Word2vec

<div class="rich_media_area_primary_inner"> <div id="img-content"> <h2 class="rich_media_tit...

2019-09-07 09:11:54 244

转载 LDA降维

    在主成分分析(PCA)原理总结中,我们对降维算法PCA做了总结。这里我们就对另外一种经典的降维方法线性判别分析(Linear Discriminant Analysis, 以下简称LDA)做一个总结。LDA在模式识别领域(比如人脸识别,舰艇识别等图形图像识别领域)中有非常广泛的应用,因此我们有必要了解下它的算法原理。    在学习LDA之前,有必要将其自然语言处理领域的LDA区...

2019-08-27 21:05:08 8490

原创 啊啊

PCA(Principal Component Analysis)是一种常用的数据分析方法。PCA通过线性变换将原始数据变换为一组各维度线性无关的表示,可用于提取数据的主要特征分量,常用于高维数据的降维。网上关于PCA的文章有很多,但是大多数只描述了PCA的分析过程,而没有讲述其中的原理。这篇文章的目的是介绍PCA的基本数学原理,帮助读者了解PCA的工作机制是什么。当然...

2019-08-27 17:54:46 131

转载 PAC

转载自:http://blog.codinglabs.org/articles/pca-tutorial.html文章分...

2019-08-27 16:56:06 333

原创 BIRCH算法

    在K-Means聚类算法原理中,我们讲到了K-Means和Mini Batch K-Means的聚类原理。这里我们再来看看另外一种常见的聚类算法BIRCH。BIRCH算法比较适合于数据量大,类别数K也比较多的情况。它运行速度很快,只需要单遍扫描数据集就能进行聚类,当然需要用到一些技巧,下面我们就对BIRCH算法做一个总结。1. BIRCH概述    BIRCH的全称是利用层次...

2019-08-24 16:33:42 731

原创 StandardScaler和Normalizer和MinMaxScaler使用情况

#数据标准化#StandardScaler (基于特征矩阵的列,将属性值转换至服从正态分布)#标准化是依照特征矩阵的列处理数据,其通过求z-score的方法,将样本的特征值转换到同一量纲下#常用与基于正态分布的算法,比如回归#数据归一化#MinMaxScaler (区间缩放,基于最大最小值,将数据转换到0,1区间上的)#提升模型收敛速度,提升模型精度。因为以前在描述梯度下降的时候,如果...

2019-08-22 20:27:39 2534

原创 sklearn预处理数据

版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。 ...

2019-08-22 20:26:00 123

原创 np.meshgrid

xv, yv = np.meshgrid([1,2],[3,4,5])xv""" array([[1, 2], [1, 2], [1, 2]])"""yv"""array([[3, 3], [4, 4], [5, 5]])"""# 类似于zipnp.c_[xv.ravel(), yv.ravel()]"""array...

2019-08-22 12:00:17 350 1

转载 sklearn.metrics中的评估方法介绍(accuracy_score, recall_score, roc_curve, roc_auc_score, confusion_matrix)

版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。 ...

2019-08-22 11:15:07 1152

原创 ROC

...

2019-08-20 18:07:03 193

原创 sklearn使用OneHotEncoder

data = ['cold', 'cold', 'warm', 'cold', 'hot', 'hot', 'warm', 'cold', 'warm', 'hot']values = np.array(data)values.shape # (10,)# 必须转换为二维得矩阵values_reshape = values.reshape((-1,1)) # (10, 1) onehot...

2019-08-20 14:56:15 2677

原创 keras处理图片

(x_train, y_train), (x_test, y_test) = keras.datasets.fashion_mnist.load_data()y_train = keras.utils.to_categorical(y_train, num_classes=10)y_test = keras.utils.to_categorical(y_test, num_classes=1...

2019-08-14 22:25:50 291

原创 将手写数字画到一副图里面

import matplotlib.pyplot as plt from tensorflow import keras(x_train, y_train), (x_test, y_test) = keras.datasets.fashion_mnist.load_data()for i in range(9): plt.subplot(3,3,i+1) plt.im...

2019-08-14 21:56:11 144

原创 在tensorflow里面使用sklearn得到召回率等指标

#%%import numpy as npimport pandas as pdimport sklearnfrom sklearn.model_selection import train_test_splitfrom sklearn.preprocessing import LabelEncoderfrom tensorflow import keras#%%seed = 7...

2019-08-14 21:55:02 1602

原创 keras里面调用sklearn

#%%import numpy as npimport pandas as pdfrom tensorflow import kerasimport sklearnfrom sklearn.model_selection import cross_val_scorefrom sklearn.preprocessing import LabelEncoderfrom sklearn.p...

2019-08-14 21:00:12 303

原创 Sklearn-LogisticRegression逻辑回归

版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。 ...

2019-08-14 19:44:18 723

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除