神坑教无心-CSDN博客

原创 2020-09-10

浙江国土局土地数据浙江省土地使用权网上交易系统：http://land.zjgtjy.cn/GTJY_ZJ/go_home操作方法：数据库数据更新，有地的时候抓取几次（一天）1、打开 “浙江土地文档合并//数据库”文件夹，最外面的浙江土地导入数据库，点击运行，默认是爬取一页（认为5个小时更新不会超过一页）可以修改页数2、第二步从数据库导出数据点击运行3，第三步数据计算处理，变成标准表。杭州二手房挂牌房源杭州市二手房交易监管服务平台：ht...

2020-09-10 10:50:43 163

原创 LeNet5

# -*- coding:utf-8 -*-import tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_dataimport time#声明输入图片数据，类别x = tf.placeholder('float', [None, 784])y_ = tf.placeholder('float'...

2018-10-14 11:06:48 213

原创 BP神经网络Python实现

# encoding:utf-8import numpy as npimport mathimport randomdef rand(a, b): return (b-a)*random.random() + adef make_matrix(m, n, fill=0.0): mat = [] for i in range(m): mat.ap...

2018-10-13 17:54:18 923

原创预测正弦函数

# -*- coding: utf-8 -*-# 以下程序为预测离散化之后的sin函数import numpy as npimport tensorflow as tffrom tensorflow.contrib import rnn# 加载matplotlib工具包，使用该工具包可以对预测的sin函数曲线进行绘图import matplotlib as mplfrom te...

2018-07-27 18:16:58 945

原创使用循环神经网络实现语言模型

#coding:utf-8from tensorflow.models.rnn.ptb import readerimport tensorflow as tfimport numpy as npDATA_PATH = "./simple-examples/data"#读取原始数据# print (len(train_data))# result = reader.ptb...

2018-07-27 17:29:31 931

原创程序的重构--模块化设计

#encoding:utf-8import tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_dataimport timeimport matplotlib.pyplot as pltdef weight_variable(shape): initial = tf.truncated_n...

2018-07-18 11:29:52 459

原创卷积神经网络的应用实例-LeNet5网络结构

#encoding:utf-8import tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_dataimport time#获取mnist数据mnist_data_set = input_data.read_data_sets('MNIST_data', one_hot=True)#声明输...

2018-07-18 10:37:26 794

原创 cookie保存到本地

Step1 : 没有cookie处理# -*- coding:utf-8 -*-import urllib.parseimport urllib.requesturl = "http://bbs.chinaunix.net/member.php?mod=logging&action=login&loginsubmit=yes&loginhash=LlOFk"post...

2018-06-25 20:18:42 1887

原创爬取12306车票信息（初级版本）

# coding=utf-8import requestsimport argparseimport datetimeimport reimport osimport jsonimport sslimport urllib.parsefrom collections import deque, OrderedDict# 获取每个站点的名字和对应的代码，并保存到本地filen...

2018-06-06 17:58:06 1186

原创卷积神经网络训练MNIST

#-*-coding:utf-8-*-from tensorflow.examples.tutorials.mnist import input_dataimport tensorflow as tfimport numpy as npmnist = input_data.read_data_sets("MNIST_data/",one_hot=True)trX, trY, teX, t...

2018-06-05 10:01:23 236

原创 WebStorm 2018 最新激活码 license server

最新的激活码，可以用的，还是热的--------license server：http://im.js.cn:8888

2018-06-03 18:05:46 7385 8

原创显式循环计算损失函数

#-*-coding:utf-8-*-import numpy as npimport timeimport matplotlib.pyplot as pltfrom data_utils import load_CIFAR10,get_CIFAR10_datacifar10_dir = 'datasets/cifar-10-batches-py'X_train, y_train, X...

2018-05-29 22:05:18 354

原创使用cifar-10数据集

#-*-coding:utf-8-*-import numpy as npimport matplotlib.pyplot as pltfrom data_utils import load_CIFAR10cifar10_dir = 'datasets/cifar-10-batches-py'X_train, y_train, X_test, y_test = load_CIFAR10(...

2018-05-29 20:22:46 3403

原创进阶的卷积网络

# -*- coding:utf-8 -*-import cifar10,cifar10_inputimport tensorflow as tfimport numpy as npimport timemax_steps = 3000batch_size = 128data_dir = '/tmp/cifar10_data/cifar-10-batches-bin'def va...

2018-05-29 11:03:19 209

原创简单的CNN

# -*- coding:utf-8 -*-from tensorflow.examples.tutorials.mnist import input_dataimport tensorflow as tfmnist = input_data.read_data_sets("MNIST_data/", one_hot=True)sess = tf.InteractiveSession()...

2018-05-28 15:47:16 420

原创多层感知机

# -*- coding:utf-8 -*-from tensorflow.examples.tutorials.mnist import input_dataimport tensorflow as tfmnist = input_data.read_data_sets("MNIST_data", one_hot=True)sess = tf.InteractiveSession()...

2018-05-28 14:50:41 285

原创 tensorflow实现自编码器

# -*- coding:utf-8 -*-import numpy as npimport sklearn.preprocessing as prepimport tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_datadef xavier_init(fan_in, fan_out, const...

2018-05-28 11:29:07 403

原创使用不同卷积核对图像进行处理之后的效果

# -*- coding: utf-8 -*-import cv2import numpy as npimport matplotlib.pyplot as pltsrc = cv2.imread("09-opencv/lena.jpg")kernels = [ (u"低通滤波器", np.array([[1, 1, 1], [1, 2, 1], [1, 1, 1]]) * 0...

2018-05-23 21:24:02 5006

原创 LSTM语言模型

#coding:utf-8#导入常用的库，模型中的PTB reader主要是借助它读取数据内容，并把单词转为唯一的数字编码，以便神经网络处理from __future__ import divisionimport timeimport numpy as npimport tensorflow as tfimport reader#定义语言模型处理输入数据的classclass...

2018-05-23 16:33:49 1279

原创 Bi-RNN

#coding:utf-8#代码主要是使用Bidirectional LSTM Classifier对MNIST数据集上进行测试#导入常用的数据库，并下载对应的数据集import tensorflow as tfimport numpy as npfrom tensorflow.examples.tutorials.mnist import input_datamnist = inpu...

2018-05-23 15:57:32 1852

原创 Word2Vec

#encoding:utf-8import collectionsimport mathimport osimport randomimport zipfileimport numpy as npimport urllibimport tensorflow as tf# url = 'http://mattmahoney.net/dc/'# def maybe_download...

2018-05-20 18:50:50 264

原创分析Ajax爬取今日头条街拍美景

# -*- coding: utf-8 -*-import osimport reimport jsonimport requestsfrom urllib.parse import urlencodedef get_one_page(offset, keyword): ''' 获取网页html内容并返回 ''' paras = { ...

2018-05-15 21:50:14 411

原创爬取微博（Ajax）

#coding:utf-8from urllib.parse import urlencodeimport requestsbase_url = 'https://m.weibo.cn/api/container/getIndex?'headers = { 'Host':'m.weibo.cn', 'Referer' : 'https://m.weibo.cn/u/2830...

2018-05-15 17:37:34 544

原创 LeNet-5 模型

修改后的LeNet5_inferneceimport tensorflow as tfINPUT_NODE = 784OUTPUT_NODE = 10IMAGE_SIZE = 28NUM_CHANNELS = 1NUM_LABELS = 10CONV1_DEEP = 32CONV1_SIZE = 5CONV2_DEEP = 64CONV2_SIZE = 5F...

2018-05-11 16:08:12 288 1

原创最佳实践样例程序

mnist_inference.py 定义了前向传播的过程以及神经网络的参数import tensorflow as tf# mnist_inference.py# 主网络构建，用于构建网络结构INPUT_NODE = 784OUTPUT_NODE = 10LAYER1_NODE = 500def get_weight_variable(shape, regularizer): ...

2018-05-11 11:40:08 181

原创爬取携程信息

# -*- coding: utf-8 -*-"""Created on Mon May 7 15:18:17 2018@author: chens"""import urllib.requestfrom bs4 import BeautifulSoupimport pymysql.cursors'''目标:获取酒店名称和酒店星级'''url1 = 'http://ho...

2018-05-07 17:13:36 1945 1

原创图像编码处理

import tensorflow as tfimport matplotlib.pyplot as pltimage_raw_data = tf.gfile.FastGFile('cat.jpg', 'rb').read()with tf.Session() as sess: img_data = tf.image.decode_jpeg(image_raw_data) ...

2018-05-02 15:43:56 552

原创 Tensorflow训练神经网络

import tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_data#MNIST数据集相关的系数INPUT_NODE = 784OUTPUT_NODE = 10#配置神经网络的参数LAYER1_NODE = 500BATCH_SIZE = 100LEARNING_RATE_BASE =...

2018-04-28 17:20:17 208

原创通过集合计算一个5层神经网络带L2正则化的损失函数的计算方法

import tensorflow as tf#获取一层神经网络边上的权重，并将这个权重的L2正则化损失加入名称为'losses'的集合中def get_weight(shape, lambda): #生成一个变量 var = tf.Variable(tf.random_normal(shape), dtype = tf.float32) #add_to_c...

2018-04-27 17:28:47 595

原创神经网络优化过程

为了综合梯度下降算法和随机梯度下降算法的优缺点，在实际应用中一般采用这两种算法的折中（每次计算一小部分训练数据的损失函数），这一小部分数据被称为一个batch。通过矩阵运算，每次在一个batch上优化神经网络的参数并不会比单个数据慢太多。另一方面，每次使用一个batch可以大大减小收敛所需要的迭代次数，同时可以使收敛的结果更加接近梯度下降的效果。以下代码给出了在TensorFlow中如何实现神经网...

2018-04-27 16:09:24 492

原创神经网络解决二分类问题

import tensorflow as tffrom numpy.random import RandomStatebatch_size = 8w1 = tf.Variable(tf.random_normal([2, 3], stddev=1, seed=1))w2 = tf.Variable(tf.random_normal([3, 1], stddev=1, seed=1))...

2018-04-27 10:45:00 1768

qq_34000894的博客