- 博客(15)
- 资源 (5)
- 收藏
- 关注
RSS订阅原创 Python爬虫 爬取数据存入MongoDB
from bs4 import BeautifulSoupimport requestsimport timeimport pymongoclient = pymongo.MongoClient('Localhost', 27017)ceshi = client['ceshi']url_list = ceshi['url_list3']item_info = ceshi['item...
2018-06-26 01:10:30
3765
原创 ServerSelectionTimeoutError: localhost:27017: [WinError 10061] 由于目标计算机积极拒绝，无法连接。
作为mongodb 新手，可能会遇到上面的问题。其实也很好解决，原因是mongodb 服务器没有开启，记住只要要求连接数据库的，必须提前开启mongodb服务器。1、cmd进入命令操作2、cd 切换到mongodb/bin目录下3、执行命令开启命令 mongod --dbpath "d:\mongodb\data4、这个窗口不能关，然后就可以进行MongoDB数据库的相关操作了...
2018-06-25 23:55:39
34135
转载 python爬虫 网页表格
from bs4 import BeautifulSoup import requests import csv import bs4 #检查url地址 def check_link(url): try: r = requests.get(url) r.raise_for_status() r.enc...
2018-06-22 00:44:33
7100
原创 一个简单的网页python爬虫 BeautifulSoup
1、使用BeautifulSoup解析网页Soup =BeautifulSoup(html, "lxml")爬取整个HTML网页定位有两种方式：（1）CSS selector：如 div.centering_wrapper > img 或 div.item.name > a（2）XPath：比如要爬取图片和标题，右击--> 检查--> 选中标题右击 -->检查 ...
2018-06-21 10:48:56
257
转载 朴素贝叶斯
朴素贝叶斯主要用于预测分类。既可以说是一种算法，同时也叫贝叶斯分类模型。举一个简单的例子，来理解一下贝叶斯公式：某高校总共有N名学生，其中女生占1/5，女生通过四六级的概率为0.5，男生通过四六级的概率为0.3，求一名通过四六级的同学恰好是男生的概率？P（男）= 4/5P（女）=1/5P（pass|女）=0.5p（pass|男）=0.3P（pass）=(0.2*0.5*N+0.8*0.3*N)/N...
2018-06-19 16:17:48
289
转载 莫凡TensorFlow 建造神经网络
add_layer 功能 首先，我们导入本次所需的模块。import tensorflow as tfimport numpy as np构造添加一个神经层的函数。（在上次课程中有详细介绍）def add_layer(inputs, in_size, out_size, activation_function=None): Weights = tf.Variable(tf.random...
2018-06-11 16:30:14
1234
转载 tensorflow完整神经网络样例程序
In [1]: import tensorflow as tffrom numpy.random import RandomState1. 定义神经网络的参数，输入和输出节点。In [2]: batch_size = 8w1= tf.Variable(tf.random_normal([2, 3], stddev=1, seed=1))w2= tf.Variable(tf.ra...
2018-06-11 10:34:00
1107
转载 三层简单神经网络的前向传播算法
1. 三层简单神经网络In [1]: import tensorflow as tf1.1 定义变量In [2]: w1= tf.Variable(tf.random_normal([2, 3], stddev=1, seed=1))w2= tf.Variable(tf.random_normal([3, 1], stddev=1, seed=1))x = tf.constant...
2018-06-11 10:32:03
976
原创 张量的相关操作
学习目标：初始化 TensorFlow 变量并赋值创建和操控张量回忆线性代数中的加法和乘法知识（如果这些内容对您来说很陌生，请参阅矩阵加法和乘法简介）熟悉基本的 TensorFlow 数学和数组运算矢量加法您可以对张量执行很多典型数学运算 (TF API)。以下代码会创建和操控两个矢量（一维张量），每个矢量正好六个元素：with tf.Graph().as_default(): # Create...
2018-06-11 09:49:53
1285
原创 tensorflow基础知识 计算图 张量 会话session
1、tensorflow数据模型——张量在tensorflow中所有的数据都通过张量的形式表示。张量可以简单理解为多维数组：标量是零维数组（零阶张量）。例如，\'Howdy\' 或 5矢量或向量是一维数组（一阶张量）。例如，[2, 3, 5, 7, 11] 或 [5]矩阵是二维数组（二阶张量）。例如，[[3.1, 8.2, 5.9][4.3, -2.7, 6.5]]张量可以作为常量或变量存储在图中...
2018-06-11 09:36:22
380
转载 tensorflow基础
TensorFlow 编程概念学习目标：学习 TensorFlow 编程模型的基础知识，重点了解以下概念：张量指令图会话构建一个简单的 TensorFlow 程序，使用该程序绘制一个默认图并创建一个运行该图的会话注意：请仔细阅读本教程。TensorFlow 编程模型很可能与您遇到的其他模型不同，因此可能不如您期望的那样直观。概念概览TensorFlow 的名称源自张量，张量是任意维度的数组。借助 ...
2018-06-11 01:05:39
136
原创 对于毕业论文的一点小想法
这两天看了几篇学位论文，有一些小想法。基于中草药语义网的自动问答系统的研究与实现，基于语义网的旅游业自动问答系统的研究，主要用到自然语言处理和机器学习相关知识，专注小领域的问答系统。目前我主要想做的是人工智能和农业结合的一个小项目。1、基于农业的问答系统，问农民朋友提供农作物病理药理问答，图片识别常见的病害等等，主要困难数据集，深度学习CNN和自然语言处理相关知识欠缺。2、对于农业病情虫害的预测，...
2018-06-10 23:45:10
1446
原创 非数值型特征如何进行编码？
1、如下图，“AGE”“EDUCATION”“MARRIAGE”“RISK”是非数值型特征，不可以直接训练模型，需要进行编码，把特征转换成数值型，然后进行训练。2、有很多种编码方式，比如one-hot编码（独热编码），3、...
2018-06-06 20:15:33
9072
5
转载 处理分类数据 非数值型编码
处理分类数据目前为止，我们处理的都是数值型变量。但是真实世界的数据集通常都含有分类型变量(categorical value)的特征。当我们讨论分类型数据时，我们不区分其取值是否有序。比如T恤尺寸是有序的，因为XL>L>M。而T恤颜色是无序的。在讲解处理分类数据的技巧之前，我们先创建一个新的DataFrame对象：上面创建的数据集含有无序特征(color)，有序特征(size)和数值型...
2018-06-06 19:19:28
11677
4
原创 python 怎样把一个数组类型数据保存为csv文件
有时候做完一个案例的分析，模型做好了，最后想把预测的结果保存为CSV文件。这个预测的结果一般是n行1列的一个数列，我们最后就是想把预测结果保存下来。 submission = clf.predict(credit_test)#submission是我的预测结果，是一个5000*1的列向量submission = pd.DataFrame({'RISK':submission})#必须把这个s...
2018-06-06 16:56:02
26055
hog+SVM图片分类实例
2018-08-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人