shu@-CSDN博客

转载机器学习--逻辑回归

机器学习–逻辑回归逻辑回归解决线性二元分类的算法Python实现逻辑回归分类算法import numpy as npimport matplotlib.pyplot as pltfrom matplotlib.colors import ListedColormapfrom sklearn import datasetsfrom sklearn.linear_model import LogisticRegressionfrom sklearn.model_selection impo.

2020-06-05 01:08:48 212

转载机器学习--随机梯度下降

机器学习–随机梯度下降随机梯度下降大规模机器学习，批量梯度下降运算成本较高，使用随机梯度下降能优化运算成本，收敛更快Python实现Adaline算法，随机梯度下降import numpy as npimport matplotlib.pyplot as pltfrom matplotlib.colors import ListedColormapfrom sklearn import datasetsclass AdalineSGD(object): def __init_.

2020-06-04 01:03:55 352

转载机器学习--自适应神经元Adaline

机器学习–自适应神经元AdalineAdaline规则感知器优化，规则和感知器相近Python实现Adaline算法import numpy as npimport matplotlib.pyplot as pltfrom matplotlib.colors import ListedColormapfrom sklearn import datasetsclass AdalineGD(object): def __init__(self, eta=0.01, n_iter=.

2020-06-03 23:48:29 557

转载机器学习--感知器

机器学习–感知器感知器规则初始化权重对每个训练样本计算输出值更新权重Python实现感知器算法import numpy as npimport matplotlib.pyplot as pltfrom matplotlib.colors import ListedColormapfrom sklearn import datasetsclass Perceptron(object): def __init__(self, eta=0.01, n_iter=50.

2020-06-03 23:19:03 187

原创 Numpy矩阵乘法

Numpy矩阵乘法一维数组和一维数组一维数组和一维数组点积运算得到一个数值一维数组和二维数组、一维数组和一维数组点积运算得到一维数组多维数组

2020-06-02 08:08:00 234

原创 Numpy伪随机数

Numpy伪随机数numpy.random.seed确定随机数生成种子，改变全局随机种子，每个种子对应的随机数保持一致numpy.random.RandomState随机数生成器的容器，初始化会调用seed，非全局状态，创建一个与其他隔离的随机数生成器numpy.random.normal生成标准正态分布随机数normal(loc,scale,size)loc:概率分布均值scale:概率分布标准差size:生成数组shape...

2020-06-02 07:56:56 425

原创 Pandas索引loc和iloc区别

Pandas索引loc和iloc区别loc 和 iloc两者区别loc用于标签索引，iloc用于整数索引loc索引闭区间，包含两端，iloc右开区间代码示例

2020-06-02 07:30:41 305

原创 Scrapy实例__链家租房爬虫

Scrapy实例__链家租房爬虫创建爬虫项目scrapy startproject lianjia_zf定义爬取的数据项import scrapyclass LianjiaZfItem(scrapy.Item): title = scrapy.Field() # 标题 update_time = scrapy.Field() # 房源更新时间 price = scrapy.Field() # 月租 tags = scrapy.Field() # 标.

2020-05-16 00:38:35 370

原创 scrapy简单示例

Scrapy简单爬虫示例链家租房爬虫示例import scrapyclass LianjiaSpider(scrapy.Spider): # 爬虫名 name = 'lianjia' # 允许爬取的链接域名 allowed_domains = ['lianjia.com'] # 起始url start_urls = ['https://sz.lianjia.com/zufang/'] def parse(self, response):.

2020-05-14 22:18:33 191

原创 scrapy框架

Scrapy框架Scrapy介绍Scrapy是一个基于Twisted的异步处理框架，是纯Python实现的爬虫框架，架构清晰，模块耦合度低，可扩展性极强，可以灵活完成各种需求。只需要定制开发几个模块就可以轻松实现一个爬虫。架构介绍它可以分为如下几个部分：Engine 引擎，处理整个系统的数据流处理，触发事务，是整个框架的核心。Item 项目，定义了爬取结果的数据结构，爬取数据会被赋为Item对象。Scheduler 调度器，接受引擎发过来的的请求并将其加入队列中，在引擎需要时将请求提供.

2020-05-14 08:12:23 274

原创 TCP协议

TCP协议TCP和UDPTCP/IP协议中两个具有代表性的协议是，TCP和UDP。TCP协议是面向连接的，可靠的流协议。UDP协议是不可靠的数据报协议。UDP不能保证消息一定到达。TCP用于需要保证可靠传输的情况下，UDP主要用于对高速传输和实时性有较高要求的通信和广播通信TCP连接–三次握手TCP提供面向有连接的通信传输。面向连接是指在数据通信开始前做好两端之间的连接工作。三次握手是指建立一个TCP连接时需要客户端和服务器端总共发送三个包以确认连接的建立。三次握手的流程图：.

2020-05-13 06:32:21 120

原创 http协议

HTTP协议http协议简介HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。HTTP是一个基于TCP/IP通信协议来传递数据，HTTP是一个属于应用层的面向对象的协议http协议工作原理HTTP协议定义Web客户端如何从Web服务器请求Web页面，以及服务器如何把Web页面传送给客户端。HTTP协议采用了请求/响应模型。客户端向服务器发送一个请求报文，.

2020-05-12 00:13:24 159

原创 Python并发编程---concurrent.futures

Python并发编程—concurrent.futuresExecutorconcurrent.futures.Executor: 一个抽象类，提供了异步执行调用的方法。一般都是通过调用子类来使用。方法submit(fn, *args, **kwargs)：执行可调用对象，返回一个Future对象表示执行的可调用对象map(func, *iterables, timeout=None, ...

2018-11-27 00:20:02 391

原创 Python并发编程---多线程threading

Python并发编程—多线程threadingthreading对象class threading.Thread(group=None, target=None, name=None, args=(), kwargs={}, *, daemon=None)参数group: 默认None，保留target(): 由run()方法调用的可调用对象name: 自定义线程名称args: 目标...

2018-11-26 00:27:27 403

原创 Python并发编程---多进程multiprocess（4）

Python并发编程—多进程multiprocess（4）多进程日志logging模块是线程安全的，不适合多进程日志，多进程日志需要再安装一个包concurrent_log_handler"""多进程日志"""import loggingfrom multiprocessing.pool import Poolimport multiprocessingfrom concu

2018-11-22 00:55:58 463

原创 Python并发编程---多进程multiprocess（3）

Python并发编程—多进程multiprocess（3）进程池Poolclass multiprocessing.pool.Pool([processes[, initializer[, initargs[, maxtasksperchild[, context]]]]])参数说明process: 进程数量，默认cpu_countinitializer: 如果设置了initalizer...

2018-11-20 00:43:01 616

原创 Python并发编程---多进程multiprocess（2）

Python并发编程—多进程multiprocess（2）进程通信和数据共享Pipemultiprocessing.Pipe([duplex])用于两个进程之间的连接，返回表示管道末端的 Connection 对象的对 (conn1, conn2)。参数duplex默认为True，则管道是双工的，两边都能发送和结束，duplex为False，则管道是单向的，conn1只能用于接收，con...

2018-11-19 00:28:08 485

原创 Python并发编程---多进程multiprocess（1）

Python并发编程—多进程multiprocess（1）Process类class multiprocessing.Process(group=None, target=None, name=None, args=(), kwargs={}, *, daemon=None)参数说明group：group 应始终为 None，仅为了和 threading.Thread 保持兼容性targ...

2018-11-14 01:12:29 493

原创 mongodb安装

第一次尝试着写博客，一是为了做个笔记一边以后查询，再者练习下markdownmangodb安装下载mogonodb-下载地址https://www.mongodb.com/download-center#community -由于电脑是64位的就下载了64位的mongodb安装mongodb-跟着提示一步步安装，默认目录是C:\Program Files\MongoDB运行mongodb搭建

2017-09-24 18:02:28 244

deek的博客