- 博客(451)
- 资源 (38)
- 收藏
- 关注
RSS订阅原创 tensorflow cnn 入门例子
tensorflow cnn 入门例子from __future__ import print_functionimport tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_datamnist = input_data.read_data_sets('MNIST_data', one_hot=T...
2018-09-29 07:39:24
2898
原创 tensorflow 防止过拟合 dropout
import tensorflow as tfimport numpy as npimport matplotlib.pyplot as plttf.set_random_seed(1)np.random.seed(1)# Hyper parametersN_SAMPLES = 20N_HIDDEN = 300LR = 0.01# training datax = np...
2018-09-09 18:30:41
407
原创 tensorflow 分类
from __future__ import print_functionimport tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_dataminist = input_data.read_data_sets('MNIST_data', one_hot=True)def add_lay...
2018-09-09 17:15:42
365
原创 tensorflow 可视化
from __future__ import print_functionimport tensorflow as tfimport numpy as npimport matplotlib.pyplot as pltdef add_layer(inputs, in_size, out_size, n_layer, activation_function=None): l...
2018-09-09 17:13:11
343
原创 用candlestick_ohlc 画k线
import mpl_finance as mpffig, (ax1, ax2) = plt.subplots(2, sharex=True, figsize=(15,8))mpf.candlestick_ohlc(ax1,daysreshape.values,width=1.5,colorup='r',colordown='green')ax1.set_ylabel("price")#...
2018-08-26 09:00:43
10920
1
原创 定时备份mysql 到本地，并且发送备份到邮件 mutt
1.安装msmtpwget https://nchc.dl.sourceforge.net/project/msmtp/msmtp/1.6.6/msmtp-1.6.6.tartar xf msmtp-1.6.6.tar.xz && cd msmtp-1.6.6 && ./configure --prefix=/usr/local/msmtp --sysco...
2018-08-26 08:58:47
759
原创 Python 通过Scipy 的curve_fit 来拟合指数
import pymysqlimport pandas as pdimport matplotlib.pyplot as pltimport numpy as npfrom scipy.optimize import curve_fitdef fund(x, a, b): return b * (a ** x)connect = pymysql.connect( ...
2018-08-26 08:57:17
12239
1
原创 wordpress wp_posts wp_postmeta 优化
ALTER TABLE wp_posts PARTITION BY RANGE(id) ( PARTITION p0 VALUES LESS THAN (70000), PARTITION p1 VALUES LESS THAN (140000), PARTITION p2 VALUES LESS THAN (210000), PARTITION p3 VALUE...
2018-08-26 08:53:39
1687
1
原创 pandas 实战 连接mysql 统计公众号情况
1. 连接mysql,使用 read_sqlimport pymysqlimport pandas as pdimport matplotlib.pyplot as pltimport numpy as npconnect = pymysql.connect( host = '127.0.0.1', db = 'wxarticle',...
2018-07-31 16:19:45
735
原创 使用 anyproxy 进行爬虫
主要参考官方文档http://anyproxy.io/cn/ module.exports = { // 模块介绍 summary: 'my customized rule for AnyProxy', // 发送请求前拦截处理 *beforeSendRequest(requestDetail) { /* ... */ }, // 发送响应前处理 *before...
2018-07-31 16:19:04
3094
1
原创 python 控制鼠标键盘库 pyautogui
1. 鼠标相关pyautogui.moveTo(100, 200) # moves mouse to X of 100, Y of 200.pyautogui.moveRel(0, 50) # move the mouse down 50 pixels. pyautogui.click() # click the mousepyautogui.click(button='...
2018-07-31 15:41:39
3882
原创 在基金重仓股中随机选股策略
1. 构建股票池爬一些基金的10大持仓股。大概爬了102只股票。2. 每年年初清仓，然后随机选30只 运气好年化上20%，运气 差，年化也有10%左右。可以了。 主要随机可以来应对黑天鹅和策略过拟合。http://www.waitingfy.com/archives/4730...
2018-07-31 15:40:56
1737
原创 Spark mllib FP Growth
1.1.1 基本概念关联规则挖掘的一个典型例子是购物篮分析。关联规则研究有助于发现交易数据库中不同商品（项）之间的联系，找出顾客购买行为模式，如购买了某一商品对购买其他商品的影响，分析结果可以应用于商品货架布局、货存安排以及根据购买模式对用户进行分类。关联规则的相关术语如下：（1）项与项集这是一个集合的概念，在一篮子商品中的一件消费品即为一项（Item），则若干项的集合为项集，如{啤...
2018-07-31 15:38:14
372
原创 311 - Technology 102 - Consumer Cyclical 中选市值最大的12只股票，一个月调仓一次
2005年持仓 2018年持仓 http://www.waitingfy.com/archives/4711
2018-07-31 15:37:10
393
原创 Spark mllib k-means 聚合
K-Means算法是一种基于距离的聚类算法，采用迭代的方法，计算出K个聚类中心，把若干个点聚成K类。package com.immooc.sparkimport org.apache.log4j.{Level, Logger}import org.apache.spark.mllib.clustering.KMeansimport org.apache.spark.mllib.lin...
2018-07-31 15:31:21
390
原创 Spark mllib 决策树
package com.immooc.sparkimport org.apache.log4j.{Level, Logger}import org.apache.spark.mllib.linalg.Vectorsimport org.apache.spark.mllib.regression.LabeledPointimport org.apache.spark.mllib.tree...
2018-07-31 15:29:18
464
原创 Spark mllib SVM
package com.immooc.sparkimport org.apache.log4j.{Level, Logger}import org.apache.spark.mllib.classification.SVMWithSGDimport org.apache.spark.mllib.util.MLUtilsimport org.apache.spark.{SparkConf...
2018-07-31 15:28:07
757
原创 Spark mllib 贝叶斯分类
贝叶斯定理已知某条件概率，如何得到两个事件交换后的概率，也就是在已知P(A|B)的情况下如何求得P(B|A)。这里先解释什么是条件概率：表示事件B已经发生的前提下，事件A发生的概率，叫做事件B发生下事件A的条件概率。其基本求解公式为：贝叶斯定理之所以有用，是因为我们在生活中经常遇到这种情况：我们可以很容易直接得出P(A|B)，P(B|A)则很难直接得出，但我们更关心P(B|A)，贝叶斯定理就为我们...
2018-07-15 18:04:39
800
原创 Spark mllib 保序回归
从该序列的首元素往后观察，一旦出现乱序现象停止该轮观察，从该乱序元素开始逐个吸收元素组成一个序列，直到该序列所有元素的平均值小于或等于下一个待吸收的元素。举例：原始序列：<9, 10, 14>结果序列：<9, 10, 14>分析：从9往后观察，到最后的元素14都未发现乱序情况，不用处理。原始序列：<9, 14, 10>结果序列：<9, 12, 12>...
2018-07-15 18:04:01
492
原创 Spark mllib 逻辑回归
逻辑回归逻辑回归其实是一个分类算法而不是回归算法。通常是利用已知的自变量来预测一个离散型因变量的值（像二进制值0/1，是/否，真/假）。简单来说，它就是通过拟合一个逻辑函数（logit fuction）来预测一个事件发生的概率。所以它预测的是一个概率值，自然，它的输出值应该在0到1之间。 假设你的一个朋友让你回答一道题。可能的结果只有两种：你答对了或没有答对。为了研究你最擅长的题目领域，你做了各种...
2018-07-15 18:03:16
803
原创 Spark mllib LinearRegression
1. rdd 例子package com.immoocimport org.apache.log4j.{Level, Logger}import org.apache.spark.mllib.linalg.Vectorsimport org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.mllib.regres...
2018-07-15 18:02:33
602
原创 Spark mllib 列统计
Spark MLlib提供了一种叫colStats()的统计方法，调用该方法会返回一个类型为MultivariateStatisticalSummary的实例。通过这个实例看，我们可以获得每一列的最大值，最小值，均值、方差、总数等。1 2 3 4 56 7 1 5 93 5 6 3 13 1 1 5 6val data_path = "file:///Users/walle/Document...
2018-07-15 18:01:54
459
原创 scrapy 保存cookie
from scrapy.http.cookies import CookieJar # 该模块继承自内置的http.cookiejar,操作类似# 实例化一个cookiejar对象cookie_jar = CookieJar()real_cookie = {}# 首先是cookie的提取class MySpider(scrapy.Spider): .... ......
2018-07-15 18:01:12
2403
原创 scrapy 使用自定义的过滤器
from scrapy_redis.dupefilter import RFPDupeFilterclass CustomFilter(RFPDupeFilter): def request_seen(self, request): """Returns True if request was already seen. Parameters ...
2018-07-08 20:34:34
1609
1
原创 Hbase 简单java API 操作
package utils;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.TableName;import org.apache.hadoop.hbase.client.*;import org.apache.hadoop.hbase.util.Bytes;import java....
2018-07-08 20:33:51
467
原创 Redis 存字符串返回的却是byte
r = redis.StrictRedis(host='127.0.0.1', port=6379, password='123456', db=1, decode_responses=True) cookie_str = r.get('gs_cookie')用这种连接就可以了http://www.waitingfy.com/arc...
2018-07-08 20:33:14
4921
原创 Python in 的逻辑判断
python 中的in，要看你的目标是什么1.字符串>>> "in" in "indigo"True>>> "in" in "violet"False>>> "0" in "10"True>>> "1&
2018-07-08 20:32:37
1659
原创 python virtualenv 包虚拟环境
1.安装virtualenvpip install virtualenv2. 激活virtualenvvirtualenv /path/to/project/spider/path/to/project/spider 这个是随便一个目录。会在这个目录下生成bin,include,lib3. 进入虚拟环境source /path/to/project/spider/bin/activate接下来就可...
2018-07-08 20:32:01
987
原创 Storm 整合kafka
1.依赖<dependency> <groupId>org.apache.curator</groupId> <artifactId>curator-framework</artifactId> <version>${curator.version}</vers...
2018-06-30 20:30:32
644
1
原创 Storm 整合 Hbase
1.依赖<dependency> <groupId>org.apache.storm</groupId> <artifactId>storm-hbase</artifactId> <version>1.1.1</version> <exclusions&
2018-06-30 20:29:55
2338
1
原创 storm 整合hdfs
1.依赖<dependency><groupId>org.apache.storm</groupId><artifactId>storm-hdfs</artifactId><version>${storm.version}</version><type>jar</t
2018-06-30 20:29:17
503
原创 Storm 整合jdbc wordcount
<dependency> <groupId>org.apache.storm</groupId> <artifactId>storm-jdbc</artifactId> <version>1.1.1</version> <type>jar
2018-06-30 20:28:39
1391
原创 Storm 把结果存到redis
Maven 依赖添加 <dependency> <groupId>org.apache.storm</groupId> <artifactId>storm-redis</artifactId> <version>${storm.version}</version> &
2018-06-30 20:28:04
1049
原创 storm 分组策略
Stream groupingsPart of defining a topology is specifying for each bolt which streams it should receive as input. A stream grouping defines how that stream should be partitioned among the bolt's tasks...
2018-06-30 20:27:22
459
原创 leetcode 反转链表 python
反转一个单链表。示例: 输入: 1->2->3->4->5->NULL 输出: 5->4->3->2->1->NULL 进阶: 你可以迭代或递归地反转链表。你能否用两种方法解决这道题？# Definition for singly-linked list.# class ListNode:# def __init__(self...
2018-06-30 20:26:10
805
原创 node.js 使用Sequelize mysql ORM 来搞RESTful API
1.安装sequelizenpm install sequelize --save2. 先看mysql 数据库表结构 3. node.js 目录结构4. config.json{ "development": { "username": "root", "password": "root", "database": "baidusong",
2018-06-30 20:25:28
2975
1
原创 node.js supertest 单元测试 RESTful API
npm install supertest should --saveconst app = require('../app')const request = require('supertest')(app)require('should');request .get('/api') .expect(200) .end((err, res) => { ...
2018-06-30 20:24:02
4086
原创 node.js Express RESTful API 认证
接上一篇文章《node.js Express 创建RESTful API》1.安装依赖node-token-jwt，morgannpm install jsonwebtoken morgan --savejsonwebtoken 用来创建和验证json token2. 项目结构增加了一个user model，一个setup 用来创建一个测试用户，config里记录一个key用来给jsonwebt...
2018-06-30 20:22:56
1535
原创 Leetcode 有效的括号字符串 python
class Stack: """模拟栈""" def __init__(self): self.items = [] def isEmpty(self): return len(self.items)==0 def push(self, item): s...
2018-06-24 13:35:59
869
原创 两数相加 leetcode Python
给定两个非空链表来表示两个非负整数。位数按照逆序方式存储，它们的每个节点只存储单个数字。将两数相加返回一个新的链表。你可以假设除了数字 0 之外，这两个数字都不会以零开头。示例：输入：(2 -> 4 -> 3) + (5 -> 6 -> 4)输出：7 -> 0 -> 8原因：342 + 465 = 807# Definition for singly-lin...
2018-06-24 13:35:21
1641
native-audio.rar
2012-04-20
三星Calendar
2013-08-26
Air Hockey.7z
2013-08-10
boost xpressive
2013-07-24
MFC 多线程
2013-07-22
MFC 数据库操作
2013-07-22
Android Opengles 例子
2013-06-22
号码归属地.rar
2013-05-28
CursorLoadSample.rar
2013-05-17
HLSL Pixel Shader
2012-12-18
YawPitchRoll.rar
2012-12-07
RotationArbitrary.rar
2012-12-04
3ds max 2009 导出x文件插件(panda)
2012-10-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人