hello_SW的博客

原创 Pyperclip could not find a copy/paste mechanism for your system解决方法补充

可以直接在命令行定义，也可以写进bashprofile一劳永逸.显示 Error: No display: (null)，但是之后仍然不管用，查到了这个答案，在linux使用剪贴板时报错，然后找到一个解决方法(

原创 the spread of false news and true news online

原创 Network analysis reveals open forums and echo chambers in social media discussions of climate change

原创 Two hashtag framework of genome editing

转载 Live tweeting live debates

原创 词汇语义变化与社会变迁定量观测与分析

原创 how advocacy organizations stimulate conversation on social media

Journal: PNASTitle:Combining natural language processing and networkanalysis to examine how advocacy organizationsstimulate conversation on social media

转载 Network structure and influence of the climate change counter-movement

Journal：Nature Climate ChangeTitle：Network structure and influence of the climate change counter-movement

转载 sqlite

http://blog.itpub.net/26230597/viewspace-1259145 

原创 python list + 与 append 的区别

转载 python中super的用法

http://python.jobbole.com/86787/

原创 linux下matplotlib绘图

import matplotlib as mplmpl.use('agg')x=[1,2,3]y=[4,5,6]plt.plot(x,y)plt.show()put.savefig('test.png')

原创 word2vec skip-gram模型好文

https://www.leiphone.com/news/201706/PamWKpfRFEI42McI.html

原创 [MXNet]Lecture04批量归一化

从零开始实现：from mxnet import ndarray as nddef pure_batch_norm(X,gemma,beta,eps=1e-5): assert len(X.shape) in (2,4) if len(X.shape)==2: mean=X.mean(axis=0) variance=((X-mean)**2).mean(axis=0) e

原创 tmux快捷键

基础的快捷键是ctrl bsession 级别tmux new 创建新的会话s 展示会话列表d 跳出会话tmux kill-session -t session-name 关闭某一个会话tmux kill-server 关闭所有的会话window 级别c 新建窗口& 关闭窗口p 跳转到上一窗口n 跳转到下一窗口w 展现窗口列表, 对窗口重命名pane 级别" 分为上下两个面板% 分为左右两个面板

原创 [MXNet]Lecture02卷积神经网络的gluon实现

gluon实现的准确率要高一点，训练较快。import mxnet as mxfrom mxnet import gluonfrom mxnet.gluon import nnfrom mxnet import ndarray as ndfrom mxnet import autogradctx=mx.gpu()def transform(data,label): return

原创 [MXNet]Lecture02卷积神经网络的从零开始的实现

import mxnet as mxfrom mxnet import ndarray as ndfrom mxnet import autogradfrom mxnet import gluonbatch_size=256ctx=mx.gpu()#将数组开在gpu上def transform(data,label): return data.astype('float32')/

原创 [MxNet]正则化——惩罚较大参数（从零开始与gluon实现）

手动实现方式：在计算loss时加上lambd*L2rom mxnet import ndarray as ndfrom mxnet import autogradfrom mxnet import gluonimport randomimport matplotlib as mplmpl.rcParams['figure.dpi']=120import mxnet as

原创 [MXNet]lecture02-多层感知器

net.add(gluon.nn.Dense(256),activation="relu")这样可以添加激活函数，实现非线性变化。

原创 [MXNet]lecture01-多类逻辑回归gluon实现

from mxnet import gluonfrom mxnet import ndarray as ndfrom mxnet import autograddef transform(data,label): return data.astype('float32')/255, label.astype('float32')mnist_train=gluon.data.visio

原创 [MXNet]lecture01-多类逻辑回归从零开始

from mxnet import ndarray as ndfrom mxnet import autogradfrom mxnet import gluondef transform(data,label): return data.astype('float32')/255, label.astype('float32')#为啥要除以255？依旧没有明白。mnist_train

原创 [MxNet]Lecture01-线性回归的gluon实现

from mxnet import ndarray as ndfrom mxnet import autogradfrom mxnet import gluonnum_examples=1000num_inputs=2true_w=[2,-3.4]true_b=4.2x=nd.random_normal(shape=(num_examples,num_inputs))y=tr

原创 [MxNet]Lecture01-线性回归从零实现

import mxnet.ndarray as ndimport mxnet.autograd as ag import randomnum_examples=100num_inputs=2w_true=[2,-3.4]b_true=4.2x=nd.random_normal(shape=(num_examples,num_inputs))y=w_true[0]*x[:,0

转载 非root用户安装软件

参考Stack Overflow给出解决方案，适用于python2.7, python3.x安装pythonpython版本库https://www.python.org/ftp/python/，此处我选择2.7.5版本的，在安装python的时候，使用--prefix指定安装路径即可，命令如下：wget https://www.python.org/ftp/python/2.7.5/Python

原创 set paste

从网上复制代码到vim里缩进总是很诡异，解决方法：set paste

原创 k-近邻算法实现手写数字识别系统

k-近邻算法通过测量距离，对物品进行分类。选取与目标物品最近的k个物品，出现最多的类别，即为目标的类别。优点:精度高、对异常值不敏感、无数据输入假定。缺点:计算复杂度高、空间复杂度高。 适用数据范围:数值型和标称型。 采用了numpy库对矩阵进行处理：from numpy import * #处理矩阵import operatorfrom os impo

原创 Numpy笔记

from bumpy import *a=array([[[1,2],[3,4],[5,6]],[[7,8],[9,10],[11,12]]]) #用array函数创建数组时，array（）的参数必须是[]括号起来的。或者可以用ones，zeros创建占位元素，如ones（（3，4）），zeros（（1，2））, arange(10,30,5) 按间隔生成a.ndim  维数3a.

原创 模拟登陆，抓取会员课程

基于python，使用selenium驱动Phantomjs，使用会员账号密码，模拟登陆某课程网站，根据课程类别检索课程，找到课程文档，使用Phantomjs进行截图或者保存为pdf。

转载 chrome 开发者工具

博客文章 chrome开发者工具系列（一）

原创 scrapy爬取电影网站

new_movie.py 定义爬虫import scrapyimport reimport urllibfrom ..items import NewMovieItem class new_movie(scrapy.Spider): name='new_movie' start_urls=['http://www.87movie.com/tag/喜剧'] allowed_d

原创 xpath学习笔记

在html中，id是唯一的在html中，class是可以多处引用的/ 表示在下一级中搜索，逐层检索// 表示在所有较低层级中搜索，全局检索下标 [数字]：从1开始，依次计算[ ]表示定语修饰，括号里可以是属性（用@表示），如class为hahah的div的文本内容 可以说'.//div[@class="hahah"/text()]'，括号里也可以是文本，如文本为miaomiaomiao的div的c

原创 MAC OS

alias ls='ls -hG'export CLICOLOR=1export LSCOLORS=gxfxaxdxcxegedabagacadalias python=python3alias pip=pip3PATH="/Library/Frameworks/Python.framework/Versions/3.6/bin:${PATH}"export PATH目前的 ~/.

原创 python3爬取豆瓣书籍top250

豆瓣import reimport sslimport urllib.requestssl._create_default_https_context=ssl._create_unverified_contextclass Douban: def __init__(self): self.queque=[] self.user_agent='Mozilla/5.0 (Ma

原创 python3 爬取糗事百科

刚开始学爬虫，找练手项目时遇到不少坑，一部分是因为大部分教程是基于python2的，一部分是因为各种教程里有各种坑，就是跑不通，挺影响进度的，还有一部分太高大上了，用了复杂的解析工具什么的，不利于清爽入门，好在找到了http://www.cnblogs.com/TaylorBoy/p/6777864.html 这个教程还不错，结构清晰，内容丰富，对我帮助很大。不过在原作者的基础上做了一点改动。

原创 正则表达式

raw stringre.compile(r'\w*')  其中r的意思是raw string，其目的是取消转义正则表达式可以通过括号进行分组提取，并通过group进行调用s='abc123abc456'p=re.compile('.*?(\d{3}).*?(\d{3}).*?') group(0)表示被匹配的字符串，group(1)表示第一个括号里的内容，以此类推。

原创 Python3 爬虫基础

POSTimport urllib.requestfrom http import cookiejarcookie=cookiejar.CookieJar()handler=urllib.request.HTTPCookieProcessor(cookie)opener=urllib.request.build_opener(handler)response=o

转载 爬虫谷歌翻译

http://blog.csdn.net/yingshukun/article/details/53470424

原创 urllib问题

urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failedhttp://blog.csdn.net/moonhillcity/article/details/52767999

原创 python类

collections是python内建的一个集合模块，包含很多集合类Counter是一个dict子类，键是要计数的对象，值是个数。Counter初始化方式为c=Counter(str)或者c=Counter(a=2,b=3,c=4)常用的函数有：most_common(n);也可以输入键值，查看对象个数。list(c.elements())可将元素以列表形式输出。

原创 python 模块

import syssys.argv 以列表的形式返回命令的所有参数。第一个参数是命令本身，之后是各个参数。sys.exit（）exit()可以有参数，默认为0，表示正常退出，其他都是异常退出。