2019年04月_fjssharpsword

12月 11月 10月 08月 07月 06月 05月 04月 03月 01月

原创 linux上传github项目

重温linux上传github项目的几个步骤，前提是linux上部署了git。1）github线上创建一个Repositories，项目名和线下项目一致。2）linux线下切换到项目下，初始化为git可管理的仓库git init3）添加需要上传的文件上传所有文件git add .上传指定文件git add FileName查看提交状态git stat...

2019-04-29 14:13:57 624 2

原创 python多图拼接并利用resnet提取特征

代码功能：1、将多张图拼接成一张大图；2、基于resnet提取大图的特征。import torchimport torch.nn as nnfrom torchvision import models, transformsfrom torch.autograd import Variableimport numpy as npfrom PIL import Image ...

2019-04-24 08:35:33 2054 1

原创 Bert-as-Service库Embedding句子

开源库：https://github.com/hanxiao/bert-as-service步骤：1、安装：pip3 install bert-serving-server --userpip3 install bert-serving-client --user2、下载预训练的BERT模型并解压：https://github.com/google-research...

2019-04-20 08:41:36 1943

原创 Google BERT模型提取句子Token特征

BERT模型：https://github.com/google-research/bert#fine-tuning-with-bert环境：linux+python3+tensorflow，也有pytorch版。1、下载：BERT-Base, Chinese: Chinese Simplified and Traditional, 12-layer, 768-hidden, 12-...

2019-04-19 20:09:21 4538 2

原创概率分布函数的关系框架

1）PMF(probability mass function,pmf，概率质量函数)代表一组离散值的概率。从PMF到CDF(cumulative distritution function,cdf，累积分布函数)是把概率值累加得到累积概率。从CDF到PMF，则计算累积概率之间的差值。2）PDF(probablity denstiy function ,pdf，概率密度函数)是连续性CD...

2019-04-18 12:19:41 1070

原创 Python含dict的list去重

功能：list里面的每一个元素都是dict，根据dict某一个key进行去重from itertools import compressimport pandas as pdfrom operator import itemgetterfrom itertools import groupby#功能：list里面的每一个元素都是dict，根据dict某一个key进行去重#函数1d...

2019-04-18 09:35:32 1675

原创 windows下基于selenium保存网页为图片

环境：windows+python3+chorme.exe1.安装：pip3 install selenium;2.安装：下载chormedriver，解压到指定目录3.代码：# -*- coding: utf-8 -*-'''Created on 2019年4月11日@author: cvter'''from selenium import webdriveri...

2019-04-11 18:16:49 1462

原创概率编程库Pymc3案例之鲁棒线性回归

参考：https://twiecki.io/blog/2013/08/27/bayesian-glms-2/https://twiecki.io/blog/2014/03/17/bayesian-glms-3/https://twiecki.github.com/blog/2013/08/12/bayesian-glms-1/针对线性回归中异常点，利用t分布来替换正态分布构建贝叶斯模型...

2019-04-04 20:09:53 580

原创概率编程库Pymc3案例之神经网络

参考：https://docs.pymc.io/getting_started.htmlhttps://twiecki.io/blog/2016/06/01/bayesian-deep-learning/1、生成非线性可分的二分类数据%matplotlib inlineimport theanoimport pymc3 as pmimport sklearnimport nu...

2019-04-04 12:21:35 714

原创概率编程库Pymc3案例之线性回归

参考：https://github.com/CamDavidsonPilon/Probabilistic-Programming-and-Bayesian-Methods-for-Hackers1、模型假设贝叶斯线性回归模型，假设参数具有正态分布（Normal）先验，要预测的具有正态分布的观测值Y，其期望μ是两个预测变量的线性组合，X1和X2：Y∼N(μ,σ2)μ=...

2019-04-03 12:12:06 3443 3