- 博客(29)
- 收藏
- 关注
RSS订阅原创 7周7并发模型学习笔记
public class Main { public static void main(String[] args) throws InterruptedException { Thread myTread=new Thread(){ public void run(){ System.out.println("hel...
2019-10-29 00:13:41
242
原创 read_table
def get_df(path)->pd.DataFrame: data=[] header=['id','score'] lines=Path(path).read_text().split('\n') for line in lines: words=line.split(' ') while '' in words: ...
2019-10-21 11:19:21
383
原创 jupyter 设置密码
~/.jupyter/jupyter_notebook_config.pyc.NotebookApp.ip='*'c.NotebookApp.password = u'sha1:88b30f39683e:a0fe8204cc96aedaa882eb6d036b294f8f9be815'c.NotebookApp.open_browser = Falsec.NotebookApp.port ...
2019-10-18 10:09:20
314
原创 Linux主机间文本通信
send-msgecho "$1">/tmp/sendboxscp -P 22 /tmp/sendbox tqc@192.168.0.101:/tmp/inbox在这里插入代码片recv-msgcat /tmp/inbox
2019-10-17 11:30:59
248
原创 ubuntu 18.04安装NVIDIA-docker
如果你直接用百毒搜，得到的都是错误答案，因为官网更新了，哈哈百毒，csdn，祸害互联网，祸害IT界官网链接：https://nvidia.github.io/nvidia-docker/正确示范curl -s -L https://nvidia.github.io/nvidia-docker/gpgkey | \ sudo apt-key add -distribution=$(....
2019-10-15 15:13:43
578
原创 golang语法学习
1https://leetcode.com/problems/two-sum/二重循环func twoSum(nums []int, target int) []int { for i := 1; i < len(nums); i++ { for j := 0; j < i; j++ { if nums[i]+nums[j] == target { ret...
2019-10-15 14:49:20
256
原创 将用户添加为docker用户
sudo groupadd docker #添加docker用户组sudo gpasswd -a $USER docker #将登陆用户加入到docker用户组中newgrp docker #更新用户组
2019-10-15 14:48:42
347
原创 记一次装机
记一次装机，各种折腾请看官莫笑文章目录装机装系统装机配件配置CPUAMD R5 2600x主板华硕x370内存威龙 8g *2硬盘闪迪 500g sata显卡1070ti电源650w总共6000不到，配置的话处理一些计算任务以及平时在工位上使用还是比较合适的。最后悔的是没有买m2接口的固态，如果以后有力气再折腾。记录一下装...
2019-10-14 21:42:46
313
原创 重构同事代码
1. 减少循环层数修改前 FeatureFlat_Euc = np.zeros([len(Bins_Euc) - 1, len(ProEleList) * len(LigEleList)], float) FeatureFlat_Ele = np.zeros([len(Bins_Ele) - 1, len(ProEleList) * len(LigEleList)], flo...
2019-10-12 15:52:39
291
原创 git push时免密码
转载：https://www.cnblogs.com/zhangtao1990/p/8855643.html最近开发的时候用的仓对ssh是只读的，虽然添加了公钥，但是只能免密pull不能免密push，很难受但用了上面链接的方法后，解决了。原文：在本地克隆下来的git仓库中找到 .git 目录 （.git 目录是隐藏文件夹 在组织->文件夹和搜索选项-> 查看选项卡 ->...
2019-10-12 14:08:48
267
原创 归一化对MLP的影响
以波士顿房价数据为例# 波士顿房价数据from keras.datasets import boston_housing(x_train, y_train), (x_test, y_test)=boston_housing.load_data()如果不归一化，数据的基本统计量：随便建一个MLPdef keras_r2(y_true,y_pred): y_mean=K.mea...
2019-10-11 10:23:52
1500
原创 数据分析与数据可视化代码块
文章目录numpy特征归一化min_max归一化standardlizationpandas列出DataFrame常用统计量基于树的模型基于树的模型能剥啄复杂的非线性关系并提供高精度和稳定性，有随机森林与梯度提升两类非树模型太难了numpy特征归一化min_max归一化def rescale(feature): ans = feature.copy() ...
2019-10-11 10:12:57
252
原创 神经网络中间层数据可视化
#%%from sklearn.decomposition import PCAimport keras.backend as Kimport numpy as npfrom keras.layers import Dense, Activation, advanced_activations,Dropoutfrom keras.metrics import mean_absolute_...
2019-10-10 11:12:22
679
原创 scala语法
var x=if(true){1}else{2} for(x <- 1 until 10 if x !=8;y<-1 to 10 if y!=8 ;if x+y!=8){ println(x,y) } var list=List(1,2,3,4,5,6) for(l<-list){ println(l) } ...
2019-10-09 23:16:34
225
原创 解决Python中multiprocessing只能在Top-level的代码环境中执行的问题
文章目录1.问题背景1.1 click终端交互结构1.2 关于Top level script environment1.3 multiprocessing只能在Top-level的代码环境中执行2. 问题解决2.1 通过在PYTHONPATH中设置新地址，并重新导入模块来解决1.问题背景在scorefunc开发中，我用click模块来组织其整个项目的目录结构和终端交互的结构。但是，被clic...
2019-10-07 14:26:03
360
原创 Python并发编程
multiproccessingimport multiprocessing as mpcount = 0def job(id): global count count += 1 print(f'job {id}, {count}')pool = mp.Pool(4)for i in range(100): pool.apply_async(jo...
2019-10-07 13:24:42
277
原创 keras自定义函数
metrics从网上瞎找了个代码改过来的，然后看了看from sklearn.metrics import r2_score的代码，和我的一样，放心了。import keras.backend as Kdef keras_r2(y_true,y_pred): y_mean=K.mean(y_true) # ssreg=K.sum((y_pred-y_mean)**2) ...
2019-10-06 23:26:23
677
原创 MapReduce的reduce端join
参考了一个博客：https://www.liangzl.com/get-article-detail-131008.html做法是建一个writable的bean，用来装载值对于不同类型的表，通过FileInputFormat.setInputPaths(job,input);方法读取一批文件，根据文件名来判断是哪个表。JoinBeanimport org.apache.hadoop....
2019-10-05 00:12:36
213
原创 只有map没有reduce的情况：where查询
package com.job;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.map...
2019-10-04 13:42:07
1034
原创 MapReduce WordCount
我的实现import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWri...
2019-10-04 13:27:47
224
原创 haoop下运行程序时出现错误：Hadoop HDFS Wrong FS: hdfs:/ expected file:///
原代码 Path output = new Path(args[1]); FileSystem fs = FileSystem.get(conf); if (fs.exists(output)) { fs.delete(output, true); }修改后 Path output = ne...
2019-10-04 13:20:12
540
原创 给centos的阿里云安装Hadoop
安装Java8https://blog.csdn.net/zdxxinlang/article/details/84616438修改/usr/local/hadoop/etc/hadoop/hadoop-env.shexport JAVA_HOME="/usr/lib/jvm/java-1.8.0-openjdk"修改/usr/local/hadoop/etc/hadoop/yarn-s...
2019-10-03 15:34:51
243
原创 THE DOCKER BOOK 读书笔记
docker依赖于写时复制（copy on write）模型。通过start命令重新启动一个容器。log -f 命令监控Docker日志，-t加上时间戳exec有守护式(-d)和交互式(-it)两种执行方式自动重启容器(–restart):always:on-failure:在退出代码非0时重启on-failure:5 :在退出代码非0时重启，最多重启5次.dockerignore...
2019-10-02 12:57:34
241
原创 链表，链状结构
文章目录61. Rotate List61. Rotate Listhttps://leetcode.com/problems/rotate-list/除了AC以外，还实现了一些链表的方法，如fromArray， toString等public class Main { public static void main(String[] args) { ListNod...
2019-10-02 01:11:39
349
原创 二分
74. Search a 2D Matrixcpp#include <bits/stdc++.h>#define FF(a, b) for(int a=0;a<b;a++)#define F(a, b) for(int a=1;a<=b;a++)#define LEN 100#define INF 1000000#define bug(x) cout&l...
2019-10-01 12:09:19
229
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人