数据之路-忆梦前程

每天进步点滴，已祭奠昨天的自己。

原 scala函数

好久没动过博客可，冒个泡，表示还存在。。。。scala&gt; def f1(a:Int)(b:Int): Int = { | var c=a+2 | c+b | }f1: (a: Int)(b: Int)Intsca...

2018-06-25 22:28:03

阅读数：18

评论数：0

转 spark提交java程序异常

错误 Exception in thread "main" java.lang.SecurityException: Invalid signature file digest for Manifest main attributes scala的jar包没任何...

2017-09-07 15:23:11

阅读数：197

评论数：0

原 spark提交任务java.nio.channels.ClosedChannelException

1.提交任务 ./spark-submit --master "yarn" --driver-memory 1g --executor-memory 1g --class KeyCount /root/IdeaProjects/SparkApp/out/artifacts/S...

2017-08-25 15:57:44

阅读数：10253

评论数：0

原 Spark java.lang.NoSuchMethodError: scala.Predef$.refArrayOps

1.问题 2. spark运行的scala版本是有限制提示 with scala 2.10 support 下载对应版本的scala，然后重新编译jar包

2017-08-22 16:52:45

阅读数：545

评论数：0

原 python requests指定出口ip

爬虫需要，一个机器多个口，一个口多个ip，为轮询这些ip demo #coding=utf-8 import requests,sys,socket from requests_toolbelt.adapters import source reload(sys) sys.setdef...

2017-08-11 17:16:29

阅读数：1097

评论数：0

原 ROS Mikrotik PCC配置记录

两条为例： ip firewall mangle add action=mark-connection chain=prerouting comment=pcc1 dst-address-type=!local new-connection-mark=pcc1 per-connection-c...

2017-08-11 11:46:18

阅读数：204

评论数：0

原 pptp iptables snat记录

iptables # Generated by iptables-save v1.4.7 on Fri May 12 18:26:39 2017 *nat :PREROUTING ACCEPT [305:30920] :POSTROUTING ACCEPT [5:412] :OUTPUT...

2017-06-21 13:45:39

阅读数：167

评论数：0

原 iptables snat 记录

iptables # Generated by iptables-save v1.4.7 on Mon Jun 19 11:02:25 2017 *security :INPUT ACCEPT [428:39712] :FORWARD ACCEPT [62:5208] :OUTPUT ACCE...

2017-06-19 12:27:05

阅读数：297

评论数：0

原关于ipv6的笔记

用途阿里云放IOS app的服务器端信息或者ipv6 server的需要隧道服务 https://tunnelbroker.net/ 配置服务器 net.ipv6.conf.all.disable_ipv6 = 0 net.ipv6.conf.default.d...

2017-05-31 16:13:51

阅读数：272

评论数：0

原 linux用tc限速

tc qdisc add dev eth0 root tbf rate 1Mbit latency 50ms burst 10000 mpu 64 mtu 150000

2016-09-30 11:09:32

阅读数：655

评论数：0

原 oracle 倒出csv

/opt/sh/sqluldr2_linux64_10204.bin user=user/pass@services query="select * from table_name" file=/opt/csv/csv_name.csv charset=ZHS16GBK fie...

2016-09-28 14:22:55

阅读数：263

评论数：0

原 OpenStack

记录一个OpenStack的bug 启动实例的时候会报出500错误，启动实例命令 nova boot --flavor 1 --key_name demo-key --image d7057028-a498-4576-86b4-e6aef50dab69 test1 日志路径/var/...

2016-07-15 17:26:05

阅读数：584

评论数：0

原 tomcat enable ssl

创建key keytool -genkey -alias wsria -keyalg RSA -keystore /usr/src/apache-tomcat-7.0.68/conf/mykey 导出key keytool -export -file /usr/src/apache-...

2016-03-02 15:59:51

阅读数：257

评论数：0

原 pptp VPN配置

安装pptp yum -y install pptpd 配置pptp cat /etc/pptp.conf localip 192.168.1.1 remoteip 192.168.1.2-100 启动pptp /etc/init.d/pptpd start ...

2016-03-02 14:56:38

阅读数：713

评论数：0

原 socket服务需要注意这两个头文件

#include #include 会出莫名其妙的没定义大小的结构体，端口转换成int时出现段错误等等。

2016-03-01 17:04:36

阅读数：273

评论数：0

原 Linux IPsec点到点配置

linux点到点vpn ipsec配置 Juniper netscreen interop Juniper end point: set ike gateway "GW-01" address Main outgoing-zone "V1-Untrust&q...

2016-02-29 12:23:16

阅读数：2568

评论数：0

原 ActiveMQ动态发现集群

1.配置 vim /usr/local/activemq1/conf/activemq.xml 找到broker元素的配置，然后修改brokeName集群中不要重复然后在transportConnectors 元素前边加上 ...

2016-01-26 15:21:39

阅读数：1692

评论数：0

原 ActiveMQ静态发现集群

1.配置编辑MQ的主配置文件 vim /usr/local/activemq1/conf/activemq.xml 找到broker元素的配置，然后修改brokeName集群中不要重复然后在transportConnectors 元素前边加上注意：...

2016-01-25 13:58:15

阅读数：1422

评论数：0

原 iptables限制某个端口的连接数

iptables限制某个ip或者某组ip的连接数测试规则如下： # Firewall configuration written by system-config-firewall # Manual customization of this file is not recommend...

2015-07-13 10:42:29

阅读数：2300

评论数：0

原关于Heartbeat-3-0安装错误

由于Heartbeat-3-0改变较大，安装一路坎坎坷坷，经过认真的观测和细心的琢磨，最终还是采用了消极的解决方法Heartbeat有主和备两台系统一模一样安装的，但是主在Heartbeat bootstrap的时候总是过不去错误如下./bootstrapAutoconf package ...

2015-07-01 11:32:40

阅读数：880

评论数：3

提示

确定要删除当前文章？

取消删除