- 博客(12)
- 收藏
- 关注
原创 使用selenium动态爬取
支持动态爬取,如登录、Javascript内容。 一、准备: 1、下载selenium(如:selenium-java-2.37.0.zip,约24MB),chromedriver.exe(chromedriver_win32.zip,约2.4MB) https://sites.google.com/a/chromium.org/chromedriver/downloads 2
2015-09-25 11:11:17 1540
转载 R语言连接Mysql数据库的步骤及简单使用mysql数据库中的数据
见:http://www.dataguru.cn/thread-289411-1-1.html 注:64位系统要用64位ODBC驱程才行。
2015-09-16 16:26:07 607
原创 数据库连接、批量插入
insert(批量插入) public static void insertValue(Connection conn, List transList) { String sql = "insert into bank_trans (" + "no, trans_dt, rec_dt, trans_currency, trans_status, trans_income, t
2015-09-16 09:20:23 661
原创 jar 独立运行文件制作(于windows平台)
实例如下: CrawlTrans.java package bank; ... public class CrawlTrans { ... public static void main(String[] args) { ... META-INF/MANIFEST.MF Manifest-Version: 1.0 Main-Class: bank.CrawlTrans
2015-09-16 09:04:11 1271
原创 MySQL导入中文乱码解决之道
数据库中文乱码一直是烦人的问题,网上解决方法很多,但各有出入,而且有人灵有人不灵。对于MySQL,我的解决方法如下: 1)改MySQL配置: 如:D:\Program Files\MySQL\MySQL Server 5.6\my.ini(copy from my-default.ini) [mysql] default-character-set = utf8 2)进入MyS
2015-09-13 10:50:09 6243 1
转载 Virtualbox中Linux添加一个新磁盘
空间不足就需要添加一个新磁盘,详见 http://blog.itpub.net/26686207/viewspace-758434/ 另,一般来说不建议多个分区挂载到同一个目录(见 http://zhidao.baidu.com/link?url=MI_tIlRuuqxoztKktDa_GVI2HzeawdT7uz5_fJYP54jc6QlbIBaQ-QWK0u9ngdbFqLuqnlC
2015-09-10 15:24:22 402
原创 Linux下安装MySql(版本5.5以上)
开始使用未编译版本(参考:http://www.iteye.com/topic/1128407,注:MySQL5.5以上,安装方法与以前的不同),结果麻烦多多,错误多多。后改用已编译版,方便多了。详细如下: 从这里下载:http://dev.mysql.com/get/Downloads/MySQL-5.6/mysql-5.6.26-linux-glibc2.5-x86_64.tar.gz
2015-09-09 15:22:03 2055
原创 virtualbox增强功能-VBoxGuestAdditions安装
本来想写”通过virtualbox实现共享目录“,但想不到其中用到的VBoxGuestAdditions搞了我一天~~~,因些单独拿出来写。 一、准备virtualbox增强功能 默认安装virtualbox时就已经有增强功能的iso,e.g. D:\Program Files\VirtualBox\VBoxGuestAdditions.iso 如还是没有可以去官网另外下载,e
2015-09-08 17:20:42 16155
原创 PySpark in PyCharm on a remote server
Q: sudo: sorry, you must have a tty to run sudo A: cd /etc chmod 640 sudoers vi /etc/sudoers #Default requiretty #注释掉 Default requiretty 一行。意思就是sudo默认需要tty终端,注释掉就可以在后台执行了。 Q: VirtualBox的Sha
2015-09-07 17:59:17 1762
原创 Install Python 2/3 on CentOS 6.5 Server
参考: http://www.shayanderson.com/linux/install-python-3-on-centos-6-server.htm 另也可获取源: wget http://www.python.org/ftp/python/3.3.3/Python-3.3.3.tar.xz 先 xz -d xxx.tar.xz 将 xxx.tar.xz解压成 xxx.t
2015-09-06 16:05:29 1055
原创 折腾sparkR
记下些参考,留待有缘人~~~ yum -y install libcurl libcurl-devel yum -y install libxml2 libxml2-devel install.packages('RCurl') wget http://repos.fedorapeople.org/repos/dchen/apache-maven/epel-apac
2015-09-01 09:04:13 571
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人