- 博客(5)
- 收藏
- 关注
翻译 大数据-zookeeper
安装zookeeper (1).解压安装包,修改zookeeper-3.4.10/conf 将zoo_sample.cfg修改为zoo.cfg vim zoo.cfg修改dataDir路径dataDir=/opt/module/zookeeper-3.4.10/zkData(数据文件目录+数据持久化路径,保存 Zookeeper中的数据) 新增server.0=hadoop100:2888:...
2020-07-07 23:28:39 173
翻译 hadoop-MapReduce
1.MapRedce 是一个分布式运行框架 优点:简单的实现一些接口就可以完成分布式程序 高容错性:一天机器挂掉,会迁移到另一台机器。处理数据量大缺点:慢 不擅长实时计算 不擅长流式计算(spark解决了) ,不擅长DAG(有向图)计算2.MapReduce核心编程思想...
2020-06-14 13:07:31 208
转载 java实现http/https请求
最近有个功能是用java爬去大量url信息。网上找了个code了一段代码,拿来直接可以用,但是打包到jdk1.7上报407没有权限,于是手动添加了 String headerkey = "Proxy-Authorization"; String headerValue = "Basic "+Base64.encodeToString("*****:*****".getBytes(), false); //帐号密码用:隔开,base64加密方式 ...
2020-06-05 07:41:07 1616
翻译 大数据学习-搭建集群
16年毕业到现在为止干了四年多的Java。盲目的跳槽,并没有对自己的职业精心规划。自己感觉是把两年的工作经验用了四年。近期工作一直用到大数据方面的东西。想转大数据。网上找了套视频自己学习学习。搭建集群1.安装VMTools 安装Centoss2.关闭防火墙 sudo service iptables stop sudo chkconfig iptables off3.设置静态IPvim /etc/sysconfig/network-scripts/ifcfg-et...
2020-05-28 23:33:55 212
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人