chrome自动代理检测(这玩意并没什么用,还会影响你访问某些网页)

啊,正常情况下,浏览一个网站是直接连上就行了。IE的代理自动检测就是每次都帮你找到一个代理服务器去上这个网站。如果你浏览的网站支持这种机制,有链接速度超快的代理服务器提供给你让你用,那网页加载的速度也会变快。然而目测好像这个IE的机制并没有什么卵用,它找不到好的代理服务器。 ...

2019-04-23 14:39:42

阅读数 178

评论数 0

日记---2019.3.11

上午经历了短暂的情绪低潮和一些工作之后 下午可以继续学习了。 打算把学习部署和平安的事情 拖到明天上午再解决, 下午我只想好好学习。

2019-03-11 14:35:34

阅读数 45

评论数 0

14场分析

核心思路:永远别想占到狗庄的便宜。。。 1.切尔西 vs 狼队 切尔西最近状态大勇,最近4个主场均完成零封。 最近5场比赛4胜1平,状态极其稳定。 错误点:分析错了热门方,切尔西 实力更强/状态更好/坐镇主场,天时地利人和,很容易受热。 忽略点:狼队的实力,就他妈擅长防反,防守体系吊的一...

2019-03-11 11:19:09

阅读数 161

评论数 0

物理机ping不通虚拟机

两边的防火墙都关了, 在Linux下输入ifconfig,此时查看不到IP。 接下来执行vi/etc/sysconfig/network-scripts/ifcfg-eth0,在初始配置的基础上加了: DEVICE=eth0 ONBOOT=yes BOOTPROTO=static IPAD...

2019-03-06 17:13:30

阅读数 91

评论数 0

解决Linux系统下,出现“不在sudoers文件中,此事将被报告”的问题

解决Linux系统下,出现“不在sudoers文件中,此事将被报告”的问题 2018年12月28日 16:00:39 sinat_39589027 阅读数:230 我在安装VMware Tools工具时,会提示:不在sudoers文件中,此事将被报告。是因为当前操作用户的权限不足,而root用...

2019-02-24 11:27:29

阅读数 121

评论数 0

org.apache.spark.sql.AnalysisException: Table or view not found: `traintext`.`train`; line 1 pos 14;

org.apache.spark.sql.AnalysisException: Table or view not found: `traintext`.`train`; line 1 pos 14; 2017年09月20日 16:29:27 pan_haufei 阅读数:5765 恭喜老铁,...

2019-02-13 17:45:18

阅读数 570

评论数 1

E: Unable to lock the administration directory (/var/lib/dpkg/), is another process using it?

E: Unable to lock the administration directory (/var/lib/dpkg/), is another process using it? 刚开始试了如下两个: sudo rm /var/cache/apt/archives/lock sudo...

2019-01-09 16:50:31

阅读数 61

评论数 0

spark RDD内容总结(适用于复杂的结构)

1.RDD Checkpointing和RDD cache/persist的区别? 相同点:都需要手动调用方法来保存结果,为了避免前面所做的计算工作丢失 ,需要把RDD存到缓存或者checkpoint里。   存放目录的区别 是否自动清除? Checkpointing:自己设置...

2019-01-05 16:24:04

阅读数 214

评论数 0

spark基础

查看hdfs文件分块 hdfs dfs -mkdir -p  /events/data hdfs dfs -put  /xxx/xx/3.csv(本地目录)   /events/data(hdfs目录) hdfs fsck /events/data/events.csv -files -bl...

2018-12-27 17:49:01

阅读数 89

评论数 0

面试时如何从一篇文章里找到正好出现100次的那个单词?

找到大于100的单词更简单,加一个filter,x._2表示第二个元素大于5,即出现超过5次的。 scala> val wc = sc.textFile("file:///home/liugen/3.txt").flatMap(line=...

2018-12-24 17:14:27

阅读数 79

评论数 0

spark启动报错排查!!!(花了三个小时终于解决,解决之后感觉很爽很有成就感)

今天午饭推迟了半个小时才去吃,就搞这个来着,搞完了轻松了,吃饭都香。 spark的目录有一个问题,忘记说了,spark里面的用户莫名其妙叫什么500,权限根本不属于我 ,报错里没看出来这一点。 我得把整个spark目录的拥有者先变成我自己 sudo chown -R liugen:liug...

2018-12-21 12:22:40

阅读数 613

评论数 0

scala中Array、List、Tuple异同

scala中Array、List、Tuple异同 https://blog.csdn.net/baidu_35570545/article/details/77893421 2017年09月08日 13:12:59 水yu月 阅读数:422 标签: scala 更多 个人分类: scala ...

2018-12-11 11:12:22

阅读数 59

评论数 0

scala中的object 和java的class有什么区别?

用自己的话简单说就是: scala没有静态方法和静态字段,通过object来实现 对象名直接调用方法。 形如Array.toString   眼见为实,在网上看到一个例子,动手操作之后我是这么理解的。 ApplyExample.main(null) 运行主类 Class和Object同...

2018-12-11 06:09:34

阅读数 380

评论数 0

Java代码通过API操作HBase的最佳实践

    https://www.cnblogs.com/sixiweb/p/3669069.html   Java代码通过API操作HBase的最佳实践 HBase提供了丰富的API。这使得用Java连接HBase非常方便。 有时候大家会使用HTable table=new HTabl...

2018-12-08 14:48:08

阅读数 34

评论数 0

HBase重要练习(二)通过HBase API进行开发

逻辑我看了,很简单,但是要熟练,至少每个粒子要从头到尾做3遍确认自己清楚每个细节。这个后面再做。       原文地址:https://www.cnblogs.com/netbloomy/p/6683509.html   通过HBase API进行开发   一、将HBase的jar...

2018-12-08 14:46:51

阅读数 44

评论数 0

HBase shell练习

首先初始化hadoop  namenode,namenode负责管理集群的命名空间和元数据。 hadoop namenode -format 初始化主要完成如下事情: 1.初始化各个重要成员变量(包括rpc服务器等),初始化FSNamesystem(加载FMImage文件) 2.创建和启动...

2018-12-08 12:14:51

阅读数 98

评论数 0

hbase环境变量配置及启动

之前配置环境变量一直出问题是因为, 我总把$HBASE_HOME/bin写在其他$HIVE_HOME/bin的后面, 原来它是单独写一行才会生效。    设置环境变量 1. 使用sudo vi /etc/profile命令修改系统环境变量 export HBASE_HOME=/app/...

2018-12-07 17:23:17

阅读数 1160

评论数 0

hbase启动后HMaster迅速挂掉的问题(遇到问题学会看日志,发那些表面的报错纯属耽误时间)

首先打开hbase/logs目录下的xxxx.xxxx. master.log的日志 拉到最后是最新一次的报错。 如下异常 java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync fo...

2018-12-07 16:38:15

阅读数 167

评论数 0

Hive面试题思路总结(一)

几个hive面试题,总是写不上来,看过两遍还是不会,还是写不出来,进一步说明了,写代码真的需要很疯狂的写才可能比较熟悉。   不过好在,现在基本都有思路了,简单总结一下。 https://www.cnblogs.com/qingyunzong/p/8747656.html#_label0_0...

2018-12-07 15:02:48

阅读数 119

评论数 0

MapReduce排查错误日志方法

初学者运行MapReduce作业时,经常会遇到各种错误,由于缺乏经验,往往不知所云,一般直接将终端打印的错误贴到搜索引擎上查找,以借鉴前人的经验。然而,对于hadoop而言,当遇到错误时,第一时间应是查看日志,日志里通产会有详细的错误原因提示,本文将总结Hadoop MapReduce日志存放位置...

2018-12-06 15:39:17

阅读数 679

评论数 0

提示
确定要删除当前文章?
取消 删除