- 博客(88)
- 资源 (2)
- 收藏
- 关注
原创 Spark各种问题集锦[持续更新]
1、Initial job has not accepted any resources16/08/13 17:05:42 INFO TaskSchedulerImpl: Adding task set 0.0 with 2 tasks16/08/13 17:05:57 WARN TaskSchedulerImpl: Initial job has not accepted any re
2016-08-13 21:04:15
15018
原创 使用Shell编写定时向指定API获取数据的脚本
场景:这个在服务器上写定时脚本的情况非常多,比如每天向定时往用户推送相关信息,定时清理相关数据,定时邮件提醒等等。本文的场景是采用shell定时向指定开放API获取数据。
2016-08-13 09:09:35
8269
原创 Host '***' is not allowed to connect to this MySQL server"
默认情况下,root仅仅允许从localhost和127.0.0.1登录到MySQL
2016-07-31 21:43:54
3725
原创 在Ubuntu上使用LVM对ROOT进行在线扩容
在Ubuntu上使用LVM对ROOT进行在线扩容,前提是,在安装ubuntu的时候,是使用LVM进行分区管理的
2016-07-29 09:59:26
5854
原创 Spark对HDFS上json数据的简单操作
Spark对HDFS上json数据的操作非常方便,本文以两种方式进行简单介绍,分别为Spark Shell 和 编写Scala应用程序。
2016-07-25 11:05:54
11773
原创 使用JAVA连接HBase时查询数据时,无限等待问题
代码就不贴了,直接上打印出来的log情况。以下是log,然后一直等待,没有结果16/07/21 09:22:36 INFO zookeeper.ZooKeeperWrapper: Reconnecting to zookeeper16/07/21 09:22:36 INFO zookeeper.ZooKeeper: Client environment:zookeeper.version=3.4.
2016-07-21 11:15:09
7500
1
原创 搭建大数据处理集群(Hadoop,Spark,Hbase)
搭建Hadoop集群配置每台机器的 /etc/hosts保证每台机器之间可以互访。 120.94.158.190 master 120.94.158.191 secondMaster1、创建hadoop用户 先创建hadoop组 sudo addgroup hadoop 然后再建一个hadoop用户加入到hadoop组,(前一个为组,后一个为用户)
2016-07-18 11:08:14
3489
原创 剑指Offer--二叉树的下一个节点
给定一个二叉树和其中的一个结点,请找出中序遍历顺序的下一个结点并且返回。注意,树中的结点不仅包含左右子结点,同时包含指向父结点的指针。
2015-11-08 22:11:21
1204
原创 剑指Offer--二叉树的深度
题目描述输入一棵二叉树,求该树的深度。从根结点到叶结点依次经过的结点(含根、叶结点)形成树的一条路径,最长路径的长度为树的深度。
2015-10-23 22:57:42
491
原创 剑指Offer--第一个只出现一次的字符位置
题目描述在一个字符串(1<=字符串长度<=10000)中找到第一个只出现一次的字符的位置。若为空串,返回-1。位置索引从0开始。
2015-10-23 22:47:47
455
原创 剑指Offer--二叉树中和为某一值的路径
输入二叉树和一个整数,打印出二叉树中结点值的和为输入整数的所有路径。路径定义为从树的根结点开始往下一直到叶结点所经过的结点形成一条路径。
2015-10-18 23:20:58
418
翻译 Hibernate学习之架构
Hibernate的分层使得你从必须知道相应的APIs中解脱出来。Hibernate使用数据库和配置文件来提供持久化服务。
2015-07-29 22:03:53
462
翻译 Hibernate学习之概述
概述Hibernate是一个JAVA的对象关系映射(ORM)解决方案,由Gavin King在2001年创建的持久化框架。对于任意的JAVA应用程序,它是一个强大的、高性能的对象关系持久化查询服务。 Hibernate把JAVA类映射成数据库表,从JAVA数据类型转换成SQL数据类型,在数据持久化相关编程任务中,给开发者减少了95%的工作。 Hibernate位于传统的JAVA对象和数据库服务之
2015-07-29 11:45:02
566
原创 HttpClient设置代理
在做爬虫抓取网站数据时,通常可能会遇到一个问题,那就是服务器对访问IP做了一定的限制,比如限制单位时间内的访问次数等。这个时候,我们可以使用代理的方式进行解决。
2015-07-28 15:29:58
1862
原创 2014阿里巴巴校招在线笔试题(数据研发工程师岗位)之二叉树
写一个函数,输入一个二叉树,树中每个节点存放了一个整数值,函数返回这棵二叉树中相差最大的两个节点间的差值绝对值。请注意程序效率。
2015-03-29 21:28:32
1224
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅