Mac使用gitbook创建电子书

  摘要:gitbook是开源书籍的平台,公司目前的一些开发文档,还有使用文档都是使用gitbook管理,用起来很方便,所以这里分享一下创建方法安装gitbook安装npm从https://nodejs.org/#download下载安装node.js安装成功之后打开终端输入npm-v显示如下:...

2018-12-01 20:28:14

阅读数 86

评论数 0

sparkstreaming kafka010

SparkStreaming消费kafka数据 兴趣e族关注0人评论40人阅读2018-10-31 17:05:04 概要:本例子为SparkStreaming消费kafka消息的例子,实现的功能是将数据实时的进行抽取、过滤、转换,然后存储到HDFS中。 实例代码 package c...

2018-11-10 10:32:39

阅读数 203

评论数 0

JDK版本任意切换

终端输入:/usr/libexec/java_home -V 查看2个版本最终安装目录: JDK 1.7:/Library/Java/JavaVirtualMachines/jdk1.7.0_80.jdk/Contents/Home JDK 1.8:/Library/Java/JavaVirtua...

2018-10-24 14:40:31

阅读数 29

评论数 0

spark1.63升级到spark2.3.1环境变量配置

由于spark2.3需要jdk1.8的支持,因此spark-submit与spark-sql需要指定jdk版本,具体方式见测试用例 1.修改个人用户配置文件.bashrc ,注释以前的spark环境与java环境,添加 vi ~/.bashrc #export SPARK_HOME=...

2018-10-23 21:21:15

阅读数 277

评论数 0

搭建Spark源码研读和代码调试的开发环境

  转载自https://github.com/linbojin/spark-notes/blob/master/ide-setup.md 搭建Spark源码研读和代码调试的开发环境 工欲善其事,必先利其器,第一篇笔记介绍如何搭建源码研读和代码调试的开发环境。 一些必要的开发工具,请自行提前...

2018-10-23 20:06:07

阅读数 83

评论数 0

Cannot find JRE '1.7'. You can specify JRE to run maven goals in Settings

这个问题通过网上找的下面的两个地方改正后依然不行。 还得改一个地方:     这个问题我遇到的时候很头疼,知道问题在那里,很多百度说改tomcat,他们说的不错,或许有那部分原因,可惜我的那个很久之前就改好。 其实就两个地方要改正:       如果打包还不行就直接用...

2018-10-23 19:08:59

阅读数 469

评论数 0

spark2.3.1+jdk1.8向下兼容1.7(生产机器为jdk1.7)

1、打包 <dependency> <groupId>org.apache.spark</groupId> <artifac...

2018-10-23 16:22:29

阅读数 403

评论数 0

spark运行时出现错误Caused by: java.lang.ClassNotFoundException: org.apache.spark.rdd.RDD

原因:自己在pom文件中加入  <scope>provided</scope> 此标签表示编译环境可用,运行时则不可用,主要是在 打包时不将这些依赖打进来,因为服务器上有,以免包过大 解决方案:本地运行...

2018-10-23 16:15:22

阅读数 1232

评论数 0

给孩子积极心理暗示的语句实操

1、场景:摔倒      积极暗示:摔跤没什么大不了,自己应该勇敢地爬起来 2、场景:发呆      积极暗示:我的孩子不是在发呆,而是在沉思,在想问题,他将来一定是一位了不起的大学教授 3、场景:装扮      积极暗示:真像大博士 4、场景:在别人面前当着孩子面夸孩子      ...

2018-10-07 23:01:13

阅读数 245

评论数 0

kylin详细介绍

OLAP(on-Line AnalysisProcessing)的实现方式 ROLAP: 基于关系数据库的OLAP实现(Relational OLAP)。ROLAP将多维数据库的多维结构划分为两类表:一类是事实表,用来存储数据和维关键字;另一类是维表,即对每个维至少使用一个表来存放维的层次、成员...

2018-09-30 11:12:12

阅读数 1011

评论数 0

kylin cube构建详解

 在使用Kylin的时候,最重要的一步就是创建cube的模型定义,即指定度量和维度以及一些附加信息,然后对cube进行build,当然我们也可以根据原始表中的某一个string字段(这个字段的格式必须是日期格式,表示日期的含义)设定分区字段,这样一个cube就可以进行多次build,每一次的bui...

2018-09-30 10:50:07

阅读数 53

评论数 0

kylincube分析

在本篇博客中,我将给大家带来关于Kylin的Cube方面的分析,其中包括如何去查看Cube中Cuboid统计信息,Cube大小等,但是不涉及Cube方面的优化。如果对Cube优化比较感兴趣的话,可以去查阅我之前写的关于Cube优化的文章。   1.      Cuboid,Cube和Segme...

2018-09-30 10:21:22

阅读数 46

评论数 0

Kylin增量cube build的restAPI的时间不准确的BUG

Kylin1.6增量cube build的restAPI的时间不准确的bug: 描述:使用restAPI:curl -X PUT -u "ADMIN:KYLIN" -H "Content-Type:application/json;chars...

2018-09-30 10:10:07

阅读数 90

评论数 0

读书笔记-读书计划

随着年龄的增长,工作年限的增长,越发觉着自己需要补充更多的能量,补充更多的知识,在谈吐、在见识上能别具一格,心中的好奇心也不断指引着自己去探索人类历史各个阶段积累的思想精华,经济、心里、哲学、历史,心中有一个声音一直在说:“这辈子如果不能系统的了解这些人类积淀的文化思想,岂不是白白走这一遭”。  ...

2018-08-31 16:39:09

阅读数 148

评论数 0

在IDEA中调试运行Spark SQL

  2016年08月04日 11:07:35 阅读数:4630 昨晚想通过调试的方式阅读一下Spark SQL的源码, 用spark-sql命令行需要跨进程调试,太麻烦,于是尝试了一下在IDEA中运行和调试. 结果不出所料,虽然最终可以在IDEA中成功运行了,不过中间还是遇到了不少问题,在...

2018-07-27 11:30:29

阅读数 488

评论数 0

spark常见错误汇总

原文地址:https://my.oschina.net/tearsky/blog/629201 摘要:   1、Operation category READ is not supported in state standby   2、配置spark.deploy.recoveryMode选...

2018-07-27 11:28:35

阅读数 1295

评论数 0

Spark 下操作 HBase(1.0.0 新 API)

Spark 下操作 HBase(1.0.0 新 API) HBase经过七年发展,终于在今年2月底,发布了 1.0.0 版本。这个版本提供了一些让人激动的功能,并且,在不牺牲稳定性的前提下,引入了新的API。虽然 1.0.0 兼容旧版本的 API,不过还是应该尽早地来熟悉下新版API。并且了解下...

2018-07-23 21:03:16

阅读数 64

评论数 0

解决scala - Object apache is not a member of package org - ...

  Rebuild Project

2018-07-20 19:58:43

阅读数 2154

评论数 0

IntelliJ IDEA如何运行单个程序?

IntelliJ IDEA如何运行单个程序?目前在使用IDEA学习JAVA,遇到了一个奇怪的问题,我想运行当前单个程序,但是运行完总是弹出其他程序的错误,这怎么解决? 好像IDEA每次运行程序都是…显示全部关注者45被浏览22,641关注问题写回答​2 条评论​分享​邀请回答​举报​9 个回答默认...

2018-07-09 15:00:44

阅读数 2546

评论数 0

IDEA总是提示Cannot resolve symbol

最近在学习Spring,已经导入了所有需要的包,还是一直报Cannot resolve symbol 百度后发现几种方法: 1.File->Invalidate Caches/Restart 清除缓存重启 2.maven -> Reinport、 3.电...

2018-07-09 14:42:48

阅读数 1881

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭