自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

上海菁数信息技术

专注于大数据开发 (spark hadoop hive hbase )

  • 博客(3)
  • 资源 (3)
  • 问答 (1)
  • 收藏
  • 关注

原创 更改pip源pypi为国内源(清华大学),没有.pip(即linux ubuntu python pip 换源方法教程)

最新推荐方案:pypi 镜像使用帮助pypi 镜像每 5 分钟同步一次。临时使用pip install -i https://pypi.tuna.tsinghua.edu.cn/simple some-package注意,simple不能少, 是https而不是http设为默认升级 pip 到最新的版本 (>=10.0.0) 后进行配置:pip ...

2016-11-25 15:03:01 22653

原创 spark 2.0.2 出现各种未知问题 不支持scala的最新版

spark 只支持scala 2.11.x,没有+这个符号,高了低了都无法使用。

2016-11-25 08:46:41 3444

原创 (待完成)使用sqoop将mysql中的数据导入HDFS中,含sqoop配置与安装

hadoop提供了shell命令与java api接口来上传文件到HDFS中 本地的文件和文件直接使用shell命令就可以了 将数据库中的数据导入HDFS,需要调用使用sqoop工具,本质也是调用了HDFS提供的java api,并做了很多包括并行在内的很多优化。

2016-11-17 16:44:27 575

qt-unified-windows-x86-4.1.1-online.exe

qt6开源版本的win安装包

2021-08-03

spark 2.3.1 支持Hive Yarn Hadoop 2.7 已编译版本

spark 2.3.1 支持Hive Yarn Hadoop 2.7 已编译版本 可以直接使用

2018-07-27

python3 使用 thrift 操作hbase 安装hbase-thirft后有一个Hbase报错

python3 使用 thrift 操作hbase 安装hbase-thirft后有一个Hbase报错 使用这个修改完成的Hbase类替换掉原来的Hbase类问题全部解决 主要是因为python版本兼容性带来的问题

2017-11-16

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除