大数据
hnmpf
这个作者很懒,什么都没留下…
展开
-
SpringBoot 基于Aspect实现多数据源,支持hive数据源(一)
项目背景: 最近在摸索中接触大数据展示项目,提到大数据统计就不得不解决多数据源,动态数据源问题,当然这些问题可以通过其他方案替代,但响应的需要付出一定的代价。本笔记中主要探讨的是在一个简单的springboot 项目中引入多种数据源,用户根据业务自动切换响应的数据源进行业务统计,或者在一个API中实现多数据源联合统计。工具: STS施工:新建项目工程:...原创 2019-11-18 11:54:07 · 682 阅读 · 0 评论 -
centos 7 配置基于httpd的cgi服务
我们在学习Python 时会不时的看到有人介绍cgi服务,那么今天我就以小白的方式记录下本次例练HTTPD: 1、由于本次验证的是基于Httpd这个WEB服务器的cgi服务配置,故第一步就是安装Httpd,首先使用httpd -v 查看是否已安装[root@hdfs-node ~]# httpd -v-bash: httpd: command not found[root@...原创 2019-03-11 11:13:34 · 2732 阅读 · 0 评论 -
记录 centos7 python 2.7 安装mysql-python中遇到的问题
场景: 我们在使用python 进行简单项目开发的时候或许会考虑使用cgi作为服务(因为主流WEB服务器基本都支持CGI),本次以HTTPD作为WEB服务器进行python 链接MYSQL数据库测试中遇到的问题1、执行“pip install mysql-python”命令,我们收到了如下代码片段的错误[root@hdfs-master cgi-bin]# pip ins...原创 2019-03-11 11:14:10 · 2467 阅读 · 0 评论 -
Centos7 离线升级Python3.7
材料:Python-3.7.2.tar.xz和libffi-devel-3.0.13-18.el7.x86_64.rpm系统:Centos7.6安装python31、mkdir -p/usr/local/python32、上传Python-3.7.2.tar.xz离线安装包到/usr/local/python33、xz -dPython-3.7.2.tar.xz 解...原创 2019-04-29 10:52:35 · 1367 阅读 · 0 评论 -
hadoop生态笔记之yarn
HADOOP 生态YARN是一个集群资源管理与任务调度的分布式框架,是从MP1上升级分离出来的调度框架。1、RM: a、处理客户请求 b、启动和监控AM c、监控NM d、资源分配与调度2、AM: a、为应用程序从RM处申请资源 b、需要与NM通信,启动/停止任务,AM运行在container,任务也运行在containe...原创 2019-05-10 14:51:05 · 161 阅读 · 0 评论 -
HIVE 学习笔记之创建表和查询biao
鸣谢: 本笔记中不论测试数据还是使用方式都参考了下面几位博主的博客内容,故本文只作为个人学习记录。 https://blog.csdn.net/zimou5581/article/details/82383906 https://blog.csdn.net/u010003835/article/details/80671367 htt...原创 2019-05-23 17:48:07 · 1017 阅读 · 0 评论