2018年10月_疯狂学习的白菜

11月 10月 09月 08月 07月 06月 05月 04月 03月

原创大数据之scala（一） --- 安装scala，简单语法介绍，条件表达式，输入和输出，循环，函数，过程，lazy ，异常，数组

一、安装和运行Scala解释程序--------------------------------------------- 1.下载scala-2.11.7.msi 2.管理员运行--安装 3.进入scala/bin,找到scala.bat,管理员运行，进入scala命令行二、REPL-------------------------------------...

2018-10-27 21:34:25 169

原创电话日志分析callLog（四）

一、修改kafka数据在主题中的贮存时间，默认是7天------------------------------------------------- [kafka/conf/server.properties] log.retention.hours=1二、使用hive进行聚合查询---------------------------------------------...

2018-10-26 20:57:03 1291 1

原创电话日志分析callLog（三）

一、查询用户最近的通话信息-------------------------------------------- 1.实现分析使用ssm可视界面提供查询串 -- controller连接 hiveserver2 -- 将命令转化成hsql语句 -- hive绑定hbase,进行MR聚合查询 2.启动yarn集群以及其高可用 a.$s100...

2018-10-22 21:05:36 1347 1

原创电话日志分析callLog（二）

一、前端实现 -- 按照时间段查询通话记录----------------------------------------- 1.完善calllog的dao类calllog.class ---------------------------------------------- package com.it18zhang.ssm.domain; ...

2018-10-20 19:27:11 1285

原创电话日志分析callLog（一）

一、项目简介---------------------------------------------- 1.hadoop+hbase+flume+zookeeper实现电信级海量通话日志数据的存储，随机访问与实时读写。通过hash技术对rowkey进行分析处理，解决hbase的热点问题，协同 coprocessor，解决系统的高吞吐量和查询负载问题以及如何避免中间...

2018-10-19 20:19:39 4786

原创 SSM（四） --- 整合SSM(spring mvc + spring + mybatis)，访问spring mvc的静态资源，处理中文乱码

一、创建项目，整合SSM(spring mvc + spring + mybatis)------------------------------------------------------------ 1.创建模块，添加web支持,添加maven支持 2.添加maven依赖 mysql驱动 c3p0数据源 mybatis...

2018-10-17 23:11:46 331

原创 SSM（三） --- Spring MVC 框架的应用

一、Spring MVC web框架-----------------------------------------二、搭建tomcat服务器----------------------------------------- 1.下载并解压tomcat，注意解压路径下不要有中文或者空格 2.启动tomcat服务器 cmd tomcat/bin> ...

2018-10-17 15:38:07 180

原创 SSM（二） --- Spring，业务层框架，注解，spring 整合mybatis

一、层化分析--------------------------- 1.Spring MVC 表现层 //最直观的数据表现形式(jsp)，网页，web等，内部的controller与业务层进行交互 3.Service 业务层 //使用Spring框架,整合业务层、数据访问层、持久层,将涉及到的类及其关系整合到一个容器中，实例化容器即可实现各个层之间的联系...

2018-10-10 15:17:41 195

hadoop.dll,hadoop.lib,winutils.exe等

将其放入hadoop/bin下，可解决java.lang.NullPointerException at java.lang.ProcessBuilder.start(Unknown Source)，Exception in thread "main" java.lang.UnsatisfiedLinkError:等异常

2018-08-25