- 博客(59)
- 资源 (15)
- 收藏
- 关注
RSS订阅原创 淘宝双11大数据分析（数据可视化）
文章目录前言本篇环境结果展示项目结构前言这一篇是最终篇，也是展示数据分析之后的结果的一篇。其他文章：淘宝双11大数据分析（环境篇）淘宝双11大数据分析（数据准备篇）淘宝双11大数据分析（Hive 分析篇-上）淘宝双11大数据分析（Hive 分析篇-下）淘宝双11大数据分析（Spark 分析篇）本篇环境Idea 中搭建一个 SSM 框架的 Web 项目。再整合 Echarts 可.........
2020-02-27 18:18:08
23209
385
原创 淘宝双11大数据分析（Spark 分析篇）
文章目录前言test.csv 和 train.csv 数据预处理test.csv 文件的处理train.csv 文件的处理Spark 处理数据执行环境上传文件到HDFSMySQL 的准备工作启动 Spark Shell支持向量机SVM分类器预测回头客输出结果到 mysql 中mysql 确认数据已经存储进去前言阅读前请参考：淘宝双11大数据分析（环境篇）淘宝双11大数据分析（数据准备篇）...
2020-02-27 14:22:28
9608
8
原创 淘宝双11大数据分析（Hive 分析篇-下）
文章目录前言当前环境创建一个临时表将 user_log 表中的数据插入到 inner_user_log使用 Sqoop 迁移数据MySQL 中的准备导入数据MySQL 中查看数据是否已经导入前言本篇主要是数据迁移，使用 Sqoop 把 Hive 中的数据迁移到 MySQL 中。阅读此篇文章，需要先阅读前篇：淘宝双11大数据分析（环境篇）淘宝双11大数据分析（数据准备篇）淘宝双11大数...
2020-02-26 14:59:50
3289
9
原创 淘宝双11大数据分析（Hive 分析篇-上）
前言阅读此篇文章，需要先阅读前篇：淘宝双11大数据分析（环境篇）淘宝双11大数据分析（数据准备篇）当前环境使用 jps 查看当前启动的服务：（其中 Master 和 Worker是 Spark 的服务，不本篇无关）[root@centos2020 dataset]# jps11408 Master12707 RunJar7876 NameNode8183 ResourceM...
2020-02-26 14:09:27
5107
原创 淘宝双11大数据分析（数据准备篇）
文章目录前言数据内容分析`user_log.csv`文件内容含义`train.csv` 和 `test.csv` 文件内容含义数据上传到Linux系统并解压数据集的预处理文件信息截取导入数据到Hive中确认 Hadoop 服务已启动上传数据文件在 Hive 上创建数据表前言阅读前，请先查看前篇：淘宝双11大数据分析（环境篇）数据下载地址：百度云下载另：为求方便行事，我这里的用户全是 roo...
2020-02-26 12:45:40
10235
6
原创 淘宝双11大数据分析（环境篇）
案例分析前言通过本案例，你可以：熟悉在 Linux 系统中安装 Hadoop 集群、安装 Mysql 数据库，安装 Sqoop 数据迁移工具，安装 Spark ，安装 Hive 数据仓库。在 HDFS 分布式文件系统中创建文件夹、上传文件。在 Hive 中建立表，使用 Hive 对 HDFS 中的文件进行操作，使用 HQL 进行业务查询。使用 Sqoop 将 Hive 中的数据迁移到...
2020-02-26 10:35:14
7763
4
原创 Linux 安装 Spark (单机版)
前言首先需要安装好 JDK 和 Hadoop 。参考：Linux 安装 JDK（图文教程）Hadoop 集群搭建详细步骤下载与解压官网下载解压：在 Linux 目录 /usr/spark 下进行解压：使用命令tar -zxvf spark-2.4.4-bin-hadoop2.7.tgz 即可。配置环境变量[root@centos2020 spark]# vim /etc/pr...
2020-02-26 10:20:26
1781
原创 Linux 安装 Sqoop （并连接 mysql 测试）
文章目录环境描述下载与解压更改配置 sqoop-env.sh解压之后修改sqoop-env.sh配置环境变量拷贝 mysql 驱动启动mysql查看 sqoop 版本用mysql 进行测试环境描述软件版本操作系统CentOS 7sqoop1.4.6hadoop2.7.7mysql5.7.26下载与解压sqoop下载地址使用命令：tar -...
2020-02-25 19:20:40
1998
原创 Linux 安装 JDK（图文教程）
文章目录前言安装前的准备测试网络使用 xshell 和 xftp 连接安装步骤1、上传压缩包到 Linux 上2、解压 jdk3、配置环境变量4、更新配置文件5、检验java是否安装成功前言准备一个 Linux 系统，我这里选择了 CentOS 7。不知道怎么安装的童鞋，请参考博客：VMware 安装 Linux 系统（CentOS 7 图文教程）然后是准备 JDK ，现在官网下载需要注...
2020-02-25 15:41:05
1498
原创 VMware 安装 Linux 系统（CentOS 7 图文教程）
文章目录1、开始创建新的虚拟机2、经典步骤开启安装步骤3、选择镜像4、指定虚拟机名称和存储位置5、指定磁盘大小6、点击完成新建7、选择直接安装8、语言选择9、系统设置10、网络设置11、选择安装类型12、开始安装13、设置 ROOT 的密码14、创建一个管理员用户15、等待进度条的结束16、设置仅主机模式17、重启机器18、登陆1、开始创建新的虚拟机2、经典步骤开启安装步骤3、选择镜像...
2020-02-25 14:31:59
1166
原创 Vue项目中创建vue文件并运行（开发工具：idea）
文章目录前言新建 vue 文件修改新建的 vue 文件增加标签和样式在 App.vue 的文件中增加信息index.js 文件的修改运行测试前言首先，把新创建的项目导入 idea 中。不修改任何文件内容，直接运行，可以看到成功之后的页面。如果对这部分不熟悉，请参考：idea 导入 Vue 项目并运行（超级详细步骤）新建 vue 文件这里我选择之后弹出一个对话框：输入 vue 文件...
2020-02-24 19:49:26
5337
原创 idea 导入 Vue 项目并运行（超级详细步骤）
文章目录前言导入 Vue 项目开始导入选择项目选择项目类型运行前的准备File -> Settings 中设置JS 版本Vue.js 的插件开始运行运行过程查看结果前言首先，准备一个 vue 项目，如果不知道如何创建，请参考：Vue UI 创建并运行前端项目导入 Vue 项目开始导入选择项目选择之后，直接点击 ok 即可。选择项目类型完成，点击 Finish。...
2020-02-24 17:36:33
56648
12
原创 Vue UI 创建并运行前端项目
文章目录1、检查环境2、启动 UI3、使用浏览器访问4、创建5、运行1、检查环境node -v 查看 node 的版本，不能低于 8.x 。vue -V 查看 vue 的版本，使用 Vue UI 是 3.0 新加的特性。C:\Users\Feng>node -vv10.15.1C:\Users\Feng>vue -VC:\Users\Feng>"node" ...
2020-02-24 13:59:10
6334
原创 牛客网华为机试【输入一行字符，分别统计出包含英文字母、空格、数字和其他字符的个数】
文章目录题目描述题目分析java 代码结果题目描述输入一行字符，分别统计出包含英文字母、空格、数字和其它字符的个数。 /** * 统计出英文字母字符的个数。 * * @param str 需要输入的字符串 * @return 英文字母的个数 */ public static int getEnglishCharCount(Strin...
2020-02-21 17:27:44
972
原创 牛客网华为机试【求小球落地5次后所经历的路程和第5次反弹的高度】
题目描述假设一个球从任意高度自由落下，每次落地后反跳回原高度的一半; 再落下, 求它在第5次落地时，共经历多少米?第5次反弹多高？最后的误差判断是小数点3位输入描述:输入起始高度，int型输出描述:分别输出第5次落地时，共经过多少米第5次反弹多高示例输入1输出2.8750.03125题目分析我刚用自己的 zhu 手，画了一个图，就是上边这张图了。这个题，其实可以...
2020-02-21 16:40:29
454
原创 牛客网华为机试【统计每个月兔子的总数】
文章目录题目描述题目分析java 代码（递归）java 代码（非递归）结果题目描述有一只兔子，从出生后第3个月起每个月都生一只兔子，小兔子长到第三个月后每个月又生一只兔子，假如兔子都不死，问每个月的兔子总数为多少？/** * 统计出兔子总数。 * * @param monthCount 第几个月 * @return 兔子总数 */public static int getTot...
2020-02-21 15:31:19
518
原创 牛客网华为机试【字符串加密】
文章目录题目描述题目分析java 代码结果题目描述有一种技巧可以对数据进行加密，它使用一个单词作为它的密匙。下面是它的工作原理：首先，选择一个单词作为密匙，如TRAILBLAZERS。如果单词中包含有重复的字母，只保留第1个，其余几个丢弃。现在，修改过的那个单词属于字母表的下面，如下所示：A B C D E F G H I J K L M N O P Q R S T U V W X Y Z...
2020-02-21 15:01:00
1011
原创 牛客网华为机试【蛇形矩阵】
题目描述题目说明蛇形矩阵是由1开始的自然数依次排列成的一个矩阵上三角形。样例输入5样例输出1 3 6 10 152 5 9 144 8 137 1211接口说明原型void GetResult(int Num, char * pResult);输入参数： int Num：输入的正整数N输出参数： int * pResult：指向存放蛇形...
2020-02-20 16:42:10
575
原创 牛客网华为机试【图片整理】
题目描述Lily上课时使用字母数字图片教小朋友们学习英语单词，每次都需要把这些图片按照大小（ASCII码值从小到大）排列收好。请大家给Lily帮忙，通过C语言解决。输入描述:Lily使用的图片包括"A"到"Z"、“a"到"z”、“0"到"9”。输入字母或数字个数不超过1024。输出描述:Lily的所有图片按照从小到大的顺序输出示例输入Ihave1nose2hands10finger...
2020-02-20 15:29:07
637
原创 牛客网华为机试【整数与 IP 地址间的转换】
文章目录题目描述题目分析从 IP 转换到整数从整数转换到 IPjava 代码结果题目描述原理：ip地址的每段可以看成是一个0-255的整数，把每段拆分成一个二进制形式组合起来，然后把这个二进制数转变成一个长整数。每段数字 相对应的二进制数10 000010100 000000003 ...
2020-02-20 15:11:27
441
原创 牛客网华为机试【字符串加解密】
文章目录题目描述题目分析java 代码结果题目描述对输入的字符串进行加解密，并输出。加密方法为：当内容是英文字母时则用该英文字母的后一个字母替换，同时字母变换大小写,如字母a时则替换为B；字母Z时则替换为a；当内容是数字时则把该数字加1，如0替换1，1替换2，9替换0；其他字符不做变化。解密方法为加密的逆过程。接口描述：实现接口，每个接口实现1个基本操作：void ...
2020-02-20 13:29:28
474
原创 牛客网华为机试【查找兄弟单词】
文章目录题目描述题目分析java 代码结果题目描述输入描述:先输入字典中单词的个数，再输入n个单词作为字典单词。输入一个单词，查找其在字典中兄弟单词的个数再输入数字n输出描述:根据输入，输出查找到的兄弟单词的个数示例输入3 abc bca cab abc 1输出2bca题目分析这道题，光审题，我就花了好长时间！！题目描述极为混乱！而且输出的结果，有一个坑...
2020-02-18 16:06:50
569
3
原创 牛客网华为机试【字符串排序】
文章目录题目描述题目分析java 代码结果题目描述编写一个程序，将输入字符串中的字符按如下规则排序。规则 1 ：英文字母从 A 到 Z 排列，不区分大小写。如，输入： Type 输出： epTy规则 2 ：同一个英文字母的大小写同时存在时，按照输入顺序排列。如，输入： BabA 输出： aABb规则 3 ：非英文字母的其它字符保持原来的位置。如，输入： By?e 输出： Be?y...
2020-02-18 14:10:28
686
原创 牛客网华为机试【删除字符串中出现次数最少的字符】
文章目录题目描述题目分析java 代码结果题目描述实现删除字符串中出现次数最少的字符，若多个字符出现次数一样，则都删除。输出删除这些单词后的字符串，字符串中其它字符保持原来的顺序。输入描述:字符串只包含小写英文字母, 不考虑非法输入，输入的字符串长度小于等于20个字节。输出描述:删除字符串中出现次数最少的字符后的字符串。示例输入abcdd输出dd题目分析因为字符串中只...
2020-02-17 15:50:12
554
2
原创 牛客网华为机试【汽水瓶】
文章目录题目描述题目分析java 代码结果题目描述有这样一道智力题：“某商店规定：三个空汽水瓶可以换一瓶汽水。小张手上有十个空汽水瓶，她最多可以换多少瓶汽水喝？”答案是5瓶，方法如下：先用9个空瓶子换3瓶汽水，喝掉3瓶满的，喝完以后4个空瓶子，用3个再换一瓶，喝掉这瓶满的，这时候剩2个空瓶子。然后你让老板先借给你一瓶汽水，喝掉这瓶满的，喝完以后用3个空瓶子换一瓶满的还给老板。如果小张手上有n个...
2020-02-17 15:21:32
366
原创 牛客网华为机试【简单密码】
文章目录题目描述题目分析java 代码结果题目描述密码是我们生活中非常重要的东东，我们的那么一点不能说的秘密就全靠它了。哇哈哈. 接下来渊子要在密码之上再加一套密码，虽然简单但也安全。假设渊子原来一个BBS上的密码为zvbo9441987,为了方便记忆，他通过一种算法把这个密码变换成YUANzhi1987，这个密码是他的名字和出生年份，怎么忘都忘不了，而且可以明目张胆地放在显眼的地方而不被别...
2020-02-17 14:54:41
693
原创 牛客网华为机试【密码验证合格程序】
文章目录题目描述题目分析 & 部分java代码java 代码结果题目描述密码要求:长度超过8位包括大小写字母.数字.其它符号,以上四种至少三种不能有相同长度超2的子串重复说明:长度超过2的子串输入描述:一组或多组长度超过2的子符串。每组占一行输出描述:如果符合要求输出：OK，否则输出NG示例输入021Abc9000021Abc9Abc1021ABC9000...
2020-02-17 14:03:53
510
1
原创 牛客网华为机试【取近似值】
文章目录题目描述题目分析java 代码结果题目描述写出一个程序，接受一个正浮点数值，输出该数值的近似整数值。如果小数点后数值大于等于5,向上取整；小于5，则向下取整。输入描述:输入一个正浮点数值输出描述:输出该数值的近似整数值示例输入5.5输出6题目分析看完题目描述，这就是一个四舍五入的题。java 的 API 中，有一个 Math 实用类，已经实现了。可以参考：...
2020-02-17 12:20:42
307
原创 牛客网华为机试【简单错误记录】
文章目录题目描述题目分析java 代码结果题目描述开发一个简单错误记录功能小模块，能够记录出错的代码所在的文件名称和行号。处理：记录最多8条错误记录，循环记录，对相同的错误记录（净文件名称和行号完全匹配）只记录一条，错误计数增加；超过16个字符的文件名称，只记录文件的最后有效16个字符；输入的文件可能带路径，记录文件名称不能带路径。输入描述:一行或多行字符串。每行包括带路径文件...
2020-02-16 17:38:57
551
原创 牛客网华为机试【求int型正整数在内存中存储时1的个数】
文章目录题目描述题目分析java 代码结果附加：字符串解法附加：字符串解法的结果题目描述输入一个int型的正整数，计算出该int型数据在内存中存储时1的个数。输入描述:输入一个整数（int类型）输出描述:这个数转换成2进制后，输出1的个数示例输入5输出2题目分析其实就是计算一个数转换为2进制之后，其中的1的个数。俩思路：第一个，先将这个数转化为2进制，java中转...
2020-02-16 16:04:32
336
原创 牛客网华为机试【字符串的连接最长路径查找】
题目描述给定n个字符串，请对n个字符串按照字典序排列。输入描述:输入第一行为一个正整数n(1≤n≤1000),下面n行为n个字符串(字符串长度≤100),字符串中只含有大小写字母。输出描述:数据输出n行，输出结果为按照字典序排列的字符串。示例输入9captocatcardtwotooupboatboot输出boatbootcapcardcatto...
2020-02-16 15:26:24
318
原创 牛客网华为机试【句子逆序】
题目描述将一个英文语句以单词为单位逆序排放。例如“I am a boy”，逆序排放后为“boy a am I”所有单词之间用一个空格隔开，语句中除了英文字母外，不再包含其他字符接口说明/** * 反转句子 * * @param sentence 原句子 * @return 反转后的句子 */public String reverse(String sentence); ...
2020-02-16 14:58:17
435
原创 牛客网华为机试【字符串反转】
题目描述写出一个程序，接受一个字符串，然后输出该字符串反转后的字符串。（字符串长度不超过1000）输入描述:输入N个字符输出描述:输出该字符串反转后的字符串示例输入abcd输出dcba题目分析此前，我写过一个字符串反转的博客：字符串反转还可以用 StringBuilder 的反转方法直接反转！！可以参考我的上一篇 牛客网华为机试【数字颠倒】java 代码pub...
2020-02-15 15:29:19
449
原创 牛客网华为机试【数字颠倒】
题目描述描述：输入一个整数，将这个整数以字符串的形式逆序输出程序不考虑负数的情况，若数字含有0，则逆序形式也含有0，如输入为100，则输出为001输入描述:输入一个int整数输出描述:将这个整数以字符串的形式逆序输出示例输入1516000输出0006151题目分析要求将输入的数字，颠倒。首先，想到的是将其每一位都取出来，倒序拼接起来就好。可是，再思考一下，将其转...
2020-02-15 15:17:50
414
原创 牛客网华为机试【合并表记录】
题目描述数据表记录包含表索引和数值（int范围的整数），请对表索引相同的记录进行合并，即将相同索引的数值进行求和运算，输出按照key值升序进行输出。输入描述:先输入键值对的个数然后输入成对的index和value值，以空格隔开输出描述:输出合并后的键值对（多行）示例输入40 10 21 23 4输出0 31 23 4题目分析看到键值对，有2种方式：一个是...
2020-02-15 14:48:55
481
原创 牛客网华为机试【提取不重复的整数】
题目描述输入一个int型整数，按照从右向左的阅读顺序，返回一个不含重复数字的新的整数。输入描述:输入一个int型整数输出描述:按照从右向左的阅读顺序，返回一个不含重复数字的新的整数示例输入9876673输出37689题目分析刚拿到这个题的时候，我就想啊，这不很简单嘛！直接将接收到的整数转换为一个 String ，然后将其使用字符串切分的方法 split("") 得到一...
2020-02-15 13:33:42
686
原创 牛客网华为机试【字符个数统计】
题目描述编写一个函数，计算字符串中含有的不同字符的个数。字符在ACSII码范围内(0~127)，换行表示结束符，不算在字符里。不在范围内的不作统计。输入描述:输入N个字符，字符在ACSII码范围内。输出描述:输出范围在(0~127)字符的个数。示例输入abc输出3题目分析此题要求，计算不同字符的个数，首先想到的就是没有重复，那在 java 中有一个 set 接口，其实现...
2020-02-15 12:46:43
509
原创 牛客网华为机试【进制转换（16进制转10进制）】
题目描述写出一个程序，接受一个十六进制的数，输出该数值的十进制表示。（多组同时输入 ）输入描述:输入一个十六进制的数值字符串。输出描述:输出该数值的十进制字符串。示例输入0xA输出10题目分析java 中提供了现成的 API 来做进制转换。因此，最为方便的就是使用 API 。参考：JAVA二进制，八进制，十六进制，十进制间进行相互转换另外，题目要求不止一条数据，使...
2020-02-15 12:17:36
1160
原创 听说你用 java new 了一个女朋友
前言看到网上，好多人在秀自己 new 的 girl ！！本文做一个小练习：读取 json 文件，封装、继承、接口等java 基础的回顾！！项目结构pom.xml<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns...
2020-02-14 14:19:08
370
微服务设计与开发技术的ppt详细讲解，涉及到微服务演变，以及各种架构的介绍
2023-02-05
JAVA核心面试知识整理.pdf
2020-05-07
powerdesinger的基本使用.pdf
2020-05-06
dubbo-demo.zip
2020-03-20
大数据分析淘宝双11的SSM项目.rar
2020-02-27
大数据分析双11的markdown文档.rar
2020-02-27
ssh-idea-maven-create.docx
2019-10-17
hibernate_demo.rar
2019-10-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人