程序の之道
码龄6年
关注
提问 私信
  • 博客：557,243
    社区：1
    557,244
    总访问量
  • 242
    原创
  • 1,526,014
    排名
  • 224
    粉丝
  • 0
    铁粉

个人简介：专注Java、大数据知识干货及相关领域动态分享，请多多关注哦

IP属地以运营商信息为准，境内显示到省（区、市），境外显示到国家（地区）
IP 属地：广东省
  • 加入CSDN时间： 2018-12-23
博客简介：

程序之道的博客

博客描述：
专注Java、大数据知识干货及相关领域动态分享，请多多关注哦
查看详细资料
个人成就
  • 获得374次点赞
  • 内容获得65次评论
  • 获得729次收藏
创作历程
  • 241篇
    2019年
  • 10篇
    2018年
成就勋章
TA的专栏
  • 大数据
    9篇
  • Hadoop
  • Hive
  • spark
  • yarn
  • Hbase
  • flink
    1篇
创作活动更多

HarmonyOS开发者社区有奖征文来啦！

用文字记录下您与HarmonyOS的故事。参与活动，还有机会赢奖，快来加入我们吧！

0人参与 去创作
  • 最近
  • 文章
  • 代码仓
  • 资源
  • 问答
  • 帖子
  • 视频
  • 课程
  • 关注/订阅/互动
  • 收藏
搜TA的内容
搜索 取消

Flink实战教程：如何计算实时热门商品

实战案例介绍本案例将实现一个“实时热门商品”的需求，我们可以将“实时热门商品”翻译成程序员更好理解的需求：每隔5分钟输出最近一小时内点击量最多的前 N 个商品。将这个需求进行分解我们大概要做这么几件事情：抽取出业务时间戳，告诉 Flink 框架基于业务时间做窗口过滤出点击行为数据按一小时的窗口大小，每5分钟统计一次，做滑动窗口聚合（Sliding Window）按每个...
原创
发布博客 2019.06.05 ·
1315 阅读 ·
2 点赞 ·
1 评论 ·
8 收藏

一文带你了解Java Agent

Java Agent这个技术，对于大多数同学来说都比较陌生，但是多多少少又接触过，实际上，我们平时用的很多工具，都是基于Java Agent实现的，例如常见的热部署JRebel，各种线上诊断工具（btrace, greys），还有阿里最近开源的arthas。其实Java Agent一点都不神秘，也是一个Jar包，只是启动方式和普通Jar包有所不同，对于普通的Jar包，通过指定类的main函数进行...
原创
发布博客 2019.06.05 ·
790 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

docker之开发课程EdgeService

课程的edgeService依赖于课程服务的dubbo服务，对外提供的restAPI，跟用户的EdgeService有点类似，只是一个调用的是thrift，一个调用的是dubbo，比较特殊的是课程的EdgeService需要用户登录后才可以访问，如果没有登录的话，需要跳转到登录系统才可以访问。新建模块course-edge-servce* pom增加依賴<?xml version=...
转载
发布博客 2019.06.04 ·
604 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

JProfiler性能分析工具详解

1.简介JProfiler 是一个商业授权的 Java剖析工具,用于分析Java EE和Java SE应用程序.2.JVMTIJDK 本身定义了目标明确并功能完善的JNI( Java Native Interface ) 与虚拟机直接进行交互,这些 API 能很方便的进行扩展,从而满足开发者各式的需求.JVMTI( JVM Tool Interface) ,是JAVA虚...
原创
发布博客 2019.06.03 ·
2900 阅读 ·
1 点赞 ·
0 评论 ·
4 收藏

Spring Aop之Jdk代理实现原理详解

Jdk代理，也称为动态代理，其代理目标对象的方式是生成一个与目标对象实现同一个接口的类，该类的构造函数中会传入一个 InvocationHandler 类型的对象。因为 InvocationHandler 对象是用户自定义的织入了切面逻辑的类，因而在需要使用目标对象的地方，只需要将生成的代理类的对象传入即可。又因为生成的代理类与目标类都实现了同一接口，因而...
原创
发布博客 2019.06.03 ·
306 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

华为系统早已开始研发，为何现在才准备推出？

华为在近年来的发展一直朝着更好的方向前进，作为一个中国自主研发比较出色的一个企业，华为掌握了全球最多的5G专利技术，还自己研发了处理器芯片，就手机行业上来说，现在华为的位置已经可以坐到全球出货量前二的位置。种种的事迹都表明了现在的华为实力越来越强大。2018年4月份，美国下达的一纸“禁售令”给中兴通讯带来一场毁灭性打击，一时间中兴的各项主营业务均陷入半瘫痪状态，而中兴的遭遇也为所有国...
原创
发布博客 2019.05.23 ·
866 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

前端面试要注意哪几个点？

不管是刚毕业踏入社会的还是在职场久经奋战的，都经历过被面这一环节。当然也有很多同学开始在面人，为自己的团队选择优秀的血液。而我也是属于这一类，这些年都有在帮公司或朋友的团队物色人才和面试同学。今年在手淘也一样，在给同学面试过程中，让我开始在思考，而且思考了很久，所以这几天静下来写了这篇文章，希望这篇文章对于刚毕业的大学生或者还在继续参加工作面试的同学有所帮助。什么是前端什么是前端？在这里不做...
转载
发布博客 2019.05.09 ·
444 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

WEB前端学习如何分清主次和优先级？

学习前端从未停止过，本文只是对知识的重要程度和精力分配说下自己的观点。具体来说，前端方面的知识从重要程度来排，私以为应该先后学这些：1，api学习，系统地学，可以看看这个方面的书，不要只零散地看网上文章，这个书钱要舍得花。前端领域，这个方面我推荐看看《javascript高级程序设计》和《html5和css3权威指南》。2，学习一些编程上的技巧，比如面向对象，组件，api设计，推荐几本书《js...
原创
发布博客 2019.05.08 ·
528 阅读 ·
2 点赞 ·
0 评论 ·
0 收藏

怎样实现H5+CSS3手指滑动切换图片

包含3个文件：html、slider-H5.js、jquery.js。在html中可配置滑动参数。具体代码如下：HTML代码：<!DOCTYPE HTML><html> <head> <meta charset="utf-8" /> <meta http-equiv="X-UA-Compa...
原创
发布博客 2019.04.30 ·
1445 阅读 ·
1 点赞 ·
0 评论 ·
1 收藏

运用这招，让 Spark 提速 45 倍！

Apache Spark已逐渐俨然成为下一代大数据处理工具的典范。通过借鉴开源算法，并将处理任务分布到计算节点集群上，无论在它们在单一平台上所能执行的数据分析类型方面，还是在执行这些任务的速度方面，Spark和Hadoop这一代框架都轻松胜过传统框架。Spark利用内存来处理数据，因而速度比基于磁盘的Hadoop大幅加快(快100倍)。但是如果得到一点帮助，Spark可以运行得还要快。如果结合...
原创
发布博客 2019.04.29 ·
1608 阅读 ·
1 点赞 ·
1 评论 ·
3 收藏

到底多大的数据才叫大数据?大数据的商机有哪些?

大数据是什么？多大的数据叫大数据?很多没有接触过大数据的人，都很难清楚地知道，究竟多大的数据量才可以称之为大数据。那么，根据数据收集的端口，企业端与个人端之间，大数据的数量级别是不同的。企业端(B端)数据近十万的级别，就可以称为大数据;个人端(C端)的大数据要达到千万级别。收集渠道没有特定要求，PC端、移动端或传统渠道都可以，重点要达到这样数量级的有效数据，形成数据服务即可。很有趣，大家可...
原创
发布博客 2019.04.29 ·
1516 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

分享一些关于Hadoop的面试题及答案

Hadoop是什么?Hadoop是一个开发和运行处理大规模数据的软件平台,是Appach的一个用java语言实现开源软件框架，实现在大量计算机组成的集群中对海量数据进行分布式计算，下面看看一般情况下，关于Hadoop的面试是会问哪些问题，以及该怎么回答。1. 简单描述如何安装配置一个apache开源版hadoop，只描述即可，无需列出完整步骤，能列出步骤更好。1) 安装JDK并配置环境变量（...
原创
发布博客 2019.04.28 ·
509 阅读 ·
1 点赞 ·
0 评论 ·
5 收藏

作为数据分析师怎样选择适合你的分析工具?

不管是数据分析，统计分析，数据挖掘、商业智能都需要在学习的时候掌握各种分析手段和技能，特别是要掌握分析软件工具!我曾经说过，学习方法，一般是先学软件开始，再去应用，再学会理论和原理。没有软件工具的方法就不要去学了，因为学了也不能做，除非你自己会编程序。那么在数据分析领域，都有哪些软件分析工具呢?如何选择呢?其实很多领域或者说分析方法都有相应的软件工具，只要你想找就应该能够找到!这...
转载
发布博客 2019.04.27 ·
433 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏

全面解析腾讯数据库TDSQL架构

腾讯计费平台部托管着公司90%以上的虚拟账户，如QB、Q点、包月服务、游戏的二级账户等，为了保证能顺畅支撑公司各大业务的实时在线交易，并且在各种灾难场景下数据是一致并且可用的，对系统的可用性、一致性切换要求非常高，因此计费团队历来都非常重视高一致性存储系统的建设。到目前为止，计费高一致性存储层的解决方案大致经过了3个阶段，本文将分享最新的基于MySQL的分布式解决方案。随着业务的发展，...
转载
发布博客 2019.04.16 ·
6706 阅读 ·
3 点赞 ·
0 评论 ·
20 收藏

一个成熟的程序员必会技能：赚钱

我经常在这个公众号里收到一些读者留言，大多数是一些年轻读者，迷茫，焦虑，工资明明还不错，但攒不下钱，买不了房。高学历，985，硕士，努力了很多年也赶不上那些轻松的富二代……看着可怜又可气。我觉得这种心态的读者，毛病都出在比较上，而比又没比对地方。你嫌超市的菜不好吃，别的人还吃不上蔬菜呢。北京最近两年的天气已经有了很大的改善，但是，但凡连续两天雾霾天，朋友圈立刻沦陷，而真正雾霾严重的地方，可能都用...
原创
发布博客 2019.04.15 ·
466 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

Web全栈工程师应该会什么

一个Web开发过程有三层架构：表示层：表示层也被称为网站的前端部分。它处理网站的用户界面相关问题。业务逻辑层：业务逻辑层也被称为网站的后端层，负责数据验证和动态处理。数据库层：最后是数据访问层，利用API为网站提供数据。以上三层共同称为全栈web开发。以前，每当需要开发一个网站时，前端开发人员和后端开发人员分别被聘用。现在，随着移动应用程序和网站的全栈开发，时代已经发生了变化。首先，你需要学...
原创
发布博客 2019.04.15 ·
6204 阅读 ·
2 点赞 ·
1 评论 ·
7 收藏

vue使用插槽分发内容slot的用法

这篇文章主要介绍了vue使用插槽分发内容slot的用法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧将父组件的内容放到子组件指定的位置叫做内容分发//在父组件里使用子组件<son-tmp> <div>我是文字，我需要放到son-tmp组件里面制定的位置</div></...
原创
发布博客 2019.04.15 ·
312 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

BAT资深web前端工程师总结：未来5年前端发展四大趋势前瞻

经过近5年的快速发展，目前前端开发技术栈已经进入成熟期。在React和Vue等框架出现后，前端在代码开发方面的复杂度已经基本得到解决，再加上Node解决前后端分离，前端技术栈本身其实已经非常成熟。因此业内人士普遍认为，未来几年前端本身的开发技术应该不会有大的方向变化，但是将会呈现出四大发展趋势：第一个趋势是入口应用会小程序化。类似腾讯、阿里、滴滴、美团这样作为入口的应用，会自己做自己的一套小程...
原创
发布博客 2019.04.15 ·
289 阅读 ·
0 点赞 ·
0 评论 ·
0 收藏

大数据分析师常见的面试题解答

1、海量日志数据，提取出某日访问百度次数最多的那个IP。首先是这一天，并且是访问百度的日志中的IP取出来，逐个写入到一个大文件中。注意到IP是32位的，最多有个2^32个IP。同样可以采用映射的方法，比如模1000，把整个大文件映射为1000个小文件，再找出每个小文中出现频率最大的IP(可以采用hash_map进行频率统计，然后再找出频率最大的几个)及相应的频率。然后再在这1000个最大的IP...
原创
发布博客 2019.04.15 ·
11844 阅读 ·
2 点赞 ·
0 评论 ·
40 收藏

全面解析腾讯大数据计算引擎——Shuffle

腾讯分布式数据仓库(Tencent distributed Data Warehouse, 简称TDW)基于开源软件Hadoop和Hive进行构建，并且根据公司数据量大、计算复杂等特定情况进行了大量优化和改造，目前单集群最大规模达到5600台，每日作业数达到100多万，已经成为公司最大的离线数据处理平台。为了满足用户更加多样的计算需求，TDW也在向实时化方向发展，为用户提供更加高效、稳定、丰富的服...
转载
发布博客 2019.04.12 ·
906 阅读 ·
1 点赞 ·
0 评论 ·
0 收藏
加载更多