- 博客(96)
- 资源 (24)
- 收藏
- 关注
RSS订阅原创 《大数据跟我学系列文章004-轻松通关 Flink ——04.Flink SQL & Table编程和案例》
大数据跟我学系列文章003-轻松通关 Flink——04.Flink SQL & Table编程和案例分别从 Flink Table & SQL 的背景和编程模型、常见的 API、算子和内置函数等对 Flink Table & SQL 做一个详细的讲解和概括，最后模拟了一个实际业务场景使用 Flink Table & SQL 开发文章目录大数据跟我学系列文章003-轻松通关 Flink——04.Flink SQL & Table编程和案例前言一、Flink
2021-02-19 17:11:34
556
原创 《跟我学算法系列文章》21天轻松通关——数据结构与算法-day01
《跟我学算法系列文章》21天轻松通关——数据结构与算法-day01——01.动态规划+滑动窗口介绍 动态规划+滑动窗口：元素和为目标值的子矩阵数量难度：困难/动态规划、滑动窗口——02.滑动窗口题目1. 滑动窗口的最大值（Leetcode 剑指 Offer 59 - I /简单）2. 长度最小的子数组（Leetcode 209/中等）3. 最小覆盖子串（Leetcode 76/困难）lagou、labuladong（1.7.1）4. 滑动窗口最大值 (Leetcode 239/困难)5.
2021-02-16 03:33:23
608
转载 《大数据跟我学系列文章-轻松通关 Flink ——03.Flink 常用的 DataSet 和 DataStream API》
大数据跟我学系列文章-轻松通关 Flink——03.Flink 常用的 DataSet 和 DataStream API介绍 Flink 的 DataSet 和 DataStream 的 API，并模拟了实时计算的场景，详细讲解了 DataStream 常用的 API 的使用文章目录大数据跟我学系列文章-轻松通关 Flink——03.Flink 常用的 DataSet 和 DataStream API前言一、流批一体？1.DateSet 和 DataStream 的区别和联系2.DataStrea
2021-02-14 20:24:32
782
转载 《大数据跟我学系列文章002-轻松通关 Flink-02-Flink 编程模型与spark、storm的比较》
大数据跟我学系列文章-轻松通关 Flink——02.Flink 的编程模型与其他框架（spark、storm）比较主要介绍 Flink 的编程模型与其他框架比较。包括 Flink 程序的基础处理语义和基本构成模块，并且和 Spark、Storm 进行比较，Flink 作为最新的分布式大数据处理引擎具有哪些独特的优势几种框架对比如下：文章目录大数据跟我学系列文章-轻松通关 Flink——02.Flink 的编程模型与其他框架（spark、storm）比较前言一、Flink 的核心语义和架构模型1
2021-02-14 18:04:00
465
转载 《大数据跟我学系列文章001-轻松通关 Flink-01-Flink 入门程序 WordCount 和 SQL 实现》
大数据跟我学系列文章-轻松通关 Flink——-01.Flink 入门程序 WordCount 和 SQL 实现分别从DataSet（批处理）和 DataStream（流处理）两种方式如何进行单词计数开发；最后介绍 Flink Table 和 SQL 的使用本文为拉勾课程《 42讲轻松通关 Flink》笔记，本着“只有亲身实践过并整理成体系才属于自己真正掌握的知识” 的理念写出本篇文章，后续每天更新，持续关注，欢迎留言讨论~文章目录大数据跟我学系列文章-轻松通关 Flink——-01.Flink
2021-02-14 13:59:31
439
原创 《实习至半，青葱少年，三十而已》
2月第一天，为期两个月的实习终于汇报完了，没有想象的那么难，也没有想象的那么简单，毕竟自己怎么准备的心里清楚的很，没有接触源码，阅读源码的习惯，只停留在初级阶段，加油吧，每天坚持刷完九道题目，刷不完就不睡了，另外多看书，多背，多读源码理解，少看花边新闻，无聊的段视频浪费时间啊！没多少时间了，春节过后都快三月份了！这两个月是成长最快的，加油！青葱少年，三十而已！...
2021-02-01 23:06:20
216
原创 Presto 的REST ful提交流程
《Presto技术内幕》Presto体检流程解析:4.3提交查询的流程从前面的章节可以看出，提交查询的流程如下所示。（1）生成查询的初始RESTful请求，并发送给 Coordinator（2）Coordinator处理 RESTful请求，执行查询，并将部分查询结果和用于 Client获取下一批查询结果的 RESTful请求地址 nextResultsURI一起返回给（3）Client端获得 Coordinator返回的部分查询结果并进行显示，若所有查询结果均己求获取下一批查询执行结果。经获
2021-01-29 15:35:09
293
原创 《IDEA——make dictionary as 用法》
[生产实例]必须把src设置为make dictionary as source root才可以使用存放java代码。idea中Mark Directory As里的Sources Root、ReSources Root等的区别（参考官方文档）一、Source roots (or source folders)Source roots (or source folders)By assigning a folder to this category, you tell IntelliJ I
2021-01-24 12:10:52
1418
原创 2021-01-20《RESTful 架构详解及REST与RPC架构对比》
《Web服务之 restful与rpc风格初探及restful架构详解》restful与rpc风格在目前主流的三种Web服务交互方案中，REST相比于SOAP（Simple Object Access protocol，简单对象访问协议）以及XML-RPC更加简单明了，无论是对URL的处理还是对Payload的编码，REST都倾向于用更加简单轻量的方法设计和实现。REST 指的是一组架构约束条件和原则。满足这些约束条件和原则的应用程序或设计就是 RESTful。什么是restful，简称rest?
2021-01-20 09:34:31
135
《Spring基础知识汇总 Java开发必看》
restful与rpc风格在目前主流的三种Web服务交互方案中，REST相比于SOAP（Simple Object Access protocol，简单对象访问协议）以及XML-RPC更加简单明了，无论是对URL的处理还是对Payload的编码，REST都倾向于用更加简单轻量的方法设计和实现。REST 指的是一组架构约束条件和原则。满足这些约束条件和原则的应用程序或设计就是 RESTful。什么是restful，简称rest?REST ：Representational State Tran.
2021-01-20 08:55:20
114
原创 坚持算法刷题第一天
今天终于做几算法题了，计划赶不上变化，算法题只做了五道，不过也只是刚刚开始，总比没有好，下面做的就是继续努力，坚持！每天五道看能坚持多久？jdbc了解了一下，其他的Java面试知识32个知识点大致过了一下音频，发现好多知识漏洞。比如kafka原理，数据库的acid基本的都没掌握牢靠...
2021-01-16 23:36:40
178
原创 最后一天回去做实验2
今天hive集成KEROBERS非容器化装了一天，遇到了各种问题，最后解决办法是在72.136集群装非容器化的hive3,因为这个集群是按照容器化设计的，必须新添加租户，最后租户添加找了好几个人失败告终。晚上6点多回到宿舍洗澡洗了一个小时，八点从地铁坐到学校门口，一个半小时才到。十点开始实验，忙到十一点，晚上和小洪闲聊了一会，该睡觉了，明天继续努力。算法这周也是一道题没刷，明天目标是四个算法课补齐，攻下树结构。加上理解开发csv connect or,再加上半天左右实验。...
2021-01-15 23:56:07
127
原创 总结，开始看presto源码
忙了一天，整理SQL建表语句和不支持的原因，好吧，Hbase崩了，没办法测试。动态过滤现在还不懂是什么，数据布置了新作业，让看presto原码，加油！好好搞起来。争取把最优先级的任务先完成:测试结果对比，源码分析:连接器hudi, iceberg重点开发的代码SPI部分，RESTAPI部分。今天就先把connect or开发，REST的部分先整理了，明天好好理解下。...
2021-01-12 23:47:54
685
1
原创 返校做实验
今天做了一天实验，犯拖延症的我，早上六点多起床，刷个牙洗个头摸了一个小时7/30，到地铁8点，回学校下地铁凤起路九点了，不得已打了车9/30到，做实验10点，重点浪费了一个小时回了宿舍和试剂部，晚上拖了贺老师一个小时，拖延症真的很严重。哎！明天计划，把PPT做了，一定要做完，不要磨蹭了，后天回学校做实验，提前回去。...
2021-01-08 23:43:30
133
原创 阶段2日志
从早上九点忙到现在，本来可避免的坑让我的不细心重新踏过，反独操作，Open lk终究跑通，动态目录也成功了。插数据插了一晚上，本想让他半夜跑一跑。什么也没做，明天滚回学校做实验了。...
2021-01-07 23:50:27
91
原创 2021年新年计划
一月月度计划，刷完算法高频100道，总结套路一月学习计划，http网络编程，jvm,并发编程学会一月复习计划，Java基础5天，jvm5天，并发编程5天，全部要会，spark5天，spark streaming5天，hbase五天每天刷题，至少5道，总结，每天坚持听一课时补一节课，大约花费4h每天坚持刷算法面试十道大约2h每天做一个单元的Java,大约2h...
2021-01-01 22:10:37
264
原创 暑假实习报告明天截止？
今天装了mysql8报了很多错，想学个东西容易吗？环境这个事情又花了我半天时间，只有不到半天来学习mysql。哎，不会抓重点，要不然昨天就学完了，今天就可以把给做的事情提前昨完，不得已，又要写暑假实习报告，得熬夜啊。争取四点结束战斗吧！？...
2020-12-30 23:30:24
120
原创 《MySQL8安装报错小全》
查看了连续两天的博客资料，几乎对我的问题起不到解决作用，中途甚至重装了linux版本的MySQL8，浪费了我大量宝贵的时间学习SQL（赶工作进度），本身又是一个完美主义者，想先干好这件事再做下一件。很多blog没有把我的Active状态从deactive变回来，幸好有篇文章帮助了我：[错误解决之"Failed to start MySQL Server]错误解决之"Failed to start MySQL Server"注意!注意!注意!下面的操作,请您看完再自行决定要不要采纳这个建议!(因为会将 /v
2020-12-30 11:32:04
302
原创 验证完动态目录和装环境浪费的半天
彻夜没搞好，早上决定换个集群试试，总感觉是集群的问题，就是找不出，然后边做笔记边实验。昨晚搞到凌晨四点半，写完周记，回去倒头就睡，一直睡到早上十点吧。总算时间休息过来了。下午把文档整理好，四点了，本可以看看SQL，搞了环境两个小时，没搞好，晚上又装各种压缩包软件，有点求大求全，也没刷题，浪费了七八个小时。准备干到三点了，最好别。还是这个臭毛病，做的规划永远完不成，贪大求全，陷入死胡同！...
2020-12-29 23:58:58
87
原创 复习方略
今天本来想刷算法，刷SQL的，从下午忙到现在，实际工作不超过一个小时，都在忙着配动态目录，结果huawei那边也不清不问题出在哪里，周一会给到完整的curl命令，画了一个思维导图，电脑上画的，果然记忆深刻。算法一周没刷题了，早读连续两周半个月多没搞了，说实话确实浪费了不少宝贵的时间，要学会抓重点，还想两头兼顾不落空的话就必须时时刻刻规划好自己的事情！看了下实习的工作薪酬时间是周一到周五有工资，加班也白加班。所以为何不把时间用来复习呢？下面简单说一下复习的时间规划：6：30–9：30早读18：00–2
2020-12-26 23:59:23
117
转载 2020-12-24《重学操作系统——上》林䭽 前阿里巴巴高级技术专家（P8）
只做最精炼的知识，让记忆更加深刻，让面试见鬼去吧！！！《重学操作系统》是前阿里巴巴高级技术专家，高级架构师（P8）林䭽 在Lagou教育平台上开设的course，时间比较长，共8 个模块，合计 39 个课时，为精炼重点，帮助快速消化吸收，想整理出上下两部分。开篇词 | 为什么大厂面试必考操作系统？（了解）任何研发工具学下去也都会碰到操作系统，比如：MySQL 深入学下去会碰到 InnoDB 文件系统；HBase 深入学下去会有 Hadoop 文件系统（HDFS）；Redis 深入学..
2020-12-24 02:02:55
4117
原创 2020-12-23《linux必知必会》——常用压缩解压命令
linux下常见的的tar、rar、zip、7z 压缩解压缩命令-c: 建立压缩档案-x：解压-t：查看内容-r：向压缩归档文件末尾追加文件-u：更新原压缩包中的文件这五个是独立的命令，压缩解压都要用到其中一个，可以和别的命令连用但只能用其中一个。下面的参数是根据需要在压缩或解压档案时可选的。-z：有gzip属性的-j：有bz2属性的-Z：有compress属性的-v：显示所有过程-O：将文件解开到标准输出下面的参数-f是必须的-f: 使用档案名字，切记，这个参..
2020-12-23 12:26:12
206
原创 《Linux必知必会003》——curl命令详解
《Linux必知必会003》——curl命令详解转载：https://blog.csdn.net/zhujy5/article/details/88391070curl(CommandLine Uniform Resource Locator),即在命令行中利用URL进行数据或者文件传输。https://curl.haxx.se/这是curl的官网。可以从上面的官网地址下载最新的curl版本。同时可以在官网看出curl支持的各种协议(如HTTP, HTTPS, IMAP, IMAPS, LDA
2020-12-23 11:53:30
2092
原创 2020-12-22《Task06：综合练习——习题答案参考》
Task06：综合练习组队学习SQL编程语言练习一: 各部门工资最高的员工（难度：中等）创建Employee 表，包含所有员工信息，每个员工有其对应的 Id, salary 和 department Id。+----+-------+--------+--------------+| Id | Name | Salary | DepartmentId |+----+-------+--------+--------------+| 1 | Joe | 70000 | .
2020-12-22 22:05:06
300
转载 2020-12-22《SQL训练营——Task05：SQL高级处理》
Task05：SQL高级处理组队学习SQL编程语言转载：http://datawhale.club/t/topic/365，第20期 学习者手册（SQL）5.1 窗口函数5.1.1 窗口函数概念及基本的使用方法窗口函数也称为OLAP函数。OLAP 是OnLine AnalyticalProcessing 的简称，意思是对数据库数据进行实时分析处理。为了便于理解，称之为窗口函数。常规的SELECT语句都是对整张表进行查询，而窗口函数可以让我们有选择的去某一部分数据进行汇总、计算和排序。
2020-12-22 21:58:50
255
转载 2020-12-22《SQL训练营——Task04：集合运算》
Task04：集合运算组队学习SQL编程语言转载：http://datawhale.club/t/topic/4734.1 表的加减法4.1.1 什么是集合运算集合在数学领域表示“各种各样的事物的总和”，在数据库领域表示记录的集合.。具体来说，表、视图和查询的执行结果都是记录的集合，其中的元素为表或者查询结果中的每一行。在标准 SQL 中，分别对检索结果使用UNION，INTERSECT，EXCEPT来将检索结果进行并，交和差运算，像UNION，INTERSECT，EXCEP...
2020-12-22 21:53:33
719
转载 2020-12-22《趣味手撕实战HTTP协议》
HTTP协议 实战步骤详解《HTTP协议系列教材 （一）- 教程》工具版本兼容问题HTTP 超文本传输协议HyperTextTransferProtocol当我们在浏览器的地址栏输入一个地址的时候，就能够访问服务器的某个页面这个过程本身就是两个应用程序之间的交互，一个应用程序是浏览器，另一个应用程序是服务器。协议是什么？协议就是不同的应用程序之间按照事先做好的约定进行的通信。 这样就能互相读懂对方的意思。浏览器和WEB服务器之间，使用的就是一种叫做HTTP的协议。 这...
2020-12-22 16:07:37
182
转载 2020-12-22《linux必知必会002》——Linux 系统目录结构
Linux系统目录结构登录系统后，在当前命令窗口下输入命令：ls /你会看到如下图所示:树状目录结构：以下是对这些目录的解释： /bin： bin 是 Binaries (二进制文件) 的缩写, 这个目录存放着最经常使用的命令。 /boot： 这里存放的是启动 Linux 时使用的一些核心文件，包括一些连接文件以及镜像文件。 /dev ： dev 是 Device(设备) 的缩写, 该目录下存放的是 ...
2020-12-22 11:32:47
142
转载 2020-12-21《SQL训练营——Task03：复杂一点的查询》
Task03：复杂一点的查询组队学习SQL编程语言之前接触了sql基本的查询用法，接下来介绍一些相对复杂的用法。3.1 视图我们先来看一个查询语句（仅做示例，未提供相关数据）SELECT stu_name FROM view_students_info;单从表面上看起来这个语句是和正常的从数据表中查询数据是完全相同的，但其实我们操作的是一个视图。所以从SQL的角度来说操作视图与操作表看起来是完全相同的，那么为什么还会有视图的存在呢？视图到底是什么？视图与表有什么不同呢？3.1
2020-12-21 23:24:26
212
原创 2020-12-21《SQL训练营——Task02：基础查询与排序》
Task02：基础查询与排序组队学习SQL编程语言2.1 SELECT语句基础2.1.1 从表中选取数据SELECT语句从表中选取数据时需要使用SELECT语句，也就是只从表中选出（SELECT）必要数据的意思。通过SELECT语句查询并选取出必要数据的过程称为匹配查询或查询（query）。基本SELECT语句包含了SELECT和FROM两个子句（clause）。示例如下：SELECT <列名>, FROM <表名>;其中，SELECT子句中
2020-12-21 23:14:43
333
原创 《命令行——win&linux必知必会001》——服务器度端口占用排查
系列文章《linux必知必会001》服务器度端口占用排查启动了服务器，会占用端口8983。 倘若端口被占用，会启动失败，排查办法请看 端口被占用步骤 1 : 查看80端口被哪些程序占用了,使用命令netstat -ano|findstr "80"查看 端口号包含"80"的占用情况查询结果找到 80，8009，8005 （这三个都包含80）。步骤 2 : 根据pid（进程id） 查询对应的应用程序对应的pid(process id) 进程id 是1828,使用命令: tasklis
2020-12-21 21:35:07
229
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人