![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
学习
DemonCapricorn
这个作者很懒,什么都没留下…
展开
-
day01 linux的命令操作
linux的命令操作1、日常操作命令 **查看当前所在的工作目录pwd**查看当前系统的时间 date**查看有谁在线(哪些人登陆到了服务器)who 查看当前在线last 查看最近的登陆历史记录2、文件系统操作**ls / 查看根目录下的子节点(文件夹和文件)信息ls -al -a是原创 2018-01-25 15:38:42 · 155 阅读 · 0 评论 -
sparkstreaming消费kafka如何保证输出结果只会产生一次?(事务性)
最近开始使用sparkstreaming+kafka0.10,使用过程中碰到问题: steaming采用的direct方式 ,(这种方式和receiver方式的对比性能会好很多),spark计算完数据之后有一个结果入库操作,现在问题来了,采用自动提交的时候程序二次启动经常会出现重复消费的情况,并且怎么保证这个结果只生产一次呢?首先介绍一下sparkstreaming内部是怎么做到消息...转载 2018-11-05 15:11:01 · 2056 阅读 · 3 评论 -
轻松理解AOP思想(面向切面编程) 本文旨在帮助还没有理解AOP的童鞋看透弄懂AOP,也欢迎高手批评指正。 先说一个Spring是什么吧,大家都是它是一个框架,但框架这个词对新手有点抽象,以致于越
轻松理解AOP思想(面向切面编程)转载自:https://my.oschina.net/yanquan345/blog/203415 本文旨在帮助还没有理解AOP的童鞋看透弄懂AOP,也欢迎高手批评指正。先说一个Spring是什么吧,大家都是它是一个框架,但框架这个词对新手有点抽象,以致于越解释越模糊,不过它确实是个框架的,但那是从功能的角度来定义的,从本质意义上来讲,Spring是一...转载 2018-08-02 17:02:56 · 150 阅读 · 0 评论 -
hadoopday01
1.准备Linux环境1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.1.0 子网掩码:255.255.255.0 -> apply -> ok回到windows --> 打开网络和共享中心 -> 更改适配器设置 -> 右键VMnet1 -> 属性 ->原创 2018-01-29 16:27:53 · 140 阅读 · 0 评论 -
寒假自学计划及完成率
从今天起,每天以博客的形式记录每天的学习计划及完成率7天计划及完成率日期计划内容完成内容额外25传智大数据3期day01 day02day01 day02一半 26传智大数据3期day03 day04day02 day03一半 27 周六传智大数据3期day05 国赛答疑,问题整理day原创 2018-01-25 11:27:01 · 196 阅读 · 0 评论 -
day04 并发动态大数据基础机制
进程:它是内存中的一段独立的空间,可以负责当前应用程序的运行。当前这个进程负责调度当前程序中的所有运行细节。线程:它是位于进程中,负责当前进程中的某个具备独立运行资格的空间。进程是负责整个程序的运行,而线程是程序中具体的某个独立功能的运行。一个进程中至少应该有一个线程。多线程:在一个进程中,我们同时开启多个线程,让多个线程同时去完成某些任务(功能)。(比如后台服务系统,就可原创 2018-01-28 11:15:56 · 209 阅读 · 0 评论 -
day02补充sed awk
sed命令速查1. Sed简介sed 是一种在线编辑器,它一次处理一行内容。处理时,把当前处理的行存储在临时缓冲区中,称为“模式空间”(pattern space),接着用sed命令处理缓冲区中的内容,处理完成后,把缓冲区的内容送往屏幕。接着处理下一行,这样不断重复,直到文件末尾。文件内容并没有 改变,除非你使用重定向存储输出。Sed主要用来自动编辑一个或多个文件;简化对文件的反复操作;编转载 2018-01-26 14:02:47 · 169 阅读 · 0 评论 -
day02
软件安装1、如何上传安装包到服务器**可以使用图形化工具,如: filezilla**可以使用sftp工具: alt+p 调出后,用put命令上传上传(如果不cd指定目录,则上传到当前用户的主目录):sftp> cd /home/ sftp> put C:\Users\Administrator\Desktop\day02\soft\jdk-7u45-原创 2018-01-25 19:00:30 · 192 阅读 · 0 评论