一个摄影师的编程路

个人学习笔记,若有不同意见,欢迎批评指正。

Springbatch源数据建表语句及初始化

Spring batch的运行过程中会将任务状态记录到框架预设的表中,表名有: batch_job_execution batch_job_execution_context batch_job_execution_params batch_job_execution_seq batch_job...

2018-12-21 09:34:03

阅读数 566

评论数 0

阿里分布式数据库服务(DRDS)【学习笔记】

关系型数据库服务(Relational Database Service,简称RDS):是一种即开即用、稳定可靠、可弹性伸缩的在线数据库服务。具有多重安全防护措施和完善的性能监控体系,并提供专业的数据库备份、恢复及优化方案,使您能专注于应用开发和业务发展。

2017-01-19 15:10:12

阅读数 10964

评论数 0

Kafka本机搭建、常用命令、以及Rest模式||Kafka在zookeeper中的注册关系

Kafka简单教程

2017-01-18 10:52:27

阅读数 5142

评论数 3

删除git保存的用户名 密码

运行一下命令缓存输入的用户名和密码: git config --global credential.helper wincred 清除掉缓存在git中的用户名和密码 git credential-manager uninstall

2019-05-14 17:34:51

阅读数 2

评论数 0

国内加速访问Github的办法

一、打开IPAddress.com网站,查询下面3个网址对应的IP地址 github.com assets-cdn.github.com github.global.ssl.fastly.net 二、修改本地电脑系统hosts文件 路径 C:WindowsSystem32driv...

2019-05-10 17:50:27

阅读数 50

评论数 1

排序算法

冒泡排序 void bubbulingSort(int[] nums){ for(int i = 0; i < nums.length; i++){ for(int j = i + 1; j &am...

2018-12-08 11:42:50

阅读数 56

评论数 1

Java泛型的一个简单应用

Java泛型的一个简单应用 泛型的使用一直不太明确,今天写了个例子验证了下,先定义了三个类: Peple类: public class People<T> { String name; int age; List&...

2018-12-07 12:54:07

阅读数 121

评论数 0

Springbatch框架系列(1-1)Spring batch介绍

本博文主要从以下几个方面进行介绍: 了解当下批处理框架 介绍下spring batch的主要特点 批处理高效的读写数据 用Spring batch实现一个批处理任务 Spring batch任务测试 Spring batch之所以出现,是因为批处理应用对于写是一种挑战:使...

2018-12-06 09:41:54

阅读数 37

评论数 0

Springbatch框架系列介绍

Spring batch也是当下比较流行的批处理框架 项目组最近在做后台业务重构,根据业务场景选型后,用spring下的springbatch作为批处理框架,进行对现有业务重构。 Spring batch是一个轻量级的、全面的批处理框架,旨在开发对企业系统日常运营至关重要的强大批处理应用程序。S...

2018-11-14 22:28:18

阅读数 41

评论数 0

hive on spark开发demo

public class SparkHiveTest { public static void main(String[] args) { String warehouseLocation = "hdfs://10.1X4.XX2.X...

2018-10-30 12:51:14

阅读数 177

评论数 0

Hive的metastore及其配置管理

在学习Hive的配置管理参数时,曾将参数分为四类:Hive管理参数、Hive元存储(Metastore)管理参数、与Hadoop交互的管理参数、用于传递运行时信息的参数,当时并没有对Metastore参数进行深入的学习,现在就开始学习这部分的内容。 Hive中表和分区的所有元数据都存储在Hive的...

2018-10-26 14:10:52

阅读数 32

评论数 0

F5负载均衡原理

  2. 负载平衡典型流程     通过VIP来截获合适的需要负载平衡的流量   服务器监控和健康检查,随时了解服务器群的可用性状态  负载均衡和应用交换功能,通过各种策略导向到合适的服务器    2.1   通过VIP来截获合适的需要负载平衡的流量  在BIGIP上通过设置VIP来截获需要...

2018-10-22 11:11:15

阅读数 33

评论数 0

docker学习入门小结

公司为了进一步业务的发展需要,组织了为期两天的docker容器化培训,也对该领域的大致概念、发展方向有了一定的了解。针对传统软件开发中存在的诸多问题,docker借助集装箱的成功经验应运而生,docker主要解决了软件生命周期中的快速发布问题,下面对docker的基本概念及部署做简要介绍,目前也在...

2018-10-22 11:09:38

阅读数 24

评论数 0

Hadoop下的connect refused问题

Hadoop下的connect refused问题 问题产生原因: 假设hadoop正常运行中出现这个问题,那有可能在重启hadoop的过程中,hadoop集群出现了异常。 解决方法: 这个时候jps会发现,有得机器上的服务启动不全,   正常情况下应该是下图中的服务: 这是mast...

2018-10-21 12:58:14

阅读数 156

评论数 0

Git创建分支并提交代码

step1,在本地新建分支 git branch newbranch step2:把本地分支push到远程 git push origin newbranch step3:切换到该分支 git checkout newbranch step4:查看本地修改 git status s...

2018-08-24 14:59:37

阅读数 381

评论数 3

Mysql时间函数及格式处理

MySQL 获取当前日期及日期格式 获取系统日期: NOW() 格式化日期: DATE_FORMAT(date, format) 注: date:时间字段 format:日期格式 返回系统日期,输出 2009-12-25 14:38:59 select now(); 输出 09-12...

2018-08-23 15:35:30

阅读数 117

评论数 0

Maven工程中的pom文件详解

<span style="padding:0px; margin:0px"><project xmlns="http://maven.apache.org/POM/4.0.0&a...

2018-07-26 09:17:44

阅读数 135

评论数 0

Spark项目开发--Spark sql读写Oracle、Mysql【DRDS】、Hbase数据库--Java实现

Spark sql读写Oracle数据库–Java实现 作者也是初入Spark开发没多长时间,在写代码的过程中也是踩了不少坑,毕竟一提到Spark的项目大部分都是Scala实现的,虽说Scala跟Java相似度极高,但是在接口的使用上还是有较大差异的。 下面讲一个使用Spark sql读写...

2018-06-02 09:42:07

阅读数 1483

评论数 0

Spark项目开发及原理介绍

Spark项目开发入门之WordCounter 环境介绍 IDEA MAVEN工程 Spark2.2.0 local模式 pom.xml文件配置 <?xml version="1.0...

2018-03-13 13:49:18

阅读数 1779

评论数 0

storm项目入门之wordCounter

storm项目入门之wordCounter 最近在看storm,先调个小例子吧,后续学习笔记奉上: 环境 Intellij IDEA Storm1.1.1 代码分四部分:pom文件、Spout,Bolt,Topology 第一部分pom:pom.xml &...

2018-02-28 22:07:14

阅读数 98

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭