- 博客(8)
- 资源 (61)
- 收藏
- 关注
原创 Sqoop跨数据库神器的基本使用
Sqoop简介开源工具,主要在关系型数据库和非关系型数据库之间传递消息,可以将hadoop数据导入关系型数据库(MySQL等),也可以把关系型数据导入到HDFS中。工作原理和hive类似也是把导入或者导出的命令翻译成M-R程序安装以及配置直接下载1.4.7解压,配置一个Home在path下指定home的bin目录,测试测试连接数据库首先拷贝jdbc连接工具到sqoop的lib目录下sqoop list-databases --connect jdbc:mysql://localhost:
2020-11-30 10:08:58 898
原创 Hadoop2.7.3 单机版安装
安装这里下载源码并编译到 /app目录下配置Hadoop相关环境变量前提:配置了JAVA_HOME,主机名为hadoop101配置hadoop_homevim /etc/profileexport JAVA_HOME=/app/java/jdk1.8.0_131export PATH=$JAVE_HOME/bin:$PATHexport CCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/libexport HADOOP_HOME=/app/ha
2020-11-30 10:07:49 169
原创 一码多付(扫码支付)原理
背景在最初的医院自助缴费的项目中,支付宝和微信两种支付方式是分别生成了两个二维码进行支付的,这种实现思路很正宗,但是存在一个问题就是,如果用户本来想用微信支付,却误点击成支付宝,用户又偏偏只有微信有零钱,这样子数据库就新生成了一张无用的订单,还浪费用户表情,因此研究了下一码多付的原理,这里只集成了微信和支付宝两种支付方式。原理用户扫描的二维码其实是一个固定的链接地址,我们需要通过这个固定的链接判断扫码的浏览器是微信还是支付宝,判断依据://获取浏览器标识$ua = $_SERVER['HTTP
2020-11-30 10:06:51 3203
原创 laydate日期插件弹出闪退和多次闪退问题解决
情况1:页面上多个时间插件点击第一个input 日期,可以正常选择日期,之后点击任何一个,都会闪一下然后消失,无法正常选择;原因:lay-key的值的问题,需要循环重新为lay-key赋值。案例:<input type="text" class="test" class="layui-input"><input type="text" class="test" class="layui-input"><input type="text" class="t
2020-11-25 17:31:29 1151
原创 Java中动态绑定机制
总结:java的动态绑定机制:成员方法在执行的过程中JVM会将当前方法和当前调用对象实际内存进行绑定,但是成员属性是没有动态绑定机制的,属性在哪里声明就在哪里使用。结论的来源理论依据来自于jvm编译原理,有兴趣的可以亲自去试试。以下通过一个简单的继承关系来说明class Test{ public static void main(String args[]){ AAA aaa=new BBB(); System.out.println(aaa.ge
2020-11-17 20:13:24 928 2
原创 接口对接小工具php版本
对接接口的时候,常常需要做模拟数据,有的文档里面有现成的json或者表格。如果遇到json字段比较多的情况,我们需要一个一个的拷贝粘贴,费时费力。因此写个小工具,json转为postman需要提交的格式或者直接生成php变量。我们直接把对应postman这一栏的拷贝到欢迎随时来撩...
2020-11-05 09:00:22 333
原创 flume日志处理的利器入门
简介Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。flume优势
2020-11-02 21:24:00 270
原创 Hive入门级教程
Hive是个啥东西Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。说白了就是把HQL转换成Map-Reduce程序运行。来个小小的图示说明下sql–>mapreduce的过程Hive处理的数据是存储在HDFS上的,如下图Hive分析数据底层的实现是MapReduce执行程序运行在Yarn上为啥要使用Hive对于单纯的执行Map-Reduce程序来说,需要话时间去学习,对开发要求比较高。提供类SQL语言开发,基本上学过SQ
2020-11-01 15:29:28 1701 1
专栏大数据中windows下搭建kafka集群中需要用到的安装包
2022-07-25
两套苹果CMS付费模板:MXone自适应模板+仿电影先生2.0
2022-04-27
外卖侠CPS小程序源码
2022-04-27
二手交易市场整站源码可以自己搭建试试
2022-04-24
Java萝卜影视4.0.5源码【完美修复完整版】
2022-04-24
分享带壳截图小程序源码
2022-02-15
影视小程序源码苹果CMS后台
2022-02-14
微信社群人脉网站源码分享
2022-02-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人