- 博客(85)
- 资源 (5)
- 收藏
- 关注
原创 Hadoop天气数据分析案例
需求:找出每个月气温最高的2天(案例测试)数据源:1949-10-01 14:21:0234c1949-10-01 19:21:0238c1949-10-02 14:01:0236c1950-01-01 11:21:0232c1950-10-01 12:21:0237c1951-12-01 12:21:0223c1...
2019-09-21 18:29:00
6419
原创 Hadoop——WordCount实例及源码分析
二话不说,先上代码与执行。package com.yarn.wc;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org....
2019-09-21 18:28:09
575
原创 Hadoop高可用搭建部署测试
同步时间date -s "2019-8-22 09:36:15"实现从机到主机之间互相通信ssh免密钥(本机生成)ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsacat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys分发密钥到主机(并重命名区分 避免覆盖)scp id_dsa.pub...
2019-09-21 18:26:27
520
原创 Yarn ResourceManager高可用集群搭建
配置在Zookeeper之上,进行故障转移单节点低可用配置:进入mapred-site.xml添加<property><name>mapreduce.framework.name</name><value>yarn</value></property>进入 y...
2019-09-21 18:25:07
892
原创 Hadoop全分布分配部署测试
设立各点通讯设置时间同步(CRT下选择对所有窗口发送)date -s "2019-8-21 11:15"密钥分发:scp id_dsa.pub bigdata02:`pwd`/bigdata01.pub//从bigdata01向其余从机分发公钥,公钥的名称为了区分注意要变化各节点把bigdata01的公钥追加到认证文件里:cat ~/.ssh/bigdata01.p...
2019-09-21 18:24:27
378
原创 Hadoop伪分布式搭建启动测试
ssh免密钥(本机)ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsacat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keysJAVA_HOMEJAVA_HOME=/opt/modules/jdk1.7.0_79export PATH=$PATH:$JAVA_HOME/bincore-si...
2019-09-21 18:23:25
290
原创 配置HADOOP_HOME以及部分功能
配置HADOOP_HOME配置完成后可以直接通过hadoop中的命令执行以下操作hdfs开启namenode、datanode格式化文件系统:$ bin/hdfs namenode -format启动服务:$ sbin/hadoop-daemon.sh start namenode$ sbin/hadoop-daemon.sh start data...
2019-09-21 18:21:06
2992
原创 Hadoop架构
Hadoop架构HDFS:分布式文件存储YARN:分布式资源管理MapReduce:分布式计算Others:利用YARN的资源管理功能实现其他的数据处理方式内部各个节点基本都是采用Master-Worker架构HDFS:Hadoop Distributed File System ,分布式文件系统Block数据块1. 基本存储单位,一般...
2019-09-21 18:19:15
250
原创 微信小程序实战——消息通知界面
先给大家上一个实战的效果图这个是我们小组在开发的一个消息界面,用于实现简单的交流通信功能,只实现了简单的前端框架,下面献上代码供大家参考学习,若有不足,请多多指教。wxml部分<!--头部消息中心--><view class='title' style='height:{{navH}}px' catchtouchmove='true'> &l...
2019-05-26 20:35:39
19036
19
原创 微信小程序学习之路——API获取二维码
获取二维码通过后台接口可以获取小程序任意页面的二维码,扫描该二维码可以直接进入小程序对应的页面。可以使用开发工具 1.02.1803130 及以后版本通过二维码编译功能调试所获得的二维码为满足不同需求和场景,这里提供了三个接口,开发者可挑选适合自己的接口。 A接口,生成小程序码,可接受path参数较长,生成个数受限。 B接口,生成小程序码,可接受页面参数较短,生成个数不受限。 C接...
2019-04-09 23:14:40
2789
原创 微信小程序学习之路——API分享
分享小程序分享页面需要在Page中定义onShareAppMessage函数,设置该页面分享信息,只有定义了该事件函数,右上角才会显示“分享”按钮。用户点击分享按钮时会触发该函数,该函数返回的Object对象将用于定义分享内容,目前分享图片不能自定义,系统会取当前页面,从顶部开始,高度为80%屏幕宽度的图像作为分享图片。返回Object属性如下:title:分享标题,默认值为当前小程序名称...
2019-04-09 23:09:05
1169
原创 微信小程序学习之路——API客服消息
客服消息在页面中使用<button open-type="contact" />可以显示进入客服会话按钮。当用户在客服会话发送消息、或由某些特定的用户操作引发事件推送时,微信服务器会将消息或事件的数据包发送到开发者填写的 URL(详情请参考消息推送)。开发者收到请求后可以使用发送客服消息接口进行异步回复。1.接入指引1)填写开发者服务器配置登陆微信公众平台,...
2019-04-09 22:36:08
5188
原创 微信小程序学习之路——API模板消息
模板消息1.调用模板消息接口发送模板消息需要通过POST方式调用微信后台接口,接口调用可以是前台调用,也可以是后台调用,接口地址为:POST https://api.weixin.qq.com/cgi-bin/message/wxopen/template/send?access_token=ACCESS_TOKENpost参数如下:属性 类型 默认值 必填...
2019-04-09 18:48:39
1602
原创 微信小程序学习之路——API微信支付
微信支付wx.requestPayment(Object)发起微信支付,参数属性如下:属性 类型 默认值 必填 说明 timeStamp string 是 时间戳,从 1970 年 1 月 1 日 00:00:00 至今的秒数,即当前的时间 nonceStr string 是 随机字符串,长度为32...
2019-04-09 17:13:21
676
原创 微信小程序学习之路——API用户信息
用户信息wx.getUserInfo(Object)获取用户信息,需要首先调用wx.login接口,Object参数属性如下:属性 类型 默认值 必填 说明 withCredentials boolean 否 是否带上登录态信息。当 withCredentials 为 true 时,要求此前有调用过 wx.login 且登录态尚未...
2019-04-09 17:08:38
781
原创 微信小程序学习之路——API登陆
登陆在小程序中,登陆分为2步,第一步需要获取登陆凭证,第二步用用户凭证获取用户登陆态信息,登陆态信息可用于后续支付等流程。1.wx.login(Object)调用接口获取登陆凭证(code)进而换取用户登陆信息,包括用户唯一表示(openid)及本次登陆的会话密钥(session_key),用户数据的加解密通信需要依赖会话密钥完成,Object参数属性如下:属性 类型 ...
2019-04-09 16:16:39
1087
原创 微信小程序学习之路——API界面(二)
绘图之前提到过<canvas/>组件,再<canvas/>组件中画图必须通过本小结介绍的API实现,<canvas/>中存在一个二维坐标体系,左上角的坐标为(0,0)所有绘图API都会基于这个坐标体系进行绘制。绘图过程大致可以分为3步:创建执行上下文 通过执行上下文进行绘制描述 调用绘图API,将绘制描述绘制到<canvas/>示例代码...
2019-04-08 18:41:40
1425
原创 微信小程序学习之路——API界面(一)
界面交互反馈wx.showToast(Object)显示消息提示框,Object参数的属性如下:属性 类型 默认值 必填 说明 最低版本 title string 是 提示的内容 icon string 'success' 否 图标 image string ...
2019-04-07 12:06:54
876
原创 微信小程序学习之路——API设备
设备系统wx.getSystemInfo(Object)异步获取系统信息,Object参数属性为:属性 类型 默认值 必填 说明 success function 否 接口调用成功的回调函数 fail function 否 接口调用失败的回调函数 complete function ...
2019-04-06 16:47:27
827
原创 微信小程序学习之路——API位置
位置获取位置在国际上,坐标体系有多套标准,小程序支持WGS84标准和GCJ02标准,WGS84是地球坐标,国际上通用的坐标系。设备一般包含的GPS芯片或者北斗芯片所获取的经纬度是WGS84地理做白哦西。GCJ02坐标系为火星坐标系,是由中国国家测绘局指定的地理信息系统的坐标系统,它是由WGS84坐标系加密后的坐标系,它是在小程序中,查看位置需要使用GCJ02标准坐标。wx.getLoc...
2019-04-04 19:36:22
1303
hadoop-notebook.pdf
2019-09-21
微信小程序实战入门 内含完整实例解析_刘明洋_人民邮电
2019-04-03
微信小程序:开发入门及案例详解
2019-04-03
微信小程序快速开发 视频指导版
2019-04-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅