- 博客(79)
- 资源 (5)
- 收藏
- 关注
原创 Hadoop天气数据分析案例
需求:找出每个月气温最高的2天(案例测试)数据源:1949-10-01 14:21:0234c1949-10-01 19:21:0238c1949-10-02 14:01:0236c1950-01-01 11:21:0232c1950-10-01 12:21:0237c1951-12-01 12:21:0223c1...
2019-09-21 18:29:00
6403
原创 Hadoop——WordCount实例及源码分析
二话不说,先上代码与执行。package com.yarn.wc;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org....
2019-09-21 18:28:09
559
原创 Hadoop高可用搭建部署测试
同步时间date -s "2019-8-22 09:36:15"实现从机到主机之间互相通信ssh免密钥(本机生成)ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsacat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys分发密钥到主机(并重命名区分 避免覆盖)scp id_dsa.pub...
2019-09-21 18:26:27
515
原创 Yarn ResourceManager高可用集群搭建
配置在Zookeeper之上,进行故障转移单节点低可用配置:进入mapred-site.xml添加<property><name>mapreduce.framework.name</name><value>yarn</value></property>进入 y...
2019-09-21 18:25:07
876
原创 Hadoop全分布分配部署测试
设立各点通讯设置时间同步(CRT下选择对所有窗口发送)date -s "2019-8-21 11:15"密钥分发:scp id_dsa.pub bigdata02:`pwd`/bigdata01.pub//从bigdata01向其余从机分发公钥,公钥的名称为了区分注意要变化各节点把bigdata01的公钥追加到认证文件里:cat ~/.ssh/bigdata01.p...
2019-09-21 18:24:27
369
原创 Hadoop伪分布式搭建启动测试
ssh免密钥(本机)ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsacat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keysJAVA_HOMEJAVA_HOME=/opt/modules/jdk1.7.0_79export PATH=$PATH:$JAVA_HOME/bincore-si...
2019-09-21 18:23:25
286
原创 配置HADOOP_HOME以及部分功能
配置HADOOP_HOME配置完成后可以直接通过hadoop中的命令执行以下操作hdfs开启namenode、datanode格式化文件系统:$ bin/hdfs namenode -format启动服务:$ sbin/hadoop-daemon.sh start namenode$ sbin/hadoop-daemon.sh start data...
2019-09-21 18:21:06
2985
原创 Hadoop架构
Hadoop架构HDFS:分布式文件存储YARN:分布式资源管理MapReduce:分布式计算Others:利用YARN的资源管理功能实现其他的数据处理方式内部各个节点基本都是采用Master-Worker架构HDFS:Hadoop Distributed File System ,分布式文件系统Block数据块1. 基本存储单位,一般...
2019-09-21 18:19:15
249
原创 微信小程序实战——消息通知界面
先给大家上一个实战的效果图这个是我们小组在开发的一个消息界面,用于实现简单的交流通信功能,只实现了简单的前端框架,下面献上代码供大家参考学习,若有不足,请多多指教。wxml部分<!--头部消息中心--><view class='title' style='height:{{navH}}px' catchtouchmove='true'> &l...
2019-05-26 20:35:39
18969
19
原创 微信小程序学习之路——API获取二维码
获取二维码通过后台接口可以获取小程序任意页面的二维码,扫描该二维码可以直接进入小程序对应的页面。可以使用开发工具 1.02.1803130 及以后版本通过二维码编译功能调试所获得的二维码为满足不同需求和场景,这里提供了三个接口,开发者可挑选适合自己的接口。 A接口,生成小程序码,可接受path参数较长,生成个数受限。 B接口,生成小程序码,可接受页面参数较短,生成个数不受限。 C接...
2019-04-09 23:14:40
2758
原创 微信小程序学习之路——API分享
分享小程序分享页面需要在Page中定义onShareAppMessage函数,设置该页面分享信息,只有定义了该事件函数,右上角才会显示“分享”按钮。用户点击分享按钮时会触发该函数,该函数返回的Object对象将用于定义分享内容,目前分享图片不能自定义,系统会取当前页面,从顶部开始,高度为80%屏幕宽度的图像作为分享图片。返回Object属性如下:title:分享标题,默认值为当前小程序名称...
2019-04-09 23:09:05
1133
原创 微信小程序学习之路——API客服消息
客服消息在页面中使用<button open-type="contact" />可以显示进入客服会话按钮。当用户在客服会话发送消息、或由某些特定的用户操作引发事件推送时,微信服务器会将消息或事件的数据包发送到开发者填写的 URL(详情请参考消息推送)。开发者收到请求后可以使用发送客服消息接口进行异步回复。1.接入指引1)填写开发者服务器配置登陆微信公众平台,...
2019-04-09 22:36:08
5068
原创 微信小程序学习之路——API模板消息
模板消息1.调用模板消息接口发送模板消息需要通过POST方式调用微信后台接口,接口调用可以是前台调用,也可以是后台调用,接口地址为:POST https://api.weixin.qq.com/cgi-bin/message/wxopen/template/send?access_token=ACCESS_TOKENpost参数如下:属性 类型 默认值 必填...
2019-04-09 18:48:39
1563
原创 微信小程序学习之路——API微信支付
微信支付wx.requestPayment(Object)发起微信支付,参数属性如下:属性 类型 默认值 必填 说明 timeStamp string 是 时间戳,从 1970 年 1 月 1 日 00:00:00 至今的秒数,即当前的时间 nonceStr string 是 随机字符串,长度为32...
2019-04-09 17:13:21
656
原创 微信小程序学习之路——API用户信息
用户信息wx.getUserInfo(Object)获取用户信息,需要首先调用wx.login接口,Object参数属性如下:属性 类型 默认值 必填 说明 withCredentials boolean 否 是否带上登录态信息。当 withCredentials 为 true 时,要求此前有调用过 wx.login 且登录态尚未...
2019-04-09 17:08:38
759
原创 微信小程序学习之路——API登陆
登陆在小程序中,登陆分为2步,第一步需要获取登陆凭证,第二步用用户凭证获取用户登陆态信息,登陆态信息可用于后续支付等流程。1.wx.login(Object)调用接口获取登陆凭证(code)进而换取用户登陆信息,包括用户唯一表示(openid)及本次登陆的会话密钥(session_key),用户数据的加解密通信需要依赖会话密钥完成,Object参数属性如下:属性 类型 ...
2019-04-09 16:16:39
1064
原创 微信小程序学习之路——API界面(二)
绘图之前提到过<canvas/>组件,再<canvas/>组件中画图必须通过本小结介绍的API实现,<canvas/>中存在一个二维坐标体系,左上角的坐标为(0,0)所有绘图API都会基于这个坐标体系进行绘制。绘图过程大致可以分为3步:创建执行上下文 通过执行上下文进行绘制描述 调用绘图API,将绘制描述绘制到<canvas/>示例代码...
2019-04-08 18:41:40
1394
原创 微信小程序学习之路——API界面(一)
界面交互反馈wx.showToast(Object)显示消息提示框,Object参数的属性如下:属性 类型 默认值 必填 说明 最低版本 title string 是 提示的内容 icon string 'success' 否 图标 image string ...
2019-04-07 12:06:54
855
原创 微信小程序学习之路——API设备
设备系统wx.getSystemInfo(Object)异步获取系统信息,Object参数属性为:属性 类型 默认值 必填 说明 success function 否 接口调用成功的回调函数 fail function 否 接口调用失败的回调函数 complete function ...
2019-04-06 16:47:27
810
原创 微信小程序学习之路——API位置
位置获取位置在国际上,坐标体系有多套标准,小程序支持WGS84标准和GCJ02标准,WGS84是地球坐标,国际上通用的坐标系。设备一般包含的GPS芯片或者北斗芯片所获取的经纬度是WGS84地理做白哦西。GCJ02坐标系为火星坐标系,是由中国国家测绘局指定的地理信息系统的坐标系统,它是由WGS84坐标系加密后的坐标系,它是在小程序中,查看位置需要使用GCJ02标准坐标。wx.getLoc...
2019-04-04 19:36:22
1257
原创 微信小程序学习之路——API数据缓存
数据缓存每个小程序都可以由自己的本地缓存,local Storage是永久存储的,本地缓存最大为10MB,数据操作API分为同步和异步两种数据保存wx.setStorage(Object)将数据存在本地缓存指定的key中,会覆盖掉原来该key对应的内容,这时一个异步接口,Object参数属性如下:属性 类型 默认值 必填 说明 key stri...
2019-04-04 19:13:17
753
原创 微信小程序学习之路——API文件
文件从网络下载、拍照、录音、录视频时,文件都是存在临时文件中,需要永久保存这些文件就需要我们主动调用API进行保存,这时小程序会将文件保存到系统指定目录,关于这些文件操作都需要调用相关APIwx.saveFile(Object)保存文件到本地,本地文件存储大小限制为10MB,Object参数属性如下:属性 类型 默认值 必填 说明 tempFilePat...
2019-04-04 18:41:45
1183
原创 微信小程序学习之路——API媒体
媒体图片wx.chooseImage(Object)从本地相册选择图片或者使用相机拍照,拍照时产生的临时路径小程序本次启动期间都可以正常使用,如果需要持久保存,就要主动调用wx.saveFile,这样才能保证小程序下次启动时访问到,Object参数属性如下:属性 类型 默认值 必填 说明 count number 9 否 最多可以...
2019-04-03 22:03:08
1258
原创 微信小程序学习之路——API网络
我们之前已经介绍了小程序组件的使用方法,运用这些组件我们就可以构建我们所需要的UI界面,但是小程序的一些功能需要依赖框架提供的API来完成。API包括了网络、媒体、文件、数据缓存、位置、设备、界面、开放接口8大类,这些API由微信本身提供,通过逻辑层JS代码进行调用。在介绍小程序API在定义和使用上一些通用规则。一般来说,微信API按命名规则可以分为两种:以w.on开头的API,如:wx.on...
2019-04-03 17:06:33
1169
原创 微信小程序学习之路——画布组件及客服会话
画布组件<canvas/>主要用于绘制图像,在页面上放置一个<canvas/>就相当于在页面放置了一块画布,可以在其中进行图形绘制。<canvas/>组件是一块无色透明区域,本身没有绘制能力,它仅仅是容器,需要调用相关API来完成实际绘图任务,<canvas/>组件默认宽度300px,高度225px,统一页面中的canvas-id不能重复,如果使...
2019-04-03 11:07:36
759
原创 微信小程序学习之路——地图组件(Map)
地图组件移动应用中地图是必不可缺的内容,通过地图我们可以很直观地表现出地理信息,为此小程序提供了<map/>组件和定位相关的API,在给出其属性值之前,我们先用代码来测试以及看一看它的效果:示例代码如下:<map id="map" longitude="{{longitude}}" latitude="{{latitude}}"circles="{{circles}...
2019-04-02 20:45:22
5041
hadoop-notebook.pdf
2019-09-21
微信小程序实战入门 内含完整实例解析_刘明洋_人民邮电
2019-04-03
微信小程序:开发入门及案例详解
2019-04-03
微信小程序快速开发 视频指导版
2019-04-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅