gmHappy

从不敢夜郎自大,但也不至于妄自菲薄,只是想做一个靠本事吃饭的手艺人

基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用(三)

基于上篇基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用(一),实现摄像头物体识别下载opencv的cv2包在Python官网即可下载opencv相关库,点击此处直接进入。 pip install opencv-python安装完成后,进入...

2018-05-25 15:47:04

阅读数 2963

评论数 1

RabbitMQ ——应用安装及命令

RabbitMQ Win7安装 1、下载erlang,原因在于RabbitMQ服务端代码是使用并发式语言erlang编写的,下载地址:http://www.erlang.org/downloads,双击.exe文件进行安装就好,安装完成之后创建一个名为ERLANG_HOME的环境变量,其值指向e...

2018-05-31 17:29:01

阅读数 5611

评论数 0

Opencv识别图中人脸

#!/usr/bin/python #coding=utf-8 # 识别图片中的人脸 import face_recognition jobs_image = face_recognition.load_image_file("C:/rlsb/jobs.jpg&quot...

2018-05-25 16:30:24

阅读数 2143

评论数 0

基于Opencv自有模型识别人脸与人眼

#!/usr/bin/python # -*- coding: utf-8 -*- import cv2 face_cascade = cv2.CascadeClassifier("D:/Open-cv/opencv/build/etc/haarcascades/haarcasc...

2018-05-25 16:24:25

阅读数 2209

评论数 0

Opencv中KNN背景分割器

背景分割器BackgroundSubtractor是专门用来视频分析的,会对视频中的每一帧进行“学习”,比较,计算阴影,排除检测图像的阴影区域,按照时间推移的方法提高运动分析的结果。而且BackgroundSubtractor不仅可以用于背景分割,而且还可以提高背景检测的效果。在opencv中有三...

2018-05-25 16:12:50

阅读数 2876

评论数 0

基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用(二)

基于上篇基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用(一),实现视频物体识别基于上篇,新建VideoTest.py,并将一个视频文件放入到object_detection目录下主要步骤如下: 1.使用 VideoFileClip 函数从...

2018-05-25 15:22:41

阅读数 3314

评论数 0

基于谷歌开源的TensorFlow Object Detection API视频物体识别系统搭建自己的应用(一)

基于上篇安装运行谷歌开源的TensorFlow Object Detection API视频物体识别系统,搭建自己的应用。替换官网提供的图片

2018-05-25 14:39:09

阅读数 2465

评论数 0

安装运行谷歌开源的TensorFlow Object Detection API视频物体识别系统

安装Python下载地址https://www.python.org/,建议安装Anaconda,下载地址https://www.anaconda.com/download/,官网最新版本为Anaconda3-5.1.0,选择对应的操作系统进行安装,笔者选用的版本为4.3.8。安装TensorFl...

2018-05-25 13:57:07

阅读数 3145

评论数 1

Spark MLlib机器学习(一)——决策树

决策树模型,适用于分类、回归。 简单地理解决策树呢,就是通过不断地设置新的条件标准对当前的数据进行划分,最后以实现把原始的杂乱的所有数据分类。就像下面这个图,如果输入是一大堆追求一个妹子的汉子,妹子内心里有个筛子,最后菇凉也就决定了和谁约(举栗而已哦,不代表什么~大家理解原理重要~~)训练数据:0...

2018-05-18 15:19:23

阅读数 1724

评论数 0

Spark 计算人员三度关系

1、一度人脉:双方直接是好友 2、二度人脉:双方有一个以上共同的好友,这时朋友网可以计算出你们有几个共同的好友并且呈现数字给你。你们的关系是: 你->朋友->陌生人 3、三度人脉:即你朋友的朋友的朋友就是这个陌生人。你们的关系是 你-&a...

2018-05-17 13:09:22

阅读数 4270

评论数 4

Spark 计算人员二度关系

数据格式如下:A,B A,C A,E B,D E,D C,F F,G业务逻辑如下:1、转换操作flatMapToPair将行数据变为键值对,如A,B表示A和B认识,A可以通过B认识B的朋友,B通过A可以认识A的朋友,转化结果为{A:A,B}、{B:B,A};2、转换操作groupByKey对键值对...

2018-05-17 11:35:25

阅读数 2483

评论数 0

Hadoop MapReduce实现人员二度关系运算

求下图的二度人员关系:数据格式如下:A,B A,C A,E B,D E,D C,F F,G实现如下:package com.gm.hadoop.mapreduce; import java.io.IOException; import java.util.Vector; import org....

2018-05-17 11:11:18

阅读数 1990

评论数 0

neo4j图形数据库Java应用

效果CREATE (陈冠希:明星 {名称: "陈冠希"}), (王菲:明星 {名称: "王菲"}), (李亚鹏:明星 {名称: "李亚鹏"}), (瞿...

2018-05-09 16:27:16

阅读数 2378

评论数 0

Spark2.0基于广播变量broadcast实现实时数据按天统计

package com.gm.hive.SparkHive; import java.text.SimpleDateFormat; import java.util.Arrays; import java.util.Collection; import java.util.Date; impo...

2018-05-08 16:04:07

阅读数 2821

评论数 0

Sprak2.0 Streaming消费Kafka数据实时计算及运算结果保存数据库代码示例

package com.gm.hive.SparkHive; import java.util.Arrays; import java.util.Collection; import java.util.HashMap; import java.util.List; import java.ut...

2018-05-07 14:42:07

阅读数 2223

评论数 0

Spark2.0 Java实现将Hive运算结果保存到数据库

package com.gm.hive.SparkHive; import org.apache.spark.sql.Dataset; import org.apache.spark.sql.Row; import org.apache.spark.sql.SaveMode; import or...

2018-05-07 11:35:30

阅读数 3009

评论数 0

sqoop使用中文手册

文章转载自:http://www.zihou.me/html/2014/01/28/9114.html1.     概述本文档主要对SQOOP的使用进行了说明,参考内容主要来自于Cloudera SQOOP的官方文档。为了用中文更清楚明白地描述各参数的使用含义,本文档几乎所有参数使用说明都经过了我...

2018-05-07 09:08:02

阅读数 1791

评论数 0

linux 根目录扩容

之前搭建了一个CentOS(7.0, x64)的VM,一直没留意它的硬盘空间。昨天,系统突然弹出警示,说 根目录 空间不足了。 这样的话,就只能给它增加空间呗。我自己其实已经增加过硬盘空间了,但是为了写这篇博客,我再一次添加了10GB的硬盘在虚拟机关机的前提下,先通过VMware给虚拟机增加一些硬...

2018-05-05 13:36:32

阅读数 1945

评论数 0

Spark2.0集成Hive操作的相关配置与注意事项

前言已完成安装Apache Hive,具体安装步骤请参照,Linux基于Hadoop2.8.0集群安装配置Hive2.1.1及基础操作补充说明Hive中metastore(元数据存储)的三种方式:内嵌Derby方式Local方式Remote方式[一]、内嵌Derby方式这个是Hive默认的启动模式...

2018-05-05 13:14:48

阅读数 2406

评论数 0

总结可用的大数据分析软件对应版本

apache-flume-1.8.0-bin、kafka_2.11-0.10.0.0、spark-2.0.0-bin-hadoop2.7hadoop-2.8.0、hbase-1.2.6、apache-hive-2.1.1-bin、zookeeper-3.4.10、sqoop-1.4.7.bin__...

2018-05-04 11:19:40

阅读数 2097

评论数 0

提示
确定要删除当前文章?
取消 删除