自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(59)
  • 收藏
  • 关注

原创 Flink

flume和kafka区别(4大区别详解) – mikechen

2023-12-27 10:21:05 426

原创 HIVE笔记

Impala是基于Hive的大数据实时分析查询引擎,直接使用Hive的元数据库Metadata,意味着impala元数据都存储在Hive的metastore中。并且impala兼容Hive的sql解析,实现了Hive的SQL语义的子集,功能还在不断的完善中。Impala 与Hive都是构建在Hadoop之上的数据查询工具各有不同的侧重适应面,但从客户端使用来看Impala与Hive有很多的共同之处,如数据表元数 据、ODBC/JDBC驱动、SQL语法、灵活的文件格式、存储资源池等。

2023-11-22 10:56:49 1386

原创 Spark

Hive是建立在Hadoop之上的数据仓库基础设施,它提供了类似于SQL的查询语言,使得非开发人员也能够方便地分析大规模数据。Hive将SQL语句转换为MapReduce任务,并将数据存储在Hadoop分布式文件系统(HDFS)中。

2023-11-22 09:32:25 1552

原创 数仓问答篇(一)

大数据业务问题解决

2023-09-06 09:29:58 654

原创 win10休眠就断网然后连不上

win10休眠就断网然后连不上

2023-02-14 14:10:53 217 1

原创 HIVE教育大数据分析平台

数仓开发(mysql-sqoop-hive-sqoop-mysql-finebi)

2022-10-19 21:00:54 1167 3

原创 SQL33 找出每个学校GPA最低的同学

截取字符

2022-09-22 21:48:27 204

原创 SQL31 提取博客URL中的用户名

切割、截取、删除、替换

2022-09-18 22:39:40 63

原创 SQL30 统计每种性别的人数

SUBSTRING_INDEX的写法

2022-09-18 18:19:36 261

原创 正则去掉括号及括号内字符串

正则去掉括号及括号内字符串

2022-09-14 09:40:03 1018

原创 远程部署Hive User: root is not allowed to impersonate

远程部署Hive

2022-08-17 22:23:05 554

原创 启动Hive初始化MySQL报错:MySQLSyntaxErrorException : Unknown database ‘hive‘SQL Error code: 1049

启动Hive初始化MySQL报错

2022-08-02 22:11:26 1148 2

原创 启动hadoop集群datanode消失

启动hadoop集群datanode消失

2022-08-01 20:39:58 499

原创 成功解决ZooKeeper配置中出现Error contacting service. It is probably not running

zookeeper查看服务状态

2022-07-31 18:01:47 369

原创 《Python数据分析与挖掘实战》chapter8代码修复

《Python数据分析与挖掘实战》代码修复

2022-06-29 10:00:50 213

原创 阅读记录本

1.《苏东坡传》---林语堂 得失间,皆人生,何憾之有?2.《善战者说》---宫玉振战略上的一条原则是,你要知道自己要什么,不要什么;你要知道你先要什么,后要什么。你必须识别出什么才是你当前真正的关键性战略目标,然后按照轻重缓急对目标进行排序。为此你只有暂时放弃其它目标,才能保证关键性战略目标的达成。 战略就是放弃的艺术。以舍为得。真正的战略家都是敢于放弃的。 战略其实就是必须在确定与不确定的悖论中,去做出关系到未来组织命运的大的投入的决策艺术。 环境是不确定的,人的理性是有限的。当一切都是

2022-05-22 18:33:33 136

原创 赛码打字题

题目描述:小明很喜欢打字,今天小红给了小明一个字符串。这个字符串只包含大写和小写字母。我们知道,按下CapsLock键,可以切换大小写模式。我们在小写模式时候,同时按下shift+字母键,就能写出大写字母。在大写模式的时候,按下shift+字母键,就能写出小写字母。现在问题来了,给你一个字符串,问你最少使用多少个按键,就可以写出这个字符串呢?注意,按shift和字母键,算两次按键。开始时均为小写状态。样例输入第一行一个T,表示有T组输入。接下来T组数据:每组数据一个字..

2022-04-02 16:37:37 1438 1

原创 善战者 说——孙子兵法

战略:更关键的战略问题、决定性的胜利。 我们应从平时的事务性工作中跳出来,培养战略思考的意识和能力,对于想主导自己命运和竞争结局的竞争者来说,至关重要。 读《孙子兵法》,并不是让你背那些条文、那些格言、那些金句,然后去跟别人炫耀,而是帮助自己养成战略性思考的意识,形成战略性思考的能力,从而在竞争中获得决定性的优势...

2022-03-26 21:22:35 480

原创 HJ4 字符串分隔

描述•连续输入字符串,请按长度为8拆分每个输入字符串并进行输出;•长度不是8整数倍的字符串请在后面补数字0,空字符串不处理。(注:本题有多组输入)输入描述:连续输入字符串(输入多次,每个字符串长度小于等于100)输出描述:依次输出所有分割后的长度为8的新字符串#1.把完整的数据(0)补上#2.按8位逐行输出while True: try: strs = input() if len(strs)%8 != 0:

2022-02-25 18:30:24 544

原创 HJ3 明明的随机数

输入描述:注意:输入可能有多组数据(用于不同的调查)。每组数据都包括多行,第一行先输入随机整数的个数 N ,接下来的 N 行再输入相应个数的整数。具体格式请看下面的"示例"。输出描述:返回多行,处理后的结果while True: try:#有while时,需要try***except n = input() #指定为N个数,输入;()中不能输入其它提示字符 lst = [] #指定一个空列表 for i in

2022-02-25 16:14:40 80

原创 HJ2 计算某字符出现次数

描述写出一个程序,接受一个由字母、数字和空格组成的字符串,和一个字符,然后输出输入字符串中该字符的出现次数。(不区分大小写字母)数据范围:1 \le n \le 1000 \1≤n≤1000输入描述:第一行输入一个由字母和数字以及空格组成的字符串,第二行输入一个字符。输出描述:输出输入字符string = input().lower()s = input().lower()count = 0for i in string: if s == i: ..

2022-02-25 08:54:31 192

原创 HJ1 字符串最后一个单词的长度

题目描述计算字符串最后一个单词的长度,单词以空格隔开。strs = input()#牛客网中()内不能输入提示字符b = strs.split()[-1]print(len(b))

2022-02-25 08:41:58 149

原创 LeetCode136:只出现一次的数字

题目:给定一个非空整数数组,除了某个元素只出现一次以外,其余每个元素均出现两次。找出那个只出现了一次的元素。class Solution: def singleNumber(self, nums: List[int]) -> int: numsset = set(nums) for i in numsset: count = nums.count(i) if count==1:

2022-02-23 11:23:40 260

原创 Halcon:瓶盖相关性目标识别NCC

* This example program shows how to use HALCON's correlation-based* matching. In particular it demonstrates the robustness of this method against* linear illumination changes. The training is performed in an image with good* illumination. The matchin.

2022-02-16 16:16:15 1702

原创 Halcon:散点数字OCR识别

*功能散点字符的OCR识别dev_clear_window ()dev_open_window (0, 0, 640, 400, 'black', WindowHandle)*1.读取图像read_image (Image, 'E:/03 CV(古)/Halcon/代码/超人启蒙_课题启蒙/OCR_SVM/图像/1.bmp')get_image_size (Image, Width, Height)*2.定位及仿射变换Classes:=['2','0','1','6','0','6','1'.

2022-02-16 14:14:44 2321 1

原创 Halcon木板纹理识别

* Image Acquisition 01: Code generated by Image Acquisition 01list_files ('E:/03 CV(古)/Halcon/代码/木板纹理识别', ['files','follow_links'], ImageFiles)tuple_regexp_select (ImageFiles, ['\\.(tif|tiff|gif|bmp|jpg|jpeg|jp2|png|pcx|pgm|ppm|pbm|xwd|ima|hobj)$','igno.

2022-02-13 23:47:55 2061

原创 Halcon clolor_pieces.hedv:分类器_颜色识别

dev_close_window ()dev_open_window (0, 0, 512, 512, 'black', WindowHandle)read_image (Image, 'E:/03 CV(古)/Halcon/代码/糖豆/train.jpg')Regions:=['黄','红','绿','橙','背景']gen_empty_obj (Classes)for i := 1 to |Regions| by 1 dev_display (Image) dev_displ.

2022-02-12 23:54:24 1296

原创 Halcon颜色识别color_fuses.hdev:classify fuses by color

*敬请关注微信公众号(机器人配视觉 ind400),可获取更多学习资料*分享是件快乐的事,请把公众号分享给有需要的人。*刷新窗口 关dev_update_window('off')*命名 给选出来的东西一个名字(a是个变量,可以随便用,只要是英文)a:=['橙色','红色','蓝色','黄色','绿色']*分类 要选出来的东西有几类(fusetypes用于循环,可随便命名,只要是英文)fusetypes:=[1,2,3,4,5]*命名好灰度值范围 某个东西有一定的范围(.

2022-02-11 17:34:03 1405

原创 Halcon 汉字识别

*1读取图像read_image (Image, 'C:/Users/Administrator/Desktop/文字识别.jpg')rgb1_to_gray (Image, GrayImage)*2图像预处理之灰度线性变换scale_image (GrayImage, ImageScaled, 2.70, -190)#使亮的更亮,暗的更暗*3字符分割*3.1定位和几何仿射矫正threshold (ImageScaled, Regions, 0, 56)connection (Regio.

2022-02-11 00:51:00 3470

原创 Halcon车牌颜色定位纠正、识别

*1)定位:基于颜色分析之二值化、形态学、特征选取和区域变换read_image (U681567318397337405Fm253FmtAutoApp120FJpegWebp, 'C:/Users/Administrator/Desktop/车牌.jpg')decompose3 (U681567318397337405Fm253FmtAutoApp120FJpegWebp, Red, Green, Blue)#颜色通道拆分trans_from_rgb (Red, Green, Blue, Hue,.

2022-02-10 00:20:24 1454

原创 Halcon 车牌识别

read_image (U681567318397337405Fm253FmtAutoApp120FJpegWebp, 'C:/Users/Administrator/Desktop/u=681567318,397337405&fm=253&fmt=auto&app=120&f=JPEG.webp.jpg')rgb1_to_gray (U681567318397337405Fm253FmtAutoApp120FJpegWebp, GrayImage)invert_ima.

2022-02-09 22:50:09 357

原创 Halcon :Blob分析之Check_blister胶囊检测

* This example demonstrates an application from the pharmaceuticalindustry.* The task is to check the content of automatically filledblisters.* The first image (reference) is used to locate the chambers within a blister shape as a reference model, whic..

2022-02-08 23:21:18 541

原创 Halcon affine transformations to regions仿射变换

dev_close_window ()dev_open_window (0, 0, 512, 512, 'white', WindowID)dev_set_color ('black')* Draw with the mouse an arbitrary region into the windowdraw_region (Region, WindowID)#手动绘制,右键确定hom_mat2d_identity (HomMat2DIdentity)#3维单位矩阵hom_mat2d_rotate

2022-02-08 20:22:34 1199

原创 Halcon shape_trans

read_image (Image, 'C:/Users/Administrator/Desktop/凸性.png')rgb1_to_gray (Image, GrayImage)binary_threshold (GrayImage, Region, 'max_separability', 'dark', UsedThreshold)#背景只有黑白的快速二值化代码shape_trans (Region, RegionTrans, 'convex')...

2022-02-08 16:22:35 3640

原创 Halcon抓拍、获取硬币面积、位置

* Image Acquisition 02: Code generated by Image Acquisition 02open_framegrabber ('DirectShow', 1, 1, 0, 0, 0, 0, 'default', 8, 'gray', -1, 'false', 'default', '[1] Webcam C170', 0, -1, AcqHandle)grab_image_start (AcqHandle, -1)dev_close_window ()dev_ope

2022-02-08 14:40:06 548

原创 Halcon Blob分析(ball.hdev)

* ball.hdev: Inspection of Ball Bonding*dev_update_window ('off')#停止更新窗体dev_close_window ()#关闭窗体dev_open_window (0, 0, 728, 512, 'black', WindowID)#创建窗口,并指定句柄read_image (Bond, 'die/die_03')dev_display (Bond)set_display_font (WindowID, 14, 'mono', 'true'.

2022-02-07 20:29:56 667

原创 一维向量转置点乘np.dot

import numpy as npa = np.array([1, 2])a.shape = (1,2)#第二的纬度那个1是空的,指定了以后才能顺利地讲行向量转为列向量print(a)print(a.transpose())print(np.dot(a,a.transpose()))print("**************************")c = np.array([1, 2])b = c.reshape(len(c),1)#把向量reshape一下,如此便实现了一维向量与.

2022-01-24 15:57:45 1421

原创 python 两字符串映射

题目:pattern = "abba",s="dog cat cat dog"---->Truepattern = "abba",s="dog cat cat fish"----->Falseclass Solution: def is_pattern_matched(self, pattern:str,s: str) -> bool: pattern = list(''.join(pattern)) s = s.split(" ")

2022-01-24 09:41:46 661

原创 python leetcode125验证回文串

题目:给定一个字符串,验证它是否是回文串,只考虑字母和数字字符,可以忽略字母的大小写。说明:本题中,我们将空字符串定义为有效的回文串。class Solution: def isPalindrome(self, s: str) -> bool: res = [] if s.isspace(): return True else: for i in s:

2022-01-20 17:07:48 545

原创 Task failed task_1641530057069_0002_m_000000

问题描述:[atguigu@hadoop102 hadoop-3.1.3]$ hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /wcinput /wcoutput输出文件没有内容。解决办法:修改默认配置文件“mapred-default.xml”<property> <name>mapreduce.task.timeout</name>

2022-01-07 20:28:37 1683

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除