程序员
文章平均质量分 87
普通网友
这个作者很懒,什么都没留下…
展开
-
大数据实验 实验四:NoSQL 和关系数据库的操作比较_实验四nosql和关系数据库的操作比较实验报告(1)
(1)用 Redis 的哈希结构设计出学生表 Student(键值可以用 student.zhangsan 和student.lisi 来表示两个键值属于同一个表);(3)用 find 函数查询 zhangsan 的所有成绩(只显示 score 列)(3)用 hget 命令查询 zhangsan 的 Computer 成绩;(2)获取 scofield 的所有成绩成绩信息(只显示core)(2)获取 scofield 的所有成绩成绩信息(只显示core)(2)用 find()方法输出两个学生的信息;原创 2024-05-15 10:43:41 · 318 阅读 · 0 评论 -
大数据实验 实验六:Spark初级编程实践_spark 读取文件系统的数据 (1)在spark-shell中读取 linux操作系统本地文件";h
20170102 y20170103 x20170104 y20170105 z20170106 z输入文件 B 的样例如下:20170101 y20170102 y20170103 x20170104 z20170105 y根据输入的文件 A 和 B 合并得到的输出文件 C 的样例如下:20170101 x20170101 y20170102 y20170103 x20170104 y20170104 z20170105 y。原创 2024-05-15 10:43:05 · 289 阅读 · 0 评论 -
大数据分布式计算工具Spark数据计算实战讲解(filter方法,distinct方法,sortby方法)
功能:对rdd数据进行去重,返回新rdd。原创 2024-05-15 10:42:29 · 253 阅读 · 0 评论 -
大数据分布式计算工具Spark数据计算实战讲解(filter方法,distinct方法,sortby方法)(2)
基于sparkconf类对象创建sparkcontext类对象#准备一个rdd#对rdd的数据进行过滤import os#创建一个sparkconf类对象#基于sparkconf类对象创建sparkcontext类对象#准备一个rdd#对rdd的数据进行过滤。原创 2024-05-15 10:41:52 · 359 阅读 · 0 评论 -
【入门学习大数据】安装基础设施 一 :VMware &; CentOS &; 远程工具(1)
有能上传:压缩包文件、软件及应用的安装文件,上传和下载速度还可以的网盘/快传,知道的话,可以告知一下我。硬件资源要设置多少,也是自己看着办,自己电脑的余量多就可设多点、少就按最低或建议的设即可。如果是大数据/分布式/集群的,按每台机都是node,加编号01,……填写信息、名称、位置和密码这些呢,自己看着设置,是英文就行,简单点别太长。软件的安装路径等设置,全凭个人的习惯和喜好,必须修改的会以文字说明。想自定义的就自定义,嫌麻烦的就直接点完成(一般都是NAT模式的了)打开虚拟机的主页,选择:创建新的虚拟机。原创 2024-05-15 02:05:12 · 245 阅读 · 0 评论 -
【保姆级入门系列】阿ken教你学Python(六) ——组合数据类型_组合数据类型中的转向用户重新选择
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新需要这份系统化资料的朋友,可以戳这里获取等的。set_one < set_two # 判断set_one是否为 set_two的严格子集Falseset_one > set_two # 判断set_one是否为set_two的严格超集True。原创 2024-05-15 02:04:36 · 996 阅读 · 0 评论 -
【保姆级入门系列】阿ken教你学Python(六) ——组合数据类型_组合数据类型中的转向用户重新选择(1)
正向递增索引从左向右依次递增,第 1个元素的索引为0,第 2个元素的索引为 1,以此类推:反向递减索引从右向左依次递减,最后一个元素的索引为 -1,倒数第 2个元素的索引为 -2,以此类推。Python 中的序列主要有3种:字符串、列表和元组,关于它们的介绍:(1) 字符串是由单一字符组成的不可修改的序列类型。(2) 列表是一个可以修改的序列类型,使用相对更加灵活。(3) 元组是一个不可变的序列类型,构建好以后不可以进行任何修改。原创 2024-05-15 02:04:00 · 276 阅读 · 0 评论 -
【低代码】云端液位数据的由来与变送器的使用_接近开关如何在云平台上数据为1
什么是模拟量,模拟量是指以电压、电流的形式连续变化的物理量,反映着客观事物和物质能量的变化,使我们能准确的知晓肉眼计算不出的很多微观存在。模拟量在现代科技发展的潮流中扮演着非常重要的角色,与人类的生产和生活息息相关,比如温度、压力、液位等,哪一个都是从模拟量中来。学一学模拟量,你将会对这个世界有一番新的特别的认识。下面,让我们从液位模拟量开始学习。液位可归纳的范畴为液态物质的存在高度。大如江河湖海液位,小到水箱液位等。其测量单位主要有m、cm、mm等,换算关系为1m=1x100cm=1x1000mm。原创 2024-05-15 02:03:23 · 739 阅读 · 0 评论 -
JavaSE基础篇 面向对象三大基本特征【继承】_默认继承object类,还是必须继承(1)
B类则称为子类(subclass)、派生类、扩展类。实际上调用的也不是父类的方法,是他子类自己的方法(因为已经继承过来了就属于自己的)例如:class C extends B,class B extends A,也就是说,C 直接继承 B,B 直接继承 A;,Object类是java 语言提供的根类(老祖宗类),也就是说,一个对象与生俱来就有 Object类型中所有的特征。(2)间接继承:Z直接继承了Y,Y又继承X,所以Z间接继承了X。原创 2024-05-14 16:42:43 · 537 阅读 · 0 评论 -
Javascript知识【JS变量和运算符】_在js中如果var tmp=2 ,var num3=(tem+=2,tmp+2,tmp)
这份系统化资料的朋友,可以戳这里获取](https://bbs.csdn.net/topics/618545628)**//true js认为这两个标识都是没有具体值的含义,认为意义相同。//js :字符串 可以是基本数据类型string,也可以是引用数据类型String。//标识:不是一个数字**//boolean:布尔类型 true false。//注意事项:undefined是从null派生出来的。//number:数字类型 : 整数、小数、NaN。//NaN**//++ 可以将。原创 2024-05-14 16:42:06 · 1045 阅读 · 0 评论 -
Javascript知识【JS变量和运算符】_在js中如果var tmp=2 ,var num3=(tem+=2,tmp+2,tmp)(1)
ECMAscript实现之初的一个BUG:划分时把null划分到基本数据类型,使用时却像java一样把null当成引用数据类型来用。原创 2024-05-14 16:41:30 · 569 阅读 · 0 评论 -
JavaScript 入门基础 - 变量 数据类型(二)_为什么javascript中最小值乘2为无穷小
变量是用于存放数据的容器,我们可以通过变量名获取存储在里面的数据,甚至可以修改,通俗来讲变量就是一个装东西的盒子。在计算机中,不同的数据类型所占用的数据空间是不同的,所以为了便于把数据分成所需内存大小不同的数据,使空间不被浪费,于是定义了不同的数据类型。简单说数据类型就是数据的类别型号。如:张三、19、age。原创 2024-05-14 16:40:53 · 588 阅读 · 0 评论 -
2024年最全计算机视觉项目-文档扫描OCR识别(2),2024年最新思维导图+源代码+笔记+项目
我们在日常生活或者办公中,可能都使用过万能扫描王这个软件,或者qq中的照片文字扫描功能,然后直接利用扒下来的文档直接复制粘贴直接使用,那么他这个原理是什么呢?又是怎么用OpenCV来实现的呢。我们这次博客就来全面介绍一下这个整体流程。并进行真实案例操作。我们要完成对于文档图片的扫描工作。大致流程主要步骤分为以下几个步骤。1. 图像边缘检测。2. 获取轮廓信息。3. 透视变换,经过旋转、平移等操作对文档图片进行处理。4. OCR识别图片当中每一个字符。原创 2024-05-14 08:04:40 · 894 阅读 · 0 评论 -
2024年最全蓝桥杯入门即劝退(十二)情感丰富的文字,大数据开发面试总结
words:1、本题题意 即是从字符串数组中找到若干个可以通过字母扩张得到原字符串的数量2、本题可以使用双指针来完成,即指定 i、j 分别为给定单词以及数组中某个字符串的的指针,指向第一个字符。3、可以编写一个boolean方法来判断符合条件的字符串数量。4、当给定字符小于某个字符串时,即可判断该字符串不可能是符合条件的,直接return。5、设置Count_s、Count_t来累积初始两个字符串的相同字母数量。原创 2024-05-14 08:04:05 · 410 阅读 · 0 评论 -
2024年最全蓝桥杯入门即劝退(十三)合并有序链表_蓝桥杯链表,2024年最新写给1-3年大数据开发程序员的几点建议
面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**原创 2024-05-14 08:03:29 · 250 阅读 · 0 评论 -
2024年最全自学rabbitmq入门到精通(1),2024年大数据开发社招面试题精选
1)对于生产者:通过事物消息:对于本地来说,如果在进行一个业务的时候需要进行消息的发送,那么,将这个同时包裹为一个事物,这两个东西必须一块完成。如果说用户在这个时候支付了订单,可以将数据库中的支付状态改为 1 , 那么消息接收的时候判断支付状态:如果支付状态为1,那么就不删除,如果支付状态不为1,是0(表示未支付) 那么就不将订单删除。但是这样 jvm中开启多个线程就十分的消耗资源,然后使用线程的过程中也是十分占用内存的资源,所以这个选择再开一台服务器,代替来工作,减少单台服务器的压力。原创 2024-05-14 08:02:52 · 707 阅读 · 0 评论 -
2024年大数据最新React基础-JSX语法介绍_jsx外层<;>;和<;div>;的区别,在阿里工作5年了
我们先来看一段代码// 定义根组件// 渲染根组件这段element变量的声明右侧赋值的标签语法是什么呢?它不是一段字符串(因为没有使用引号包裹);它看起来是一段HTML元素,但是我们能在js中直接将HTML元素赋值给一个变量吗?其实是不可以的,如果我们将 type=“text/babel” 去除掉,那么就会出现语法错误;它到底是什么呢?其实它是一段jsx语法的代码;JSX是什么?JSX是一种JavaScript的语法扩展。原创 2024-05-13 23:16:28 · 380 阅读 · 0 评论 -
2024年大数据最新RabbitMQ(一)简介及工作原理(3),2024年最新2024BAT大厂大数据开发社招面试题
的工作原理是多路复用,通过在一个真实的TCP连接中建立多个虚拟连接来进行消息的传递。每个信道都提供了一个相互独立的会话,允许客户端在不同的线程中并发处理多个任务,以提高系统的并发性能。并且由于channel之间共享同一个物理连接,因此减少了网络开销和资源占用。TCP连接与数据库连接一样,频繁的创建和销毁都会造成很大的资源消耗,因此,RabbitMQ引入。队列与Exchange绑定,并声明一个可选的RoutingKey。(RabbitMQ实例)建立一个。3.安装RabbitMQ。2.安装erlang。原创 2024-05-13 23:15:52 · 570 阅读 · 0 评论 -
2024年大数据最新RabbitMQ的工作队列有哪些?带你玩转工作队列_mq指定工作队列,熬夜整理2024最新大数据开发高级笔试题
注意:rabbitmq消息持久化有两个步骤:一是队列持久化;二是消息持久化。当durable=true时,如果只设置该值,是把队列进行持久化(重启后消息还是会丢失);所以我们还应该在发送消息时对消息进行持久化。就是对消息进行持久化,但仍需注意的是,即使设置了这两种操作,消息也不是100%会被持久化的!原创 2024-05-13 23:15:16 · 582 阅读 · 0 评论 -
2024年大数据最新RabbitMQ基础,2024年最新关于大数据文本组件Widget的全面解读
多个消费者绑定到一个队列,同一条消息只会被一个消费者处理通过设置prefetch来控制消费者预取的消息数量。原创 2024-05-13 23:14:40 · 720 阅读 · 0 评论 -
猿创征文|我的前端学习之旅【来自一名大四老学长的真情流露】_web开发蓝桥杯拿奖
大家好,我是前端杂货铺,一名来自普通高等院校的普通本科学生(普中普我是2019级的学生,今年21岁,软件工程专业,开学即将成为大四老学长,同样也面临着秋招英语仅过了四级,大三下侥幸获得第十三届蓝桥杯 - web前端开发 - 省二等奖和Java高级开发工程师的证书下面这张图是我的大学,看看有小伙伴知道的嘛,哈哈哈~~原创 2024-05-12 20:19:41 · 583 阅读 · 0 评论 -
猿创征文|我的前端学习之旅【来自一名大四老学长的真情流露】_web开发蓝桥杯拿奖(2)
大家好,我是前端杂货铺,一名来自普通高等院校的普通本科学生(普中普我是2019级的学生,今年21岁,软件工程专业,开学即将成为大四老学长,同样也面临着秋招英语仅过了四级,大三下侥幸获得第十三届蓝桥杯 - web前端开发 - 省二等奖和Java高级开发工程师的证书下面这张图是我的大学,看看有小伙伴知道的嘛,哈哈哈~~原创 2024-05-12 20:19:05 · 800 阅读 · 0 评论 -
猿创征文|我的前端学习之旅【来自一名大四老学长的真情流露】_web开发蓝桥杯拿奖(1)
大家好,我是前端杂货铺,一名来自普通高等院校的普通本科学生(普中普我是2019级的学生,今年21岁,软件工程专业,开学即将成为大四老学长,同样也面临着秋招英语仅过了四级,大三下侥幸获得第十三届蓝桥杯 - web前端开发 - 省二等奖和Java高级开发工程师的证书下面这张图是我的大学,看看有小伙伴知道的嘛,哈哈哈~~原创 2024-05-12 20:18:29 · 856 阅读 · 0 评论 -
猿创征文|实战开发openGauss DataStudio的sql联想结构_datastudio的sql终端
【代码】猿创征文|实战开发openGauss DataStudio的sql联想结构_datastudio的sql终端。原创 2024-05-12 20:17:53 · 982 阅读 · 0 评论 -
大数据王者之路 - Ambari 02 架构简介_ambari 各指标数据存放位置
这里的数据库可以选择主流的数据。原创 2024-05-12 03:10:02 · 265 阅读 · 0 评论 -
大数据版本管理工具数据湖文件存储系统LakeFS客户端的安装和配置使用_lakefs 使用教程
【代码】大数据版本管理工具数据湖文件存储系统LakeFS客户端的安装和配置使用_lakefs 使用教程。原创 2024-05-12 03:09:26 · 312 阅读 · 0 评论 -
大数据深度学习长短时记忆网络(LSTM):从理论到PyTorch实战演示
LSTM的逻辑结构通过其独特的门控机制为处理具有复杂依赖关系的序列数据提供了强大的手段。其对信息流的精细控制和长期记忆的能力使其成为许多序列建模任务的理想选择。了解LSTM的这些逻辑概念有助于更好地理解其工作原理,并有效地将其应用于实际问题。我们首先定义一个LSTM类,该类使用PyTorch的nn.Module作为基类。out, _ = self.lstm(x) # LSTM层out = self.fc(out[:, -1, :]) # 全连接层return outinput_size。原创 2024-05-12 03:08:51 · 732 阅读 · 0 评论 -
大数据深度学习长短时记忆网络(LSTM):从理论到PyTorch实战演示(3)
LSTM的逻辑结构通过其独特的门控机制为处理具有复杂依赖关系的序列数据提供了强大的手段。其对信息流的精细控制和长期记忆的能力使其成为许多序列建模任务的理想选择。了解LSTM的这些逻辑概念有助于更好地理解其工作原理,并有效地将其应用于实际问题。我们首先定义一个LSTM类,该类使用PyTorch的nn.Module作为基类。out, _ = self.lstm(x) # LSTM层out = self.fc(out[:, -1, :]) # 全连接层return outinput_size。原创 2024-05-12 03:08:13 · 658 阅读 · 0 评论 -
大数据最全Spark技术03直播笔记,你不懂还不学
【代码】大数据最全Spark技术03直播笔记,你不懂还不学。原创 2024-05-11 18:30:18 · 247 阅读 · 0 评论 -
大数据最全Spark分区 partition 详解_spark partition(2),2024年最新大数据开发插件化主流框架和实现原理
如果资源不变,你的RDD只有2个分区,那么同一时刻只有2个task运行,其余18个核空转,造成资源浪费。。原创 2024-05-11 18:29:42 · 1211 阅读 · 0 评论 -
大数据最全Spark与flink计算引擎工作原理(1),零基础学习大数据开发开发
Driver:Spark中的Driver是运行上述Application的main函数,运行main函数会创建SparkContext,创建SparkContext的目的是为了准备Spark应用程序的运行环境,在Spark中SparkContext负责与ClusterManager通信,进行资源申请、任务的分配和监控等,当Executor部分运行完毕后,Driver同时负责将SparkContext关闭,通常用SparkContext代表Driver。Executor则是 slave,负责实际执行任务。原创 2024-05-11 18:29:06 · 809 阅读 · 0 评论 -
大数据最全SparkSQL基本数据抽象RDD DataFrame Dataset介绍[附操作代码](2),2024年最新分分钟搞定
搞清楚这三者的关系,实际上只需要牢记:RDD是最为底层的数据管理结构,DataFrame和Dataset都是记录了列关系的数据管理结构DataFrameRDDSchema其中Schema是一个StructType对象,StructType记录着所有数据StructField(key,value)的List对象。原创 2024-05-11 18:28:30 · 926 阅读 · 0 评论 -
【项目精选】基于SSH的任务调度系统的设计与实现(视频+源码+论文
本系统开发主要包括调度算法的设计,后台程序的处理,后台数据库的建立和维护,和前端页面的展示开发。本系统是针对企业或者事业单位甚至一个小团队的任务调度而设计的,目的是改变传统的调度方式,通过计算机来计算各项任务的最佳人员分配和最佳时间分配,绘制出任务调度图,以此更好地进行各项任务的调度和团队协作,该系统是一种任务调度系统。本系统的实现角色将包括项目组长和项目组员这两个角色,用户可同时扮演两种角色,共有的功能包括修改登录密码、发起项目、删除项目、参与项目、添加任务、删除任务、添加成员、删除成员、处理消息。原创 2024-05-11 04:35:38 · 772 阅读 · 0 评论 -
【项目精选】基于jsp的健身俱乐部会员系统_基于jsp的健身房会员管理系统
界面设计目前已经成为评价软件质量的一条重要指标,一个好的用户界面可以增加用户使用系统的信心和兴趣,提高工作效率,JSP技术是用JAVA语言作为脚本语言的,JSP网页为整个服务器端的JAVA库单元提供了一个接口来服务于HTTP的应用程序。系统设计的过程正好和实施过程相反,并不是从输入设计到输出设计,而是从输出设计到输入设计,这是因为输出表格直接与使用者相联系,设计的出发点应当是保证输出表格方便地为使用者服务,正确及时反映和组成用于各部门的有用信息。本系统最大的特点是使用操作简单、友好的提示信息。原创 2024-05-11 04:35:01 · 607 阅读 · 0 评论 -
【项目精选】基于jsp的健身俱乐部会员系统_基于jsp的健身房会员管理系统(3)
本系统最大的特点是使用操作简单、友好的提示信息。会员制健身中心管理系统的设计与实现,主要是以提高健身会所形象、便捷客户服务与增强健身中心管理为主旨,主要有以下七大功能:1、修改登录密码;2、工作人员管理;3、会员卡类型管理;4、会员资料管理;5、健身器材管理;6、教练执教管理;7、安全退出。原创 2024-05-11 04:34:25 · 757 阅读 · 0 评论 -
【项目精选】基于jsp的健身俱乐部会员系统_基于jsp的健身房会员管理系统(2)
系统设计的过程正好和实施过程相反,并不是从输入设计到输出设计,而是从输出设计到输入设计,这是因为输出表格直接与使用者相联系,设计的出发点应当是保证输出表格方便地为使用者服务,正确及时反映和组成用于各部门的有用信息。本章在技术可行性上、操作可行性上以及社会可行性上进行了详细的介绍,在技术方面通过介绍JSP技术和EL技术等常见技术,说明了开发本系统的可行性,而在操作方面,也是利用了简单易于操作的平台和数据库,所以开发本系统是简单而快速的。人们都改变了过去的思维,开始走向了互联网的时代,在 可行性小结。原创 2024-05-11 04:33:50 · 734 阅读 · 0 评论 -
Zynq-7000系列FPGA使用 Video Processing Subsystem 实现图像缩放,提供工程源码和技术支持_fpga video resizer
由于工程所用到的IP都是常用IP,所以这里重点介绍一下Video Processing Subsystem;Video Processing Subsystem有缩放、去隔行、颜色空间转换等功能,这里仅使用图像缩放功能;其特点如下:适用于Xilinx所有系列的FPGA器件;支持最大分辨率:8K,即可以处理高达8K的视频;输入视频格式:AXI4-Stream;输出视频格式:AXI4-Stream;需要SDK软件配置,其本质为通过AXI_Lite 做寄存器配置;原创 2024-05-10 19:56:37 · 686 阅读 · 0 评论 -
Zynq-7000系列FPGA使用 Video Processing Subsystem 实现图像缩放,提供工程源码和技术支持_fpga video resizer(3)
没玩过图像缩放都不好意思说自己玩儿过FPGA,这是CSDN某大佬说过的一句话,鄙人深信不疑。。。目前市面上主流的FPGA图像缩放方案如下:1:Xilinx的HLS方案,该方案简单,易于实现,但只能用于Xilinx自家的FPGA;2:非纯Verilog方案,大部分代码使用Verilog实现,但中间的fifo或ram等使用了IP,导致移植性变差,难以在Xilinx、Altera和国产FPGA之间自由移植;3:纯Verilog方案;原创 2024-05-10 19:56:01 · 821 阅读 · 0 评论 -
Zynq-7000系列FPGA使用 Video Processing Subsystem 实现图像缩放,提供工程源码和技术支持_fpga video resizer(2)
没玩过图像缩放都不好意思说自己玩儿过FPGA,这是CSDN某大佬说过的一句话,鄙人深信不疑。。。目前市面上主流的FPGA图像缩放方案如下:1:Xilinx的HLS方案,该方案简单,易于实现,但只能用于Xilinx自家的FPGA;2:非纯Verilog方案,大部分代码使用Verilog实现,但中间的fifo或ram等使用了IP,导致移植性变差,难以在Xilinx、Altera和国产FPGA之间自由移植;3:纯Verilog方案;原创 2024-05-10 19:55:25 · 728 阅读 · 0 评论 -
Zynq-7000系列FPGA使用 Video Processing Subsystem 实现图像缩放,提供工程源码和技术支持_fpga video resizer(1)
没玩过图像缩放都不好意思说自己玩儿过FPGA,这是CSDN某大佬说过的一句话,鄙人深信不疑。。。目前市面上主流的FPGA图像缩放方案如下:1:Xilinx的HLS方案,该方案简单,易于实现,但只能用于Xilinx自家的FPGA;2:非纯Verilog方案,大部分代码使用Verilog实现,但中间的fifo或ram等使用了IP,导致移植性变差,难以在Xilinx、Altera和国产FPGA之间自由移植;3:纯Verilog方案;原创 2024-05-10 19:54:49 · 796 阅读 · 0 评论