程序员
文章平均质量分 89
普通网友
这个作者很懒,什么都没留下…
展开
-
大数据-Hadoop集群搭建(配置免密登录及配置环境)_5、hadoop安装过程需要实现免密登录,且免密登录采用了非对称加密算法,算法涉及一(1)
在 hadoop 用户下,输入命令 ssh-keygen ,连按 3 次回车,之后你会发现,在/home/hadoop/.ssh 目录下生成了一对密钥。vi /etc/udev/rules.d/70-persistent-net.rules,以h1为例,将eth0所在行注释或删除,将eth1改为eth0,其他两台一样。sudo vi /etc/sysconfig/network,修改hostname,SecureCRT下方右键,可以对多个会话一起发命令,比较方便,三台虚拟机一起修改。原创 2024-05-15 10:10:23 · 222 阅读 · 0 评论 -
大数据 数据挖掘 推荐系统 机器学习相关资源_github 大数据推荐系统
懒惰啊我free mindLSRS 2013Google小组。原创 2024-05-15 10:09:47 · 387 阅读 · 0 评论 -
大数据 数据挖掘 推荐系统 机器学习相关资源_github 大数据推荐系统(3)
guwendongxlvector懒惰啊我free mindLSRS 2013Google小组。原创 2024-05-15 10:09:11 · 326 阅读 · 0 评论 -
大数据 数据挖掘 推荐系统 机器学习相关资源_github 大数据推荐系统(2)
推荐系统开源软件列表汇总和评点。原创 2024-05-15 10:08:34 · 322 阅读 · 0 评论 -
【云原生 从零开始学Kubernetes】二、使用kubeadm搭建K8S集群_kubeadm --pod-network-cdr(2)
apiserver-advertise-address=192.168.11.139 \ # 当前主机ip–image-repository registry.aliyuncs.com/google_containers \ # 镜像–kubernetes-version v1.18.0 \ # 版本–service-cidr=10.96.0.0/12 \ # 这个参数后的IP地址直接就套用10.96.0.0/12 ,以后安装时也套用即可,不要更改。原创 2024-05-15 01:31:59 · 643 阅读 · 0 评论 -
【云原生 从零开始学Kubernetes】二、使用kubeadm搭建K8S集群_kubeadm --pod-network-cdr(1)
然后重启docker。原创 2024-05-15 01:31:23 · 448 阅读 · 0 评论 -
【云原生 从零开始学Kubernetes】三、Kubernetes集群管理工具kubectl
kubectl是Kubernetes集群的命令行工具,通过kubectl能够对集群本身进行管理,并能够在集群上进行容器化应用的安装和部署。原创 2024-05-15 01:30:47 · 974 阅读 · 0 评论 -
【云原生 从零开始学Kubernetes】三、Kubernetes集群管理工具kubectl(3)
kubectl是Kubernetes集群的命令行工具,通过kubectl能够对集群本身进行管理,并能够在集群上进行容器化应用的安装和部署。原创 2024-05-15 01:30:11 · 909 阅读 · 0 评论 -
Hadoop安装(比较简单,适合刚入门的小伙伴)_hazop软件安装教程(3)
我们先来看HDFS集群状态,打开浏览器,在地址栏输入http://node1:9870,出现如下界面,就说明启动成功了。下载之后打开这个目录,将 这个文件(也就是虚拟机压缩文件)解压到一个自己想要的目录,最好是没有中文,空格的目录。:node2和node3是基于node1存在的,所以需要关联node1,定位到node1中的这个文件即可。选择SSH连接,按照如下格式即可,三台虚拟机需要创建三次连接,点击接受并保存密码。解压之后发现三个目录,先打开node1,双击该文件。打开node1,找到快照管理器,原创 2024-05-14 16:09:24 · 784 阅读 · 0 评论 -
Hadoop安装(比较简单,适合刚入门的小伙伴)_hazop软件安装教程(2)
点击NAT设置配置一下网关IP,跟图中一样即可一直确定,就配置完成了。原创 2024-05-14 16:08:48 · 505 阅读 · 0 评论 -
Hadoop安装(比较简单,适合刚入门的小伙伴)_hazop软件安装教程(1)
打开网络连接 ,双击打开属性找到Internet协议版本4(TCP/IPv4),双击打开配置成如下即可。原创 2024-05-14 16:08:12 · 819 阅读 · 0 评论 -
Hadoop增加新节点环境配置(自用)_hadoop集群添加新的节点需要改什么内容
主机名改成hadoop106,点应用IP:192.168.100.106,子网掩码:255.255.255.0,网关:192.168.100.2,DNS:192.168.100.2。9.然后就点开始安装,在这个期间创建root密码123123,由于我们的密码不符合系统安全要求,所以需要点击两次完成。等进度条⾛完,就可以点重启了。此时CentOS7安装完成并启动,等待我们输⼊账户,密码。此时可打开 mobaxterm 新建session 输⼊192.168.100.106 连接。原创 2024-05-14 16:07:36 · 289 阅读 · 0 评论 -
2024年最全当我亲身面对大数据杀熟的商家,2024年最新2024大数据开发大厂面试知识分享
一行本科期间也卖过电话卡来赚差价,拿卡 0 成本,卡里有 50 元话费,随便我们卖,这么暴利的事情,不干还是人吗。当在我选择购买 apple homepod 的时候,虽然闲鱼和淘宝的图文介绍一摸一样,价格差了有 500 之多,但我还是不忍心在闲鱼买,真的像是把头伸进别人的刀俎里,害,这也许还是平台的力量。但是当时财商为负值,获利居然感觉这是种骗人的行为,毕竟拿卡的钱是 0 元,然后骗人说是 50 元成本,最后把钱都给退了,退了,退了。忿忿不安的时候听到有人能靠这个月入六位数,我去,这钱俺也想赚。原创 2024-05-14 07:31:20 · 827 阅读 · 0 评论 -
2024年最全干货合集│最好用的 python 库都在这_机器学习中tpdm什么意思(1),2024年最新阿里技术专家
EC.text_to_be_present_in_element((By.XPATH, ‘//*[@id=“mobile-code-get”]/span’), u’发送’)translator.translate(‘程序员亮仔’, src=‘zh-cn’)tb.add_row([‘程序员亮仔’, 27, 184, 69.5])tb.add_row([‘程序员’, 23, 164, 55])tb.add_row([‘亮仔’, 25, 174, 65])# 判断事件是否为退出事件。# 退出pygame。原创 2024-05-14 07:30:44 · 514 阅读 · 0 评论 -
2024年最全帮你飞的更高-CSDN超级实习生与C认证_csdn实习生计划(1),2024年最新2024年阿里大数据开发面试题精选
最近CSDN有联系到我,希望我能成为CSDN的合作伙伴,帮助推广计划。既然是推广,我肯定是需要对我的粉丝们负责的,我首先要说服自己这东西有价值,我才能去推荐。毕竟字母哥哥在IT圈也是稍微有一点点影响力的,羽毛还是要爱惜的。原创 2024-05-14 07:30:08 · 738 阅读 · 0 评论 -
2024年最全带你初识微服务_微服务耦合性还是很高(4),大数据最新开源框架
正所谓家有家法、行有行规,微服务也有人家的一套准则,至于准则是什么,这章我们不来细说,我把微服务的服务拆分准则和远程调用的方法放在本专栏的下一篇文章中,这篇文章,风哥仅仅带大家了解下微服务,目的是为了提起大家的学习兴趣,如果这个章节太过繁琐,知识点过多,怕是会劝退很多小伙伴啊😂。 首先,看了上边,相信小伙伴们对微服务有了一个整体上的了解,但是却有着不清晰的概念,接下来,风哥给大家梳理一下。 分布式架构特征:根据业务功能对模块进行拆分,极大限度保证一个功能一个模块,一个模块为一个服务。原创 2024-05-14 07:29:32 · 796 阅读 · 0 评论 -
2024年大数据最新java面试系列-JDBC常见面试题(附答案)_jdbc面试题(2),微信小程序的事件处理
当我们为了数据的一致性使用事务时,数据库系统用锁来防止别人访问事务中用到的数据。数据库通过锁来防止脏读,不可重复读(Non-Repeatable Reads)及幻读(Phantom-Read)的问题。网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。需要这份系统化资料的朋友,可以戳这里获取一个人可以走的很快,但一群人才能走的更远!原创 2024-05-13 22:43:09 · 858 阅读 · 0 评论 -
2024年大数据最新Java面向对象三大基本特征之多态_面向对象方法中,多态指的是(2),这些知识你必须拿下
/在向下转型过程中,容易出现类型转换异常ClassCastException,将父类引用转换成了其它的子类对象,所以在转换之前需要对父类引用类型进行判断。//定义一个动物叫的方法。原创 2024-05-13 22:42:33 · 273 阅读 · 0 评论 -
2024年大数据最新Java面向对象三大基本特征之多态_面向对象方法中,多态指的是(1),2024年最新2024吊打面试官系列
可以看到在Master类中将Animal类对象作为一个形参,来进行方法的调用;子类:Penguin类。主人类:Master类。主人类:Master类。父类:Animal类。父类:Animal类。原创 2024-05-13 22:41:58 · 193 阅读 · 0 评论 -
2024年大数据最新Java集合容器面试题(2024最新版)(2),2024年最新大数据开发基础面试题2024
Hash,一般翻译为“散列”,也有直接音译为“哈希”的,这就是把任意长度的输入通过散列算法,变换成固定长度的输出,该输出就是散列值(哈希值);这种转换是一种压缩映射,也就是,散列值的空间通常远小于输入的空间,不同的输入可能会散列成相同的输出,所以不可能从散列值来唯一的确定输入值。简单的说就是一种将任意长度的消息压缩到某一固定长度的消息摘要的函数。所有散列函数都有如下一个基本特性**:根据同一散列函数计算出的散列值如果不同,那么输入值肯定也不同。原创 2024-05-13 22:41:21 · 824 阅读 · 0 评论 -
淘宝数据可视化大屏案例(Hadoop实验)_hadoop数据分析可视化案例(1)
2.准备环境,Hadoop集群,需要hdfs,hive,Fiume,sqoop等插件,需要提前自己安装,使用12月数据做一个分析。2.2 使用vi命令,新建一个file_hive.properties文件,把下面的数据插入到里面。该文件用于监听的作用,自动就会在家目录下面,然后我们需要创建几个文件夹,就是下图我备注的那些字段。注意这里修改的是hive文件下面的,也就是第一个文件,不是第二个flume!经过大量的测试,我自己写了一个sq语句,也可以达到以上的效果。优化代码类型(思路类似)原创 2024-05-12 19:46:17 · 673 阅读 · 0 评论 -
浅谈大数据建模的主要技术:维度建模_大数据平台数据 建模 设计(2)
实际上,我们通过和业务方、需求方交谈,或者阅读报表、图表等,可以很容易地识别度量。但是,单单谈论度量,是没有意义的。度量和环境这两个概念构成了维度建模的基础。而所有维度建模也正是通过对度量和及其上下文和环境的详细设计来实现的。原创 2024-05-12 19:45:41 · 701 阅读 · 0 评论 -
浅谈大数据建模的主要技术:维度建模_大数据平台数据 建模 设计(1)
实际上,我们通过和业务方、需求方交谈,或者阅读报表、图表等,可以很容易地识别度量。原创 2024-05-12 19:45:05 · 571 阅读 · 0 评论 -
没想到 Kafka 还会这样问,学会这些带你轻松搞定大厂面试!_follower参加读写吗
关于消息队列更深入的一些知识,大家可以看这里------关于消息队列的使用。关于 Kafka 和传统消息队列有何不同,在上一篇博客中已经做出解答,这里我就不再赘述。一般情况下,Kafka应用在大数据日志处理或对实时性(少量延迟),可靠性(少量丢数据)要求稍低的场景使用。原创 2024-05-12 19:44:29 · 757 阅读 · 0 评论 -
大数据最新聊聊数据仓库中维度表设计的二三事_维度建模 维度表之间的关系,字节面试官
比如对于商品的描述信息,也许业务人员对此并不敏感,或者认为无关紧要,这种情况可以直接覆盖。但是对于商品所属的类目发生变化,则需要认真考虑, 因为这涉及归类这个商品的销售活动到哪个类目一一是全部归到新类目,还是全部归到旧类目?变化前归到旧类目,还是变化后归到新类目?这实际上也涉及了下面要分享的缓慢变化维的几种处理办法。原创 2024-05-12 02:36:47 · 631 阅读 · 0 评论 -
大数据最新聊聊我在腾讯和字节工作感受_程序员鱼皮,2024年最新开发岗面试自我介绍
腾讯是早餐免费,晚餐可以刷夜宵券抵扣(一般都用不完)。虽然小礼物感觉没有字节跳动多,但公司内经常搞各式各样的小活动,参与就有奖励,比如多到爆炸的文化衫,我记得当时有个活动 1 天送 1 件文化衫,我直接拿了 5 件当睡衣。。。此外,腾讯的员工福利和关怀真的没得说,茶水间、健身房、生日礼、关爱讲堂、周年礼等超过 50 个特殊福利,还有前段时间网上传遍的最高 90w 免息购房贷款,从入司、日常出行到终身大事,都为你保驾护航,的确能减少不少压力。原创 2024-05-12 02:36:11 · 599 阅读 · 0 评论 -
大数据最新耗时n年,38页《数据仓库知识体系(5),2024年最新2024年“金三银四”来袭
那么基础库和主题库的建设就是在对业务理解的基础上,基于易存储、易管理、易使用的原则抽像数据存储结构,说白了,就是基于一定的原则设计数据库表结构,然后再根据数据资源清单设计数据采集清洗流程,将整洁干净的数据存储到数据库或数据仓库中。在后台,是一致性维度的产生、保存和分发的场所。:元数据管理是对基础库和主题库中的数据项属性的管理,同时,将数据项的业务含义与数据项进行了关联,便于业务人员也能够理解数据库中的数据字段含义,并且,元数据是后面提到的自动化数据共享、数据交换和商业智能(BI)的基础。原创 2024-05-12 02:35:35 · 672 阅读 · 0 评论 -
大数据最新群集【LNMP+SSL+nfs+负载均衡及高可用】_lnmp高可用,干货整理
root@lb1 conf.d]# scp -rp [email protected]:/etc/nginx/ssl_key /etc/nginx/ //复制证书。[root@web2 nginx]# scp -rp [email protected]:/etc/nginx/ssl_key /etc/nginx //复制证书。[root@web2 nginx]# mount -t nfs 192.168.1.11:/wordpress/ /wordpress //挂载论坛目录。原创 2024-05-12 02:34:58 · 983 阅读 · 0 评论 -
大数据最全Kafka生产者分区_第3关 kafka 生产者分区 (三) 头歌(2),2024年最新2024年大数据开发常见面试题目
生产环境中,我们往往需要更加自由的分区需求,我们可以自定义分区器。需求:在上面的根据key分区案例中,我们发现与我们知道的hash分区结果不同。那么我们就实现一个。3.实现步骤:① 定义类,实现Partitioner接口② 重写partition()方法代码实现:/\*\*\* 1. 实现接口Partitioner\* 2. 实现3个方法:partition,close,configure\* 3. 编写partition方法,返回分区号\*//\*\*原创 2024-05-11 17:56:59 · 490 阅读 · 0 评论 -
大数据最全kafka学习笔记(4),2024年最新实战讲述大数据跨平台框架应用
Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等。原创 2024-05-11 17:56:23 · 883 阅读 · 0 评论 -
大数据最全kafka学习(1),2024年最新2024最新腾讯大数据开发面试分享
发布者发布一条消息,该消息通过主题传递给所有的订阅者,在一条消息广播之后才订阅的用户则是收不到该条消息的。在发布 - 订阅模型中,如果只有一个订阅者,那它和队列模型就基本是一样的了。所以说,发布 - 订阅模型在功能层面上是可以兼容队列模型的。发布订阅模型(Pub-Sub) 使用。作为消息通信载体,类似于。原创 2024-05-11 17:55:47 · 741 阅读 · 1 评论 -
大数据最全Kafka入门到实战-第二弹,【金九银十】
义、实战项目、大纲路线、讲解视频,并且后续会持续更新**执行完会有一个test.sink.txt文件,也可以通过下边的命令查看数据。原创 2024-05-11 17:55:11 · 340 阅读 · 0 评论 -
【算法合集】学习算法第二天(二分与排序篇)_二分法实现 nums和target
6**说明:**13 出现在nums中并且下标为 6[],3**返回值:**-1**说明:**nums为空,返回-1**返回值:**-1**说明:**2 不存在nums中因此返回 -1。原创 2024-05-11 04:02:24 · 346 阅读 · 0 评论 -
【算法合集】学习算法第二天(二分与排序篇)_二分法实现 nums和target(2)
/优先判断特殊 fast-template//从最左下角的元素开始往左或往上){//元素较大,往上走i–;//元素较小,往右走j++;else//二分法 fast-template//右边是往下,不一定有坡峰//右边是往上,一定能找到波峰else//其中一个波峰。原创 2024-05-11 04:01:48 · 781 阅读 · 0 评论 -
【算法合集】学习算法第二天(二分与排序篇)_二分法实现 nums和target(1)
],3**返回值:**-1**说明:**nums为空,返回-1**返回值:**-1**说明:**2 不存在nums中因此返回 -1。原创 2024-05-11 04:01:12 · 608 阅读 · 0 评论 -
【算法入门】 有效括号序列 逆波兰表达式求值 点击消除_辅助栈包含头文件
本专栏收录的均为牛客网的算法题目,内含链表、双指针、递归、动态规划、基本数据结构等算法思想的具体运用。牛客网不仅有大量的经典算法题目,也有大厂的面试真题,面试、找工作完全可以来这里找机会。此外,网站内的编码主题多样化,调试功能可运用性强,可谓是非常注重用户体验。这么好的免费刷题网站还不快入手吗,快去注册开启算法百炼成神之路吧!原创 2024-05-11 04:00:36 · 841 阅读 · 0 评论 -
Unity技术手册-UGUI零基础详细教程-Toggle切换_unity 代码控制shader的toggle值
重点在Toggle上,可以看到Toggle组件中的Transition和Button中的一样,有四个设置选项(下方有图,重点属性)无、颜色过度、精灵图切换过度、动画过度。**Is On:**是否打开,对勾表示显示了下方Graphic属性中指定的图片,否则是隐藏,代码中可gameObject.GetComponent().isOn = false;**On Value Changed(Boolean):**类似于Button中的On Click,在这里添加事件,可以使得开关被点击的同时触发一些事件。原创 2024-05-10 19:23:18 · 694 阅读 · 0 评论 -
Unity技术手册-UGUI零基础详细教程-Toggle切换_unity 代码控制shader的toggle值(1)
重点在Toggle上,可以看到Toggle组件中的Transition和Button中的一样,有四个设置选项(下方有图,重点属性)无、颜色过度、精灵图切换过度、动画过度。**Is On:**是否打开,对勾表示显示了下方Graphic属性中指定的图片,否则是隐藏,代码中可gameObject.GetComponent().isOn = false;**On Value Changed(Boolean):**类似于Button中的On Click,在这里添加事件,可以使得开关被点击的同时触发一些事件。原创 2024-05-10 19:22:43 · 517 阅读 · 0 评论 -
Unity技术手册-UGUI零基础详细教程-Text文本(打字、阴影、渐变)_unity 文字特效
解决这个问题需要“\u3000”字符来替换,直接在组件上输入时,将输入法调成全角然后输入空格即可实现,如果是代码中修改,获取文本然后利用字符串替换即可(字符串.Replace(" ", “\u3000”);因为文本有自动换行,所以可能造成这个问题,就是换行了,因为Unity是国外英语开发的,所以空格单词放不下换行还算合理(单词没那么长),而中文一句话可能不短,这时候换行就不合适了。如果是其他方式,可以在Update中不断取字符串之后给text赋值即可。原创 2024-05-10 19:22:07 · 284 阅读 · 0 评论 -
Unity技术手册-UGUI零基础详细教程-Text文本(打字、阴影、渐变)_unity 文字特效(1)
Horizontal Overflow:控制超出宽度后的文字变化,有两个值Wrap(是控制在没有输入回车的情况下,当超过宽度时候文本自动换行),Overflow(当超过宽度的时候,文本还会继续显示,显示在宽度外面)Vertical Overflow:控制超出高度后的文字变化,,有两个值Truncate(当超过高度时候文本不再显示),Overflow(当超过高度的时候,文本还会继续显示,显示在高度外面)Font Size:字体大小设置,注意当你的字体大小超出了Text控件的宽高,可能不会显示文本。原创 2024-05-10 19:21:31 · 736 阅读 · 0 评论