大数据
文章平均质量分 56
大白菜程序猿
大家好,我是大白菜程序猿,一名热衷于在数字世界中遨游的IT博主。在这个日新月异的科技时代,我坚信技术是推动社会进步的重要力量。因此,我致力于将最前沿的IT资讯、实用的技术教程、以及那些能够激发灵感的创新案例,通过我的博客和社交媒体平台,分享给每一位对科技充满热情的你。
从编程语言的深度剖析,到云计算、大数据、人工智能等前沿技术的趋势洞察,再到网络安全、项目管理等实战经验的分享,我力求内容既具广度又有深度,帮助大家构建起坚实的技术知识体系,同时也鼓励大家勇于探索未知,不断挑战自我极限。
展开
-
mysql创建数据库和表
MySQL数据库与表创建及增删改查操作详细文档原创 2024-09-05 11:26:57 · 1159 阅读 · 0 评论 -
Oracle数据库安装和配置详细文档
Oracle数据库安装和配置详细文档原创 2024-09-05 11:24:00 · 411 阅读 · 0 评论 -
contOS7 Spark StandAlone HA 环境搭建
1.确定环境是否安装好搭建环境之前先确定自己的环境是否做好1.jdk 1.8版本2.HDFS MapReduce Hadoop 3.2.1 +3.zookeeper4.python 环境 3.8+点击直接查看 1,23,4操作: Hadoop jdk python 环境配置教程.2.先在spark-env.sh中, 删除: SPARK_MASTER_HOST=node1原因: 配置文件中固定master是谁, 那么就无法用到zk的动态切换master功能了.在spark-env.s原创 2022-01-13 17:09:01 · 854 阅读 · 0 评论 -
CentOS 7 查看关闭防火墙
CentOS 7.0默认使用的是firewall作为防火墙查看防火墙状态firewall-cmd --state# 停止firewallsystemctl stop firewalld.service# 禁止firewall开机启动systemctl disable firewalld.service # Centos7开放及查看端口# – 开放指定端口firewall-cmd --zone=public --add-port=1935/tcp --permanent# – 关闭指定端原创 2022-01-13 14:12:35 · 246 阅读 · 0 评论 -
在hdfs文件系统上上传文件做操文件等操作
点击直接查看操作: 点击跳转.原创 2022-01-12 20:29:22 · 2879 阅读 · 0 评论 -
执行./pyspark,./spark-shell报错拒绝链接,Error initializing SparkContext. java.net.ConnectException:
1.错误描述,执行./pyspark,./spark-shell报错拒绝链接22/01/12 03:49:27 ERROR SparkContext: Error initializing SparkContext.java.net.ConnectException: Call From 6274master/192.168.47.10 to 6274master:8020 failed on connection exception: java.net.ConnectException: Conne原创 2022-01-12 17:22:33 · 3574 阅读 · 5 评论 -
contOS7 安装Anaconda教程
获取资源加qq:2581671391.上传安装包:上传: Anaconda3-2021.05-Linux-x86_64.sh文件到Linux服务器上安装:sh ./Anaconda3-2021.05-Linux-x86_64.sh输入yes后就安装完成了.安装完成后, 退出SecureCRT 重新进来:看到这个Base开头表明安装好了.base是默认的虚拟环境.2.换国内源如果你安装好后, 没有出现base, 可以打开:/root/.bashrc这个文件, 追加如下内容:2.1原创 2022-01-11 18:59:45 · 195 阅读 · 0 评论 -
linux(contOS7)全分布式配置hadoop全部流程
contOS配置hadoop1.vi /etc/sysconfig/network-scripts/ifcfg-ens33进入配置网络编辑分配IPTYPE=EthernetPROXY_METHOD=noneBROWSER_ONLY=noBOOTPROTO=staticDEFROUTE=yesIPV4_FAILURE_FATAL=noIPV6INIT=yesIPV6_AUTOCONF=yesIPV6_DEFROUTE=yesIPV6_FAILURE_FATAL=noNAME=ens33原创 2021-12-25 16:51:58 · 1686 阅读 · 0 评论 -
Hadoop MapReduce单词统计
启动Hadoop1.执行命令启动前面实验部署好的Hadoop系统。[root@master ~]# cd /usr/cstor/hadoop/[root@master hadoop]# sbin/start-all.sh2.验证HDFS上没有wordcount的文件夹[root@master ~]# cd /usr/cstor/hadoop/[root@master hadoop]# bin/hadoop fs -ls / #查看HDFS上根目录文件 /原创 2021-04-14 00:31:02 · 254 阅读 · 1 评论 -
Linux Ubantu系统配置Hadoop
配置命令vim /usr/local/hadoop-3.2.2/etc/hadoop/core-site.xml<configuration> <property> <name>hadoop.tmp.dir</name> <value>file:/usr/local/hadoop-3.2.2/tmp</value> </property> <proper原创 2021-03-30 10:14:44 · 98 阅读 · 0 评论 -
Linux Ubanto命令
常用命令及其作用linux常用命令命令作用cp -i RecognEyes.jar ./new_file/this_is_new_file.jar复制文件rm -rf this_is_new_file.jar删除文件cd …返回上一级tar zxvf spark-2.3.1-bin-hadoop2.7.tgz解压文件到指定的目录sudo mv spark-2.3.1-bin-hadoop2.7 /usr/local/spark转移文件nano原创 2021-03-27 13:46:23 · 271 阅读 · 0 评论