大数据
文章平均质量分 58
chen_zan_yu_
同是寒窗苦读,岂能甘拜下风
展开
-
Hadoop启动报Error: JAVA_HOME is not set and could not be found解决办法
老东家Hadoop安装完后,启动时报Error: JAVA_HOME is not set and could not be found.解决办法:修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME。应当使用绝对路径。export JAVA_HOME=$JAVA_HOME/...原创 2019-12-31 01:29:18 · 945 阅读 · 0 评论 -
解决Windows直接拖动文件进虚拟机ubuntu
牛逼逼原创 2019-12-30 16:40:41 · 1443 阅读 · 0 评论 -
MySQL创建用户报错 ERROR 1396 (HY000): Operation CREATE USER failed for 'hive'@'%'
创建命令:报错:查看后数据库不存在,回忆了一下操作,手动删除过 hive这用户,可能是这个操作引起的,现在执行命令重新删除一下drop user 'afei'@'%';mysql> drop user 'afei'@'%';Query OK, 0 rows affected (0.00 sec)扩展地址...原创 2019-12-30 14:24:36 · 4283 阅读 · 0 评论 -
在linux中安装mysql设置开机自启,设置utf-8编码,Navicat能访问
1.检测系统是否自带安装mysql# yum list installed | grep mysql2.如果发现有系统自带mysql,删除# yum -y remove mysql-libs.x86_643.随便在你存放文件的目录下执行,mysql5.6只有79M大,# wget http://repo.mysql.com/mysql-community...原创 2019-12-30 11:21:54 · 286 阅读 · 0 评论 -
mysql启动失败“MySQL Daemon failed to start” CentOS上,用命令:service mysqld restart 启动mysql报错:
更换到root权限下再执行一遍即可。sudoservice mysqld start原创 2019-12-30 10:32:47 · 422 阅读 · 0 评论 -
mysql-connector-java各种版本下载地址
点这里https://mvnrepository.com/artifact/mysql/mysql-connector-java比如我选中版本5.1.40到这个界面,点jar原创 2019-12-29 23:46:53 · 1442 阅读 · 0 评论 -
重置密码遇到ERROR 1045 (28000): Access denied for user 'root'@'localhost' (using passwor:yes)问题
一般这个错误是由密码错误引起,解决的办法自然就是重置密码。假设我们使用的是root账户。1.重置密码的第一步就是跳过MySQL的密码认证过程,方法如下:#vim /etc/my.cnf(注:windows下修改的是my.ini)在文档内搜索mysqld定位到[mysqld]文本段:/mysqld(在vim编辑状态下直接输入该命令可搜索文本内容)在[mysqld]后面任意一行...原创 2019-12-29 21:22:42 · 3412 阅读 · 1 评论 -
mysql-connector-java-5.1.46.zip下载
mysql-connector-java-5.1.46.zip下载原创 2019-12-29 09:46:59 · 1799 阅读 · 0 评论 -
apache-hive-1.2.1-bin 下载
apache-hive-1.2.1-bin 下载原创 2019-12-29 09:30:07 · 2209 阅读 · 0 评论 -
hbase-1.1.2-bin.tar.gz下载路径
hbase-1.1.2-bin.tar.gz下载路径原创 2019-12-28 21:11:24 · 3249 阅读 · 0 评论 -
centOS中mysql一些常用操作
安装mysqlyum -y install mysql-server修改mysql配置vi /etc/my.cnf 这里会有很多需要注意的配置项,后面会有专门的笔记暂时修改一下编码(添加在密码下方): default-character-set = utf8设置mysql随系统启动# chkconfig mysqld on ← 设置MySQL服务随系统启动自启动# chkconf...原创 2019-12-28 21:01:56 · 113 阅读 · 0 评论 -
解决利用sqoop导入MySQL中文乱码的问题
路径:在后面加上:原创 2019-12-28 20:37:51 · 609 阅读 · 0 评论 -
service mysql start出错,mysql启动不了,解决mysql: unrecognized service错误
service mysql start出错,mysql启动不了,解决mysql: unrecognized service错误的方法如下:[root@ctohome.com ~]# service mysql startmysql: unrecognized service[root@ctohome.com ~]# service mysql restartmysql: unrecog...原创 2019-12-28 17:26:25 · 1921 阅读 · 0 评论 -
Hama图计算模型
Hame是Google Pregel的开源实现,与Hadoop适合于分布式大数据处理不同,Hama主要用于分布式的矩阵、graph、网络算法的计算。简单说,Hama是在HDFS上实现的BSP(Bulk Synchronous Parallel)计算框架,弥补Hadoop在计算能力上的不足。本教程主要介绍hama的单机模式安装配置以及用hama解决一些算法问题。Hama单机环境安装配置:...原创 2019-12-08 09:06:31 · 1321 阅读 · 1 评论 -
Python split()方法
描述Pythonsplit()通过指定分隔符对字符串进行切片,如果参数 num 有指定值,则分隔 num+1 个子字符串语法split() 方法语法:str.split(str="", num=string.count(str)).参数str -- 分隔符,默认为所有的空字符,包括空格、换行(\n)、制表符(\t)等。 num -- 分割次数。默认为 -1, ...原创 2019-12-01 21:00:22 · 462 阅读 · 0 评论 -
配置Linux开发环境(hadoop-2.6.4)
可以去看视频:虚拟机中Centos6.5安装hadoop-jdk-eclipseup主-AnnaChen 安装包Centos镜像超过4G,某网盘要开会员才能上传,所有请同学自行下载,参考版本是,CentOS-6.5-x86_64-bin-DVD1.iso 其他安装包,包括教程通过网盘分享 链接: http://pan.baidu.com/s/1geK0t39 密码:43ak配置L...原创 2019-11-30 13:02:45 · 541 阅读 · 0 评论 -
Hadoop伪分布式安装详细步骤
原创 2019-11-30 12:44:05 · 425 阅读 · 0 评论 -
Hadoop 完全分布式安装
原创 2019-11-30 12:25:05 · 198 阅读 · 2 评论 -
HBase 伪分布模式配置
原创 2019-11-30 12:19:36 · 198 阅读 · 0 评论 -
hadoop 伪分布模式下安装 eclipse 并运行 mapreduce 程序
1. 下载并安装 eclipse下载 Linux 系统下运行的 eclipse 压缩包,下载地址:https://www.eclipse.org/downloads/download.php?file=/technology/epp/downloads/release/20%2019-09/R/eclipse-java-2019-09-R-linux-gtk-x86_64.tar.gz...原创 2019-11-30 12:15:19 · 241 阅读 · 0 评论 -
Window 上使用 IDEA 编写词频统计的 spark scala 程序,提交 jar 包到 虚拟机上运行
太男了,必须写这篇博客让你们少走弯路(阿亮制作)1.安装 IDEA下 载 地 址 : https://www.jetbrains.com/idea/download/#section=windows 下载版本:spark 和 scala 版本的选择,进入虚拟机,启动 spark-shell,使用命令./spark-shell,查看版本信息:2.下载 Scalasc...原创 2019-11-30 11:59:14 · 694 阅读 · 0 评论 -
Vmware提示以独占方式锁定此配置文件失败。另一个正在运行的VMware进程可能正在使用配置文件以及虚拟机黑屏
原文链接Vmware提示以独占方式锁定此配置文件失败。另一个正在运行的VMware进程可能正在使用配置文件以及虚拟机黑屏解决办法:看了很多说删除.lck文件的,还有说删除.vmdk文件的,.vmdk文件在删除的时候提示无法删除,.lck文件删除后,也无法解决问题,又不想卸载重装。之后就打开控制面板,更改-修复VMware,重启电脑,再打开VMware不提示独占锁定文件失败,但是一直黑屏,之后...原创 2019-10-13 00:03:35 · 960 阅读 · 3 评论 -
centos下问题:connect:network is unreachable
问题描述:弄了三台机器准备搭建一个集群,按照centos7系统,一台主节点安装桌面环境,两台计算节点。配置计算节点的时候,发现ping不通,出现connect:network is unreachable问题问题分析:/etc/sysconfig/network-scripts/中只有ifcfg-lo文件,缺少ifcfg-eth0。解决方案:方案一(临时):...原创 2019-09-21 20:35:07 · 860 阅读 · 0 评论 -
熟悉常用的Linux操作
cd命令:切换目录(1) 切换到目录 /usr/local cd /usr/local(2) 去到目前的上层目录 cd ..(3)回到自己的主文件夹 cd ~ls命令:查看文件与目录(4)查看目录/usr下所有的文件ls -l /usrmkdir命令:新建新目录(5)进入/tmp目录,创建一个名为a的目录,并查看有...原创 2019-08-31 20:48:57 · 214 阅读 · 0 评论
分享