大数据
twscust
这个作者很懒,什么都没留下…
展开
-
深度好文丨读完此文,就知道Hadoop了!
“昔我十年前,与君始相识。” 一瞬间Hadoop也到了要初中择校的年龄了。 十年前还没有Hadoop,几年前国内IT圈里还不知道什么是Hadoop,而现在几乎所有大型企业的IT系统中有已经有了Hadoop的集群在运行了各式各样的任务。 2006年项目成立的一开始,“Hadoop”这个单词只代表了两个组件——HDFS和MapReduce。到现在的10个年头,这个单词代表转载 2016-10-25 20:57:21 · 1029 阅读 · 0 评论 -
使用Oracle创建数据库,SQL developer连接数据库简要步骤
SQL Developer 不能用于创建Oracle数据库,只能用来连接已经创建的数据库,数据库的建立要通过Database Configuration Assistant(DBCA)来完成。 找到开始菜单中Oracle-OraDb11g_home1下的DBCA,打开,可依次点击“下一步”,直到第3步数据库标识,创建数据库名称和SID。(最好在创建过程中形成文档,截图自己的创建过程,包括原创 2016-11-09 22:05:48 · 29383 阅读 · 0 评论 -
OWB创建工作区时ORA-00904:无效标识符 ORA-01919角色不存在等错误解决办法
之前一直用的是服务器上的OWB工作区,想在自己电脑上创建一个工作区,创建自己的用户,以免修改内容对服务器上的数据造成影响。捣鼓了两天,各种问题,各种查,解决了一个问题又来了一个,虐心。昨天晚上解决了一个问题,今天早上来继续捣鼓,又出现了一个问题ORA-00904:OWBSYS.WB_WORKSPACE_MANAGEMENT无效标识符,上网继续查,和OWBSYS的创建有关。于是清除owbsys,重建原创 2016-11-20 10:47:11 · 1598 阅读 · 0 评论 -
oracle 利用数据泵导入导出数据
目的:使用利用数据泵,将一台电脑上的数据库导出,导入到另一台电脑上的数据库。A电脑上的操作。expdp数据导出1、运行cmd;2、登录数据库,输入命令:sqlplus system/密码;3、创建目录路径:create directory backup_path as "E:\app\tws\oradata\orcldv"; (backup_path为路径名称,可自命名,原创 2016-11-30 09:26:49 · 9099 阅读 · 0 评论 -
Sqoop将Oracle数据导入HDFS时出现权限问题: Permission denied: user=root, access=WRITE,
利用Sqoop将Oracle数据导入HDFS时出现权限问题。执行列表操作能正常列出数据库中的表:sqoop list-tables --connect jdbc:oracle:thin:@IP地址:端口号:数据库 --username 用户名 --password 密码 但是执行import操作则提示权限问题:sqoop import --connect jdbc:oracle原创 2018-01-13 17:15:01 · 2401 阅读 · 0 评论 -
windows10上使用Eclipse配置Hadoop开发环境详细步骤+WordCount示例
说明:Hadoop集群已经搭建完毕,集群上使用的Hadoop-2.5.0。目的:在window10系统上利用Eclipse配置Hadoop开发环境,编写MapReduce关联Hadoop集群。准备:JDK环境变量配置、Eclipse、hadoop-2.7.5.tar、hadoop-eclipse-plugin-2.7.3.jar、hadoop-common-2.7.3-bin-master原创 2018-01-18 16:00:44 · 14451 阅读 · 1 评论 -
利用Sqoop把Oracle数据迁移到HDFS、Hive
提示:以下操作是在Xshell终端进行的,导入数据后若在Xshell终端上查看导入的数据,数据中的中文会出现乱码。要在Linux系统(最好是在可视化的Linux系统端)中去查看数据不会出现乱码。本人刚开始一直都是在Xshell上进行数据的导入、查看测试,花了一天时间解决“乱码”情况都没解决,最后才知是Xshell终端的问题,这里提示一下。一、利用Sqoop,从Oracle到HDFS第一步:把Ora原创 2018-01-17 15:33:07 · 27084 阅读 · 3 评论