weixin_47055922的博客

一、场景描述 上一篇博客研究了不用sqoop将mysql中的数据导入到hive中，发现有一定的局限性，数据量较少还好，要是数据表过多，就显的很繁琐，所有我想简化这个步骤，利用sqoop来导入。 毕竟sqoop（SQL-to-Hadoop）是前辈们专门研究出来的，用于关系数据库与非关系数据库之间做数据传输的。 因为我的hadoop环境是自己安装的，目前还没有sqoop环境，所以我需要先安装sqoop环境，下面做一个详细的介绍，从sqoop的安装，...

一、场景描述 公司需要的一些数据是自己收集的，收集的时候存储在mysql中，现在需要将mysql中的存储的数据导入到hive库中。 网上查看教程找到很多的导入方式都报错，描述最多的是sqoop导入。Sqoop（SQL-to-Hadoop）：主要用于传统数据库和hadoop之间的传输数据。 但是hive环境是我自己搭建起来的，还没有安装sqoop，安装又会浪费大量的时间，所有思考能不能不通过sqoop将mysql中的数据导入到hive中。二、导入过程 将mys...

一、场景描述1、创建表语句：hive> create table movie02( userID int comment '用户ID', movieID int comment '电影ID', rating int comment '电影评分', timestamped bigint comment '评分时间戳', movieName string comment '电影名字', movieType string commen...

一、建表语句 create table pt_log_20210202(id int, name string, pass string, mail string, nickname string) row format delimited fields terminated by '\t' lines terminated by '
' stored as textfile;代码说明：这段代码在hive>中执行，create后面是基本的sql语...

一、场景描述 在用navicat连接linux服务器端的mysql时，连接失败，所以网上查找各种资料，先给mysql授权，使所有ip都可以访问，下面是授权过程： 1、进入mysql命令：mysql -uroot -proot 2、进入mysql数据库：usemysql； 3、授权：grantallprivilegeson*.*to'root'@'%'identifiedby'root'with...

一、场景描述 电脑1（ip：192.168.31.100）和电脑2（ip：192.168.31.115）连接同一个wifi，我想要互相连接时，发现连接不通， 开始利用ping命令检测问题。（注意，两台电脑的防火墙都是关闭的） 这个时候，我用 电脑2 ping电脑1 （ ping 192.168.31.110 不通） 发现ping不通，于是我用电脑1ping网关，（ ping 192.168.31....

一、问题描述在linux系统的mysql中，当我删除已经存在的数据库studyfunction时，报错studyfunction这个数据库不存在，可是我 show databases；发现这个数据库明明存在。网上查找了各种原因没有找到解决的办法，于是我分析了一下产生这个问题的原因：我之前修改了mysql区分大小写，才出现的的这个问题，所以我猜测，当我设置了不区分大小写，大写的studyfunction这个数据库底层逻辑被修改了，所以找不到它解决办法： 先exit退出mysql，然...

一、查看docker下所有镜像id查看镜像id命令：docker ps -a启动镜像某镜像命令：docker start 该镜像id二、查看docker下正在运行的镜像id查看正在运行的镜像id命令：docker ps容器交互，进入该镜像的目录结构命令：docker exec -it 该镜像id /bin/bash...

一、场景描述在工作过程中，需要知道虚拟机的相关信息，比如主机名、IP地址、物理地址、子网掩码、网关、DNS服务器IP地址信息。一个一个查询比较麻烦，所以想到写个shell脚本一键获取二、获取脚本话不多说，下面附上查询代码#!/bin/bash#author luhongwu#学习脚本案例显示系统使用的以下信息：#主机名、IP地址、物理地址、子网掩码、网关、DNS服务器IP地址信息IP=`ifconfig eth0 | head -2 | tail -1 | awk '.

for file in $(find ./ -type f -atime -1) #寻找文件do mv ${file} ${file}.accessed #加后缀 mv ${file}.accessed /home/shell_study/accessed/ 转存到指定文件夹done获得24小时内被修改过的文件名字，然后把这些名字统一都加后缀”accessed”，存入到另外一个文件中去注意：这个代码不要随便执行，如果你修改了linux系统文件，它也会转存到指定文件夹，会导致..

一、错误代码实例在shell脚本的学习过程中，遇到定义一个带有return语句的函数，来计算两数之和，代码如下：#!/bin/bashfunWithReturn(){ echo "这个函数会对输入的数字进行相加运算" echo "输入第一个数字:" read num1 echo "输入第二个数字:" read num2 return $(($num1+$num2))}funWithReturnecho "输入的两数之和为$?!"保存退出后，执行sh test.sh发现，输

本导航站汇聚本博主所有python、oracle、linux、mysql、大数据及其它学习原创内容，励志将50篇归为一类，该导航站方便大家收藏查看。一、pythonpython-利用python写一个购物小程序 python-学习脚本一&&python翻转字符串脚本 python-导入selenium包报错 line 21, in do_import module = self._system_import(name, *args, **kwargs) —亲测有效 pyth.

一、编辑nginx.conf文件1、修改nginx.conf文件进入conf文件夹，cd/usr/local/nginx/conf编辑nginx.conf，vimnginx.conf，#keepalive_timeout 0;keepalive_timeout 65;#gzip on; upstream ropservs{ip_hash;server ...

一、利用Windows自带的命令行导入（推荐）注意：这种方式需要用到oracle客户端，在cmd窗口执行代码，如果没有配置环境变量，需要进入oracle客户端的安装目录中执行，下面会介绍详细方式1、以管理员方式登录plSQL 注意：oracle数据库的管理员账户一般为sys，忘记登录密码，不知道如何登录，的请查看下面这个链接有详细服务器端修改密码方式：https://blog.csdn.net/weixin_47055922/article/details/1090474192、在...

注意：有两种方式导入，利用plSQL工具导入（不推荐）以及利用Windows自带的命令行导入，下一篇将介绍利用Windows自带的命令行导入，附上链接：一、利用plSQL工具导入（不推荐）1、以管理员方式登录plSQL 注意：oracle数据库的管理员账户一般为sys，忘记登录密码，不知道如何登录，的请查看下面这个链接有详细服务器端修改密码方式： https://blog.csdn.net/weixin_47055922/article/details/10...

一、详细步骤1、安装Oracle客户端，下面是安装连接。 （注意：需要安装exp导出工具版本与数据库服务器端exp版本一致的Oracle客户端，否则会出问题，下面会有介绍） https://blog.csdn.net/li1325169021/article/details/849359932、找到oracle客户端中的exp.exe执行文件 实例：D:\app\Admin\product\11.2.0\client_1\BIN\3、进入cmd窗口 执行：win...

一、修改oracle_11g管理员的用户名密码1、查看docker容器开启的oracle进程id命令：docker ps[root@localhost ~]# docker ps CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS ...

一、环境说明有两台电脑，另外一台没有鼠标或者不方便操作时，可以使用该远程控制的方法对另外的那台电脑进行操作二、开启虚拟wifi 在开始菜单上右击，选择“命令提示符（管理员）（A）”，以管理员身份运行cmd命令提示符。 在命令提示符输入：netsh wlan set hostednetwork mode=allow ssid=xuniWIFI key=123456，回车执行命令。（当然，你可以直接复制命令，然后Ctrl+V粘贴到win10命令提示符中，因为win10支持命令.

一、说明Linux上的每个进程都有几个相关的限制，例如它可以同时打开的最大文件数。您可以通过运行以下命令找出当前打开的文件限制ulimit -Sn # soft limit; can be raised up to the hard limitulimit -Hn # hard limit要查看所有限制，请运行ulimit -Sa # soft limitsulimit -Ha # hard limits调整这些限制的方式取决于特定的Linux系统（例如，是否基于syst

一、授权命令：chmod 777 test.sh 或： chmod +x test.sh二 、压缩与解压缩命令1.压缩命令： 压缩成 .tar.gz文件　　命令格式：tar -zcvf 压缩文件名.tar.gz 被压缩文件名 实例： tar -zcvf test1.conf.tar.gz test1.conf 压缩成 .zip文件 命令格式：zip -q -r 压缩包名.zip 目录/文件名 ...