- 博客(5)
- 收藏
- 关注
RSS订阅原创 crontab hadoop任务没有执行
最近一段时间 公司要把sqlserver里的100G数据导入到HDFS中，但是数据库在同事的服务器中，为了不影响同事工作，决定定时在晚上自动执行，但是crontab并没有自动执行，并且执行了下发现脚本的逻辑是没有问题的，而且直接执行是没有问题的，后来又去/etc/crontab文件里去看了下，发现crontab中的环境变量不一样解决办法如下：1：在本地输入 echo $PATH2:将输
2017-06-26 10:38:19
1276
1
原创 crontab定时hadoop任务没有执行
最近公司要从sqlserver数据库数据大约100G导入到hdfs中，由于数据库在同事的服务器中，为了不影响同事工作，计划晚上自动执行。服务器的定时脚本的时候发现了定时脚本并没有被执行，但是定时比如创建文件夹却可以执行，并且执行了下发现脚本的逻辑是没有问题的，而且直接执行是没有问题的，又去/etc/crontab文件里去看了下 原来是crontab中的环境变量不一样，需要在定时脚本前面加上环境
2017-06-26 10:10:48
2792
原创 Linux（centos）不能使用FTP 命令 -bash: ftp: command not found
Linux下登陆Linux中使用 FTP 命令时出现“-bash: ftp: command not found”Linux中测试搭建 FTP 服务器，刚安装完 vsftpd 测试登录时就提示“-bash: ftp: command not found”,说明需要安装FTP客户端。安装此ftp-0.17-51.1.el6.x86_64.rpm包即可访问。文件链接：http://p
2017-06-20 11:13:14
5713
原创 解决为什么提交spark job 在web上没有进度
在提交jar包上 执行spark-submit 后 在本地执行成功 但是在8088页面上无记录解决办法：在程序上去掉程序中的setMaster（"local"）这条语句并不是在集群中提交jobFei joe点击打开链接val conf = new SparkConf().setAppName("Map").setMaster("local")
2017-06-14 11:00:39
1850
原创 关于mysql 数据库没有 mysql库 和重启mysql后密码无法登陆 Access denied for user ''@'localhost' to database 'mysql'
提示：ERROR 1044 (42000): Access denied for user ''@'localhost' to database 'mysql'。网上找了一个比较流行的方法（见方法一），搞定了。今天又用这个试了试，却搞不定，在网上找了半天，终于发现是因为mysql数据库的user表里，存在用户名为空的账户即匿名账户，导致登录的时候是虽然用的是root，但实际是匿名登录的，通过错误提
2017-06-02 10:42:39
700
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人