crontab+shell实现java文件定时运行



我们有时会想让自己写的程序能定时运行实现数据更新,那么接下来就和我一道来实现它吧。。其实很简单,很多人为此很烦恼,主要还是出在环境变量的设置上。

1、定义环境变量

根椐LINUX系统的不同,或设置etc/profile或设置~/.bash.profile文件的classpath例如

export JAVA_HOME=/usr/local/jdk
export PATH=$PATH:$JAVA_HOME/bin:$JAVA_HOME/lib:$TOMCAT_HOME/lib
CLASSPATH=.:$JAVA_HOME/jre/lib:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/postgresql-8.2_?506.jdbc4.jar:$TOMCAT_HOME/lib/pdflib.jar:$JAVA_HOME/lib/msutil.jar:$JAVA_HOME/lib/msbase.jar:$JAVA_HOME/lib/mssqlserver.jar

2,写shell脚本

以我们有个文件Test.java放在usr/local/test/文件夹下,并已经用javac编译完毕

#/bin/bash

cd /usr/local/test? //编译路径指向Test.java所在文件夹

/usr/local/jdk/bin/java? Test >> test.log //将java文件中所有的System.out.print输出的信息输出到test.log中。

保存为test.sh,假定存放路径为/home/jack/test.sh

3,写crontab文件

这里一定要注意,classpath在这里一定要设置,假定test.java 文件中有要用到SQLSever 和? postgresQL 的数据库连接驱动。

用crontab -e 打开crontab 文件

内容 如下:

CLASSPATH=.:usr/local/jdk/lib/tools.jar:/usr/local/jdk/lib/postgresql-8.2-506.jdbc4.jar:/u
sr/local/jdk/lib/msutil.jar:/usr/local/jdk/lib/msbase.jar:/usr/local/jdk//lib/mssqlserver.
jar//


# DO NOT EDIT THIS FILE - edit the master and reinstall.
11 * * * * /usr/sbin/ntpdate -s -b 133.100.9.2

00 22 * * ?*? sh /home/jack/test.sh //设置为每天22:00自动运行

保存。

以上三步就完成了。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
可以使用Java结合Shell脚本来清洗数据。首先,你可以使用Java编写一个程序,使用Spark Streaming消费Kafka中的数据。你可以使用以下命令来启动这个程序: ``` nohup java -jar -Dloader.main=com.suncnpap.etl.kafka.consumer.Kafka10Consumer dataintell-etl-1.0.0.jar -p `pwd`/conf/official_520000.json > logs/official_520000.log 2>&1 & ``` 这个命令会启动一个Java程序,消费Kafka中的数据,并将清洗后的数据写入日志文件official_520000.log中。 接下来,你可以编写一个Shell脚本来将清洗后的数据迁移到MongoDB中。你可以使用以下命令来导出数据: ``` mongoexport -d DataIntell -c official_520000_clean_test --type=json -o official_520000_clean_test.json ``` 然后,你可以使用以下命令将导出的数据导入到MongoDB中: ``` mongoimport -d DataIntell -c official520000 --type=json --file official_520000_clean_test.json ``` 最后,你可以使用Shell脚本定时执行这些操作,以实现自动清洗数据的功能。你可以使用以下命令来定时执行Shell脚本: ``` crontab -e ``` 然后在打开的文件中添加以下内容: ``` 0 0 * * * /path/to/your/script.sh ``` 这样,每天午夜时分,Shell脚本就会自动执行,清洗数据并将其导入到MongoDB中。 #### 引用[.reference_title] - *1* *2* [Shell脚本 (bash)----附带 数据迁移,sparkstreaming消费kafka脚本](https://blog.csdn.net/qq_18453581/article/details/113886221)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [【大数据清洗和预处理】1.8HDFS的shell操作(2)(学习笔记)](https://blog.csdn.net/weixin_63745352/article/details/128025874)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insert_down28v1,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值