crontab定时执行datax
2024-08-24 05:50:11
记录下使用crontab,datax定时同步数据遇到的问题。
1.开始使用如下配置,死活不执行。网上说crontab环境便利的问题,设置了也没反应。
[root@hxjk_test_mysql_redis_file test]# crontab -l
SHELL=/bin/bash
* 1 * * * sh /test/test.sh
*/3 * * * * python /data/datax/bin/datax.py /data/datax/job/job.json
crontab中的环境变量默认不会将我们自行定义的环境变量载入进来,所以执行脚本的时候,需要执行source命令
修改如下执行成功:
[root@hxjk_test_mysql_redis_file test]# crontab -l
SHELL=/bin/bash
* * * * sh /test/test.sh
*/ * * * * sh /data/crontab/mysqltomysql1.sh
[root@hxjk_test_mysql_redis_file crontab]# more mysqltomysql1.sh
#!/bin/sh
source /etc/profile
python /data/datax/bin/datax.py /data/datax/job/job.json
定时执行成功。
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.509 [job-] INFO JobContainer - PerfTrace not enable!)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.509 [job-] INFO StandAloneJobContainerCommunicator - Total records, b
ytes | Speed 439B/s, records/s | Error records, bytes | All Task WaitWriterTime .000s | All Task WaitReaderTime .030s | Percentage 100.00%)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.510 [job-] INFO JobContainer - )
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务启动时刻 : -- ::)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务结束时刻 : -- ::)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务总计耗时 : 10s)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务平均流量 : 439B/s)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (记录写入速度 : 5rec/s)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (读出记录总数 : )
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (读写失败总数 : )
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT ()
[root@hxjk_test_mysql_redis_file crontab]#
最新文章
- C#正则表达式通过HTML提取网页中的图片src
- 浅析python 中__name__ = '__main__' 的作用
- Map循环的三种方法
- paip. 提升性能---hibernate的缓存使用 总结
- Android 开发必备
- Android视频直播解决方案(rstp、udp)
- Ajax返回html和json格式数据
- SHDocVw, AxSHDocVw的引用
- NYOJ--353--bfs+优先队列--3D dungeon
- Matlab入门学习(文件读写)
- 20_Python字典总结
- 20155227 实现mypwd
- Javascript 链式操作以及流程控制
- 微信公众号页面的web页面键盘弹起问题
- Spring Boot (五)Spring Data JPA 操作 MySQL 8
- 慢腾腾的Quartus prime16.0加快编译速度
- servlet的xx方式传值中文乱码
- javascript_ajax 地址三级联动
- Linux运维之shell脚本基础知识
- 局域网内使用ipv6 通信