记录下使用crontab,datax定时同步数据遇到的问题。

1.开始使用如下配置,死活不执行。网上说crontab环境便利的问题,设置了也没反应。

[root@hxjk_test_mysql_redis_file test]# crontab -l
SHELL=/bin/bash
* 1 * * * sh /test/test.sh
*/3 * * * * python /data/datax/bin/datax.py /data/datax/job/job.json

 crontab中的环境变量默认不会将我们自行定义的环境变量载入进来,所以执行脚本的时候,需要执行source命令

修改如下执行成功:

[root@hxjk_test_mysql_redis_file test]# crontab -l
SHELL=/bin/bash
* * * * sh /test/test.sh
*/ * * * * sh /data/crontab/mysqltomysql1.sh
[root@hxjk_test_mysql_redis_file crontab]# more mysqltomysql1.sh
#!/bin/sh
source /etc/profile
python /data/datax/bin/datax.py /data/datax/job/job.json

定时执行成功。

Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.509 [job-] INFO  JobContainer - PerfTrace not enable!)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.509 [job-] INFO StandAloneJobContainerCommunicator - Total records, b
ytes | Speed 439B/s, records/s | Error records, bytes | All Task WaitWriterTime .000s | All Task WaitReaderTime .030s | Percentage 100.00%)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.510 [job-] INFO JobContainer - )
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务启动时刻 : -- ::)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务结束时刻 : -- ::)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务总计耗时 : 10s)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务平均流量 : 439B/s)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (记录写入速度 : 5rec/s)
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (读出记录总数 : )
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (读写失败总数 : )
Sep :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT ()
[root@hxjk_test_mysql_redis_file crontab]#

最新文章

  1. C#正则表达式通过HTML提取网页中的图片src
  2. 浅析python 中__name__ = '__main__' 的作用
  3. Map循环的三种方法
  4. paip. 提升性能---hibernate的缓存使用 总结
  5. Android 开发必备
  6. Android视频直播解决方案(rstp、udp)
  7. Ajax返回html和json格式数据
  8. SHDocVw, AxSHDocVw的引用
  9. NYOJ--353--bfs+优先队列--3D dungeon
  10. Matlab入门学习(文件读写)
  11. 20_Python字典总结
  12. 20155227 实现mypwd
  13. Javascript 链式操作以及流程控制
  14. 微信公众号页面的web页面键盘弹起问题
  15. Spring Boot (五)Spring Data JPA 操作 MySQL 8
  16. 慢腾腾的Quartus prime16.0加快编译速度
  17. servlet的xx方式传值中文乱码
  18. javascript_ajax 地址三级联动
  19. Linux运维之shell脚本基础知识
  20. 局域网内使用ipv6 通信

热门文章

  1. spring boot 修改banner
  2. 20175203 2018-2019-2 实验一《Java开发环境的熟悉》实验报告
  3. 高并发大流量专题---3、前端优化(减少HTTP请求次数)
  4. web测试点
  5. 关系型数据库MySQL(四)_备份与还原
  6. [BOI 2008]Elect 选举
  7. Java组合实体模式~
  8. UVA10271_Chopsticks
  9. python post 发送字符串
  10. Fiddler之iOS手机抓包代理设置