ETL全量多表同步简述

1. 实现需求

当原数据库的表有新增、更新、删除操作时,将改动数据同步到目标库对应的数据表。

2. 设计思路

设计总体流程图如下:

1、获取同步表名如下图:

2、循环迁移数据如下图:

3、循环迁移数据的数据处理如下图:

2.1. 软件安装

1、Jdk

2、Kettle同步工具

说明:

kettle7版本要求jdk必须为1.8以上。

详细可参考官网:http://community.pentaho.com/projects/data-integration/

最新文章

  1. RabbitMQ学习系列(四): 几种Exchange 模式
  2. 在SharePoint 2010中,如何找回丢失的服务账号(Service Account)密码
  3. MVC3 数据验证用法之密码验证设计思路
  4. 后缀数组 & 题目
  5. Java泛型 E、T、K、V、N
  6. uva11025 The broken pedometer
  7. Microsoft Visual Studio 2010 VSTS单元测试指南
  8. Java队列集合的性能测试
  9. mysqldump 数据库迁移并改换engine
  10. P59、面试题7:用两个栈实现队列
  11. Excel--java POi
  12. Spring Boot简介
  13. Android开发5:布局管理器2(表格布局TableLayout)
  14. Linux环境编程相关的文章
  15. Mac OSX系统安装和配置Zend Server 6教程(2)
  16. npm install含义 及vue安装启动项目时报错解决及vue建项目时各文件间的依赖关系
  17. Celery(三)实例Application
  18. python3之xml&ConfigParser&hashlib&Subprocess&logging模块
  19. Python——Web.py詳解
  20. html input密码显示为*号

热门文章

  1. iOS---开发实用传感器
  2. 【C++】模板简述(二):函数模板
  3. rem手机端页面自适应布局(待修正下一篇完美布局)
  4. Tensorflow入门-上
  5. 11-2 numpy/pandas/matplotlib模块
  6. 面试之Linux
  7. Sql语句的一些事(二)
  8. [Python3网络爬虫开发实战] 1.2.5-PhantomJS的安装
  9. 11.Spring通过工厂方法配置Bean
  10. python 多线程并发threading & 任务队列Queue