利用HaoheDI从数据库抽取数据导入到hbase中
2024-09-02 10:34:15
下载apache-phoenix-4.14.0-HBase-1.4-bin.tar.gz
将其中的
phoenix-4.14.0-HBase-1.4-client.jar
phoenix-core-4.14.0-HBase-1.4.jar
2个jar文件导入到lib目录下，不要使用hbase1.2的驱动，连接时会有异常错误产生。
需要将phoenix-4.14.0-HBase-1.4-client.jar中的javax目录删除，否则和tomcat中的包冲突。
在数据驱动中增加Phoenix-hbase的驱动设置：（如果使用系统中的驱动文件导入，导入后需要重启HHDI应用）
类名：org.apache.phoenix.jdbc.PhoenixDriver
URL：jdbc:phoenix:{host}:{port}
数据连接设置：
数据抽取任务判断如果使用了Phoenix的驱动，则将INSERT INTO 语句替换为UPSERT INTO 语句
示例：Oracle To Hbase
任务配置和其它数据库没有区别，源的SELECT中的字段类型需要与目标Hbase表的字段类型一致
执行结果：每秒1万行左右，
最新文章
- java环境配置为1.7jdk为什么cmd java -version查看版本是1.8
- How to create Web Deployment Package and install the package
- Python成长笔记 - 基础篇 （十二）
- Linux磁盘管理之设备文件详解04
- Nodejs学习笔记（五）--- Express安装入门与模版引擎ejs
- mongodb数据备份与还原
- Java学习笔记（二）UML基础
- IOS 与ANDROID框架及应用开发模式对照一
- C#平衡树（AVLTree）
- POJ 2942Knights of the Round Table(tarjan求点双+二分图染色)
- ajax 异步请求 代码
- 吐槽下intellij idea 2018.3这个版本
- UltraISO 9.7.0.3476中文完美破解安装版
- 吴裕雄 oracle PL/SQL编程
- Linux inode空间占满 “no space left on device”
- XCode10.0遇到的问题
- [codeup] 1128 出租车费
- 网络工程实训_4RIP路由（动态路由）
- IOS项目之弹出动画二
- 使用自定义视图的AlertDialog