HBase定期备份
2024-08-31 13:53:47
转载一份使用Export与Import定期备份的Python代码。每月15日做一次完整备份,每天进行一次增量备份。
import time
import datetime
from datetime import date
import sys
import os tablename=sys.argv[1]
backupDst=sys.argv[2]
today=date.today()
if today.day == 15: //every month, we do a full backup
backupSubFolder=backupDst+today.isoformat()+"-full"
cmd="hbase org.apache.hadoop.hbase.mapreduce.Export %s %s"%(tablename,backupSubFolder)
else: yesterday=datetime.date.today()- datetime.timedelta(days=1)
todayTimeStamp=time.mktime(today.timetuple())
yesTimeStamp=time.mktime(yesterday.timetuple())
backupSubFolder=backupDst+today.isoformat()
cmd="hbase org.apache.hadoop.hbase.mapreduce.Export %s %s %s"%(tablename,backupSubFolder,str(int(todayTimeStamp)*1000) print cmd os.system(cmd)
注意最后的cmd字符串构建,视HBase版本在对应位置添加上版本号。
最新文章
- php 使用curl模拟登录discuz以及模拟发帖
- Spark Streaming资源动态申请和动态控制消费速率剖析
- [.NET领域驱动设计实战系列]专题五:网上书店规约模式、工作单元模式的引入以及购物车的实现
- oracle: job使用
- flash builder的编译缓存
- php大力力 [023节]CREATE TABLE创建新表sql写字段备注(2015-08-27)
- cdoj 03 BiliBili, ACFun… And More! 水题
- 51nod贪心算法入门-----完美字符串
- cmake 手册系列
- 关于一个隐藏和显示物品列表的demo
- [CSAPP笔记][第六章存储器层次结构]
- codevs1166 矩阵取数游戏
- Ugly Number,Ugly Number II,Super Ugly Number
- python 压缩 解压缩 文件
- FastDFS 集群 安装 配置
- 关于苹果APP的上架整理
- 使用vue-cli脚手架初始化Vue项目下的项目结构
- linux 笔记整理
- 《玩转Django2.0》读书笔记-Django配置信息
- sed学习[参考转载]