环境说明:bbs数据采集的数据越来越多,目前是50G,每天大概以200W的数据量增长。而当前服务器1.2上面的空间不足,需要把数据迁移到空间足够大的1.3上面去

尝试了2种方式对数据进行迁移,一种是rsync,直接拉取数据;另一种是使用mongodump/mongorestore

1.rsync
操作步骤:
1.2:
[mongodb]
path = /data1/mongodb/data
hosts allow = 192.168.1.0/24
read only = no
write only = no
1.3:
rsync -avz root@192.168.1.2::mongodb/dbname /data/mongodb-linux-x86_64-1.8.1/data/
chown -R mongodb:mongodb /data/mongodb-linux-x86_64-1.8.1/data/

使用时间:50分钟
到目标服务器数据:50G
优点:使用时间短
缺点:需要配置rsync,数据占用的空间大(数据原封不动的拉取过来,包括碎片)

2.mongodump/mongorestore
操作步骤:
mongodump:
/data/PRG/mongodb/bin/mongodump --host 192.168.1.2:27017 -d dbname -uuername -ppasswd -o /data/mongodb-linux-x86_64-1.8.1/data/ --directoryperdb
mongorestore:
/data/mongodb-linux-x86_64-1.8.1/bin/mongorestore --dbpath /data/mongodb-linux-x86_64-1.8.1/data/ --directoryperdb /data/dbname/
chown -R mongodb:mongodb /data/mongodb-linux-x86_64-1.8.1/data/

使用时间:35(mongodump)+90(mongorestore)
到目标服务器数据:20G(需要的空间大大减小,拉取过程中相当于做了一次碎片整理)
优点:迁移到新服务器的数据经过了整理,需要空间大大减小
缺点:需要时间长

数据迁移时需要停mongo进行操作,而2种方式各有优缺点,如果可以忽略操作时间内的数据的话,那么使用第2种方式会比较好(已经有不少例子因为碎片带来严重的后果)

最新文章

  1. VirtualBox COM对象获取失败
  2. ISPA
  3. Query Designer:公式冲突
  4. 扫描二维码自动识别手机系统(Android/IOS)
  5. oracle like模糊查询
  6. SpringMVC学习--文件上传
  7. 深入浅出设计模式——组合模式(Composite Pattern)
  8. 【ASP.net】Equals 和 == 的区别
  9. input与button按钮背景图失效不显示的解决办法
  10. 第一篇:使用Spark探索经典数据集MovieLens
  11. 北漂的IT人
  12. C#中的CultureInfo类
  13. STM32-cJSON库的打包和解析
  14. springsecurity 源码解读 之 RememberMeAuthenticationFilter
  15. emoji错误:ER_TRUNCATED_WRONG_VALUE_FOR_FIELD: Incorrect string value:
  16. oracle数据库创建分区表
  17. PHPStorm FTP upload could not change to work directory 无法更改目录
  18. maven超级pom内容
  19. J03-Java IO流总结三 《 FileInputStream和FileOutputStream 》
  20. SQL Server 常用数据类型

热门文章

  1. Netty环境搭建 (源码死磕2)
  2. 低秩近似 low-rank approximation
  3. [ubuntu]安装adobe air
  4. 【python】-- 装饰器、迭代器、生成器
  5. 教你使用SQL查询(1-12)
  6. centos安装 Falcon+
  7. 跟我一起用Symfony写一个博客网站;
  8. Java之线程池(一)
  9. C语言程序设计50例(经典收藏)之1
  10. 关于tomcate跨域配置的配置问题和表头加入新属性的过滤