【摘要】随着应用的发展和数据的膨胀,DevOps team也应该考虑如何选择合适的RDBMS/NoSQL进行迁移和扩展。下面是一位印(a)度(san)朋友在youtube上的视频介绍,可以一看,一来学习下Hbase Cassandra MongoDB之间的对比,二来可以体验一下流利的印度口语。
【背景】要将Hbase 从0.94.2(hadoop-1.0.4)升级到1.0.0(hadoop-2.5.2),目前采取的方案是重新搭建一套集群,将原有的Hbase数据导出(export)再导入(import)到新的集群上,期间遇到了很多问题,走了很多弯路,最后还是成功完成升级,特此记录一下,有类似需求的可以参考一下。
hadoop decommission一个节点Datanode,几万个block都同步过去了,但是唯独剩下2个block一直停留在哪,导致该节点几个小时也无法下线。hadoop UI中显示在Under Replicated Blocks里面有2个块始终无法消除。