“数据迁移”考虑
2016-08-13 11:20
113 查看
1、hortonwork 和 cloudera 比较
除了功能,还需要对维护性能进行比较
2、环境部署需要细化
部署哪些组件
部署哪些webservice服务
各节点之间如何规划
内存磁盘资源如何分配
是否开启组件高可用
若开启组件高可用,是否考虑部署2套zookeeper
离线集群与在线集群如何互通
3、大数据组件中存储列表应该列出
列出存储的表
给出各表的数据逻辑,即从和数据源来,可如何使用
是否需要考虑历史数据,是否考虑使用拉链表
4、数据迁移方案需要优化
迁移时是否需要停服务 (NO)
哪些数据需要迁移,哪些可以考虑不迁移
mysql中的数据如何迁移
hive、hbase、hdfs中数据如何迁移
为什么使用sqoop
为什么不用distcp
迁移的持续时间预估
迁移后如何进行验证
除了功能,还需要对维护性能进行比较
2、环境部署需要细化
部署哪些组件
部署哪些webservice服务
各节点之间如何规划
内存磁盘资源如何分配
是否开启组件高可用
若开启组件高可用,是否考虑部署2套zookeeper
离线集群与在线集群如何互通
3、大数据组件中存储列表应该列出
列出存储的表
给出各表的数据逻辑,即从和数据源来,可如何使用
是否需要考虑历史数据,是否考虑使用拉链表
4、数据迁移方案需要优化
迁移时是否需要停服务 (NO)
哪些数据需要迁移,哪些可以考虑不迁移
mysql中的数据如何迁移
hive、hbase、hdfs中数据如何迁移
为什么使用sqoop
为什么不用distcp
迁移的持续时间预估
迁移后如何进行验证
相关文章推荐
- 扩展spring的BeanUtils,增加拷贝属性排除null值的功能(注:String为null不考虑)
- 如何导出和导入mysql数据(数据迁移)
- 考虑大对象:利用 JAVA 操作 DB2 Universal Database 中的 LOB 数据
- 手动分析linux是否中毒的几个考虑点
- 从 ASPX 页面进行 Web 服务调用时的性能考虑
- 设计一个界面动效的时候,我们需要考虑什么?
- 【转】夏普考虑在广州建世界最大液晶显示器厂
- 关于O/R Mapping,在很久以前我就考虑过,这才是数据库的终极应用!
- effective java读书笔记2:遇到多个构造器参数时要考虑用构建器
- 前期考虑题目难度太大,现在降低难度的思考
- 升级早期ASP.NET的Beta版程序到Beta 2时的错误信息提示,兼容性考虑和版本转换
- 升级到SQL Server 2012-2014时一些需要考虑的事项
- 判断日期的正则 考虑了闰年
- Java 中使用内存映射文件需要考虑的 10 个问题
- 关于FireFox和IE对HTML解析过程差异性的考虑
- 考虑用静态工厂方法代替构造器
- 在VSTF中权限之间的关联性(不太明显的关联性)--设置权限时必须考虑的问题
- EffectiveJava(27)优先考虑使用泛型方法