大数据时代规划数据管理的分析与思考阅读笔记
2015-06-08 21:14
696 查看
1.没有信息化就没有现代化
2.平台多样化的规划数据管理平台,有针对多规合一的“一张图”平台 针对电子报批的“电子政务”平台 针对综合数据管理分析的“专题应用”平台
3.核心内容是建立统一的数据和管理平台
4.数据应用平台 Hadoop 是一套系统平台,主要采用 Hadoop 分布式文件系统(HDFS)实现高速可靠的数据存储,并通过 MapReduce 技术实现高性能数据处理。
5.Hadoop 的优势主要体现在以下 4 个方面:
5.1以原生格式存储任意数据:由于规划数据不需要转换为特定方案,因此不会丢失信息;
5.2可进行扩展以支持大数据:欧美等国的 Hadoop 技术相对成熟,诸如脸谱网、雅虎网等公司已经成功部署并应用,实践证明系统可以出色的进行扩展,适应多平台规划数据融合。
5.3可控制的低成本:Hadoop 是一个开源软件,运行于标准服务器之上,在存储和处理方面有着较低的每 TB 成本,在 Hadoop 中,存储可以按需逐步添加,同时可以添加(或移除)硬件,适应规划数据管理条件的改变。
5.4出色的容错功能:Hadoop 通过数据复制以及跨计算节点故障切换提供出色的容错功能,因此能够从硬件、软件和系统故障中快速恢复,增强规划数据的操作性。
2.平台多样化的规划数据管理平台,有针对多规合一的“一张图”平台 针对电子报批的“电子政务”平台 针对综合数据管理分析的“专题应用”平台
3.核心内容是建立统一的数据和管理平台
4.数据应用平台 Hadoop 是一套系统平台,主要采用 Hadoop 分布式文件系统(HDFS)实现高速可靠的数据存储,并通过 MapReduce 技术实现高性能数据处理。
5.Hadoop 的优势主要体现在以下 4 个方面:
5.1以原生格式存储任意数据:由于规划数据不需要转换为特定方案,因此不会丢失信息;
5.2可进行扩展以支持大数据:欧美等国的 Hadoop 技术相对成熟,诸如脸谱网、雅虎网等公司已经成功部署并应用,实践证明系统可以出色的进行扩展,适应多平台规划数据融合。
5.3可控制的低成本:Hadoop 是一个开源软件,运行于标准服务器之上,在存储和处理方面有着较低的每 TB 成本,在 Hadoop 中,存储可以按需逐步添加,同时可以添加(或移除)硬件,适应规划数据管理条件的改变。
5.4出色的容错功能:Hadoop 通过数据复制以及跨计算节点故障切换提供出色的容错功能,因此能够从硬件、软件和系统故障中快速恢复,增强规划数据的操作性。
相关文章推荐
- Kafka设计解析(三)- Kafka High Availability (下)
- RabbitMQ消息队列(七):适用于云计算集群的远程调用(RPC)
- RabbitMQ消息队列(一): Detailed Introduction 详细介绍
- adb.exe,start-server' failed -- run manually if necessary
- SCORM Explained
- 查看事务锁:innodb_trx + innodb_locks + innodb_lock_waits
- JetBrain WebStorm 注册码
- ERROR 1205 (HY000): Lock wait timeout exceeded; try restarting transaction
- hadoop yarn 代码示例及架构
- 云计算应用与Pispower云计算平台
- AIDL 进程间通信
- 错误1_clang: error: linker command failed with exit code 1 (use -v to see invocation)
- leetcode Climbing Stairs
- 帮助文档下载(采用大数据量断点续传,分段下载)
- pthread_cond_wait的spurious wakeup问题
- 云计算管理三利器:Nagios、Ganglia和Splunk
- YARN Fair Scheduler 配置
- LeetCode:Contains Duplicate Ⅲ
- ora-12638: credential retrieval failed
- 1396 - Operation CREATE USER failed