首页 > 代码库 > 了解一下大数据
了解一下大数据
项目开发针对的主要是企业家的应用,所以数据量算不上大数据,但是最近大数据在互联网行业的使用,作为一名程序员,应该学习新技术吗?但是学习他仅仅是为了借鉴一下大数据的处理思想,实现的过程,针对的场景,以便在我们的项目开发中借鉴一些思想,提高开发水平。
======================================
hadoop生态系统:
CPU:hadoop的Mad-Reduce------------------------并行编程的模型机制
内存:HBase-基于列的NoSQL数据库------------------Key-Value的基于HashTable的快速查询机制
存储:Hadfs的分布式文件系统--------------------------存储大量数据
======================
Habse:nosql数据库
Hive:nosql的数据仓库
hadfs:分布式文件系统
sqoop:etl的工具(数据抽取工作-做etl的过程)
zookeeper:时间同步工具------注意网络之间协调本质就是时间服务。
======================
如果学习的话,这就是一个应该学习的技术.
部分来自:http://blog.csdn.net/woshiwanxin102213/article/details/19688393
了解一下大数据
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。