威凡网全力打造:网页编程、软件开发编程、平面设计、服务器端开发、操作系统等在线学习平台!学编程,上威凡网!
PHP教程>> PHP基础 PHP技巧 PHP实例 PHP文摘 PHP模板 PHP总结
当前位置:首页 > PHP教程 > PHP总结
上一节 下一节
 Mysql跟Hadoop结合

mysql 和 hadoop 结合 我目前使用的数据库是mysql,虽然大数据时代大家都在提nosql,认为sql在大数据时代已经不重要,实际并非如此,mysql在bi报表系统中扮演了很重要的角色。与此同时,大数据平台也引入了sql,从而使得大量的分析人员、工程师使用sql从海量

mysql 和 hadoop 结合
我目前使用的数据库是mysql,虽然大数据时代大家都在提nosql,认为sql在大数据时代已经不重要,实际并非如此,mysql在bi报表系统中扮演了很重要的角色。与此同时,大数据平台也引入了sql,从而使得大量的分析人员、工程师使用sql从海量数据中快速查询内容。
hadoop体系是个非常了不起的,围绕它业界建立并不断丰富了它的ecosystem,从最传统的hdfs、mapreduce,到诸如hive、scribe、zookeeper、hbase等等。我们的大数据工作实际上已经很难离开hadoop了,在百度你经常会听到工程师说今天要跑个任务,百度的hadoop集群已经是万级别的规模了,存储、计算、调度百度都研发了新一代的系统,尽管如此,其本源仍然是hadoop体系。中小规模的公司,如果用到大数据,我建议义无反顾地去加入到hadoop生态体系的怀抱,搭建一个hadoop系统并不困难,从学习到配置各类参数搭建好两三天就够了,想要从大数据中查询用hive;想要出天级报表,最简单的方法就是每天跑个mapreduce任务或者写个hql任务灌入到mysql即可。.syntaxhighlighter{padding-top:20px;padding-bottom:20px;}

申明:本教程内容由威凡网编辑整理并提供IT程序员分享学习,如文中有侵权行为,请与站长联系(QQ:254677821)!
上一节 下一节
相关教程  
其他教程  
PHP基础
PHP技巧
PHP实例
PHP文摘
PHP模板
PHP总结

违法和不良信息举报中心】邮箱:254677821@qq.com
Copyright©威凡网 版权所有 苏ICP备2023020142号
站长QQ:254677821