未来大数据时代,Hadoop会被Spark取代?

由雅虎为工程师和数据科学家打造的Apache Hadoop曾因巨大的潜力而备受称赞,但如今它却受到了更快的产品的影响,而这些产品往往来自于它本身的生态系统——Spark就是其中之一。【详细】

大数据应用  Hadoop  Spark  大数据市场  2017-11-27

未来大数据时代,Hadoop会被Spark取代?

嫌弃Hadoop?可能是你的打开方式有问题

关于 hadoop 所谓的消亡,以及它跌落神坛的报道数不胜数。有很多人放马后炮说,Hadoop 从一开始就没有意义。还有人说“Hadoop 对于小型,临时的工作来说很慢”、“ Hadoop 很难”、“ Hadoop 已经死了,Sp...【详细】

Hadoop  云计算  云技术  2017-11-10

嫌弃Hadoop?可能是你的打开方式有问题

什么是大数据?你需要知道的…..

我们每天都在吃饭,睡觉,工作,玩耍,与此同时产生大量的数据。根据IBM调研的说法,人类每天生成2.5亿(250亿)字节的数据。 这相当于一堆DVD数据从地球到月球的距离,涵盖我们发送的文本、上传的照片、各...【详细】

大数据  Hadoop  HDFS  什么是大数据  2017-09-25

什么是大数据?你需要知道的…..

大数据处理框架的类型、比较和选择

“大数据”一词的确切定义其实是很难给出的,因为不同的人(供应商、从业者、商业公司等)对它的理解也并不完全一致。【详细】

大数据处理框架  流处理系统  Hadoop  大数据平台  2017-09-06

大数据处理框架的类型、比较和选择

解疑:Hadoop+数据仓库到底是梦幻组合还是命中的宿敌?

在过去的二十年中,尽管其他的系统和软件在许许多多的迭代、变革中演进,甚至完全被新模型所抛弃,数据仓库这个老骨干却安然屹立。【详细】

大数据  Hadoop  数据仓库  2017-06-27

解疑:Hadoop+数据仓库到底是梦幻组合还是命中的宿敌?

在大数据里:Hadoop可能是你的救命稻草

用于数据分析的开源Hadoop架构的巨大增长是由其结构化和非结构化数据量的增长所驱动的,并且很多权威组织也预测,未来Hadoop架构还将继续增长,并需要复杂的可访问工具来从数据中提取业务和市场信息。【详细】

大数据  Hadoop  数据分析  2017-06-26

在大数据里:Hadoop可能是你的救命稻草

金山云与英特尔达成深度合作 “智”造高性能云时代

5月16日,金山云与英特尔在北京金山软件大厦签署合作备忘录,在现有深入合作的基础上,双方将进一步加强在计算、存储、网络以及数据分析、机器学习、人工智能等领域的广泛合作。【详细】

金山云  云服务  Hadoop  公有云  2017-05-16

金山云与英特尔达成深度合作 “智”造高性能云时代

Hadoop环境中管理大数据存储八大技巧

Hadoop入门级八大技巧,菜鸟必看。【详细】

Hadoop  2017-05-08

Hadoop环境中管理大数据存储八大技巧

Hadoop没有消亡,它是大数据的未来

人认为 Hadoop 正在失败,但硅谷数据管理公司 Hortonworks 的总经理 Vamsi K. Chemitiganti 并不这么看。【详细】

Hadoop  大数据  2017-05-04

Hadoop没有消亡,它是大数据的未来

Spark:超越Hadoop MapReduce

和 Hadoop 一样,Spark 提供了一个 Map/Reduce API(分布式计算)和分布式存储。二者主要的不同点是,Spark 在集群的内存中保存数据,而 Hadoop 在集群的磁盘中存储数据。【详细】

大数据  Hadoop  MapReduce  Spark  2017-04-19

Spark:超越Hadoop MapReduce

Spark和Hadoop分析遇障碍?可以试试容器啊

将定制的Spark和Hadoop试点项目转移到生产中是一项艰巨的任务,但容器技术缓解了这种艰难的过渡。【详细】

Spark  Hadoop  容器  2017-03-29

Spark和Hadoop分析遇障碍?可以试试容器啊

DIY Hadoop大数据环境的5大陷阱

虽然Hadoop可以运行在廉价的商品计算机硬件,且用户很容易添加节点,但是它有一些细节是很昂贵的,尤其是你在生产环境中运行Hadoop。【详细】

Hadoop  大数据  2017-03-09

DIY Hadoop大数据环境的5大陷阱

2017大数据十大趋势丨海量数据汹涌而来,Hadoop不再一家独大

2017年大数据将不再是Hadoop一家独大,也不再是编程者们的自娱自乐,企业和终端用户的不断涌入,海量数据“堆积如山”,随之而来的储存、分析、处理成为从业者的下一挑战。数据如何变现,价值怎么挖掘?【详细】

大数据  Hadoop  2017-02-20

2017大数据十大趋势丨海量数据汹涌而来,Hadoop不再一家独大

年支出达8亿!Hadoop在云端安了家

所有大数据和Hadoop生态系统相关的企业都非常兴奋,因为这其中很少有企业会被淘汰出局,但企业似乎并没有找到Hadoop的正确打开方式,不过这也不影响他们不断地砸钱。如果试试将整个生态系统搬到云端,就会...【详细】

Hadoop  云端  2017-02-17

年支出达8亿!Hadoop在云端安了家

Gartner报告:东方金信进入Hadoop世界厂商名录

2月1日,国际知名咨询机构Gartner发布Hadoop发行版市场指南《Market Guide for Hadoop Distribution》。东方金信作为大数据领域代表厂商,在此报告中与Cloudera、Oracle、AWS等并列提及,正式进入Gartner...【详细】

东方金信  Hadoop  2017-02-07

Gartner报告:东方金信进入Hadoop世界厂商名录

到2021年,Hadoop大数据分析市场产值将达406.9亿美元

据市场研究咨询公司MarketsandMarkets新发布的一份市场研究报告声称,Hadoop大数据市场产值预计会从2016年的67.1亿美元猛增至2021年的406.9亿美元,2016年至2021年的年复合增长率(CAGR)将高达43.4%。【详细】

Hadoop  大数据分析市场  2017-01-24

到2021年,Hadoop大数据分析市场产值将达406.9亿美元

大数据存储:扩展Hadoop的十大要点

20世纪90年代,每台应用服务器往往都拥有直接连接存储(DAS)。创建存储区域网络(SAN),是为了提供共享的存储池,以获得更大的规模和更高的效率。Hadoop逆转了这股潮流,让DAS重新流行起来。每个Hadoop集群...【详细】

大数据  Hadoop  2016-12-27

大数据存储:扩展Hadoop的十大要点

Hadoop如何迎击大数据分析的挑战

大数据分析是现在十分火热的话题,从农业到工业、从金融到体育、从传统企业到初创公司,各行各业都在积极应用大数据分析,似乎你的企业不和大数据沾点边就会显得没有逼格一样。【详细】

Hadoop  2016-12-16

Hadoop如何迎击大数据分析的挑战

Hadoop生态圈以及各组成部分的简介

支持一种与SQL几乎完全相同的语言HiveQL。除了不支持更新、索引和事务,几乎SQL的其它特征都能支持。【详细】

Hadoop  2016-11-26

Hadoop生态圈以及各组成部分的简介

管理大数据存储的十大技巧

数据本地化是为了确保大数据集存储在计算节点附近便于分析。对于Hadoop,这意味着管理数据节点,向MapReduce提供存储以便充分执行分析。它实用有效但也出现了大数据存储集群的独立操作问题。以下十项是Had...【详细】

Hadoop  大数据  2016-10-11

管理大数据存储的十大技巧

对话Hadoop之父Doug Cutting:Spark与Hadoop互补共生

仪式结束后,Hadoop之父、Cloudera首席架构师、Apache软件基金会理事Doug Cutting应邀接受了中国IDC圈记者的采访,谈及了Hadoop在安全方面的措施,Spark与Hadoop之间的微妙关系以及Hadoop未来的发展等一系...【详细】

Hadoop  Doug  Cutting  2016-09-30

对话Hadoop之父Doug Cutting:Spark与Hadoop互补共生

大数据领域开源技术 除了Hadoop你还知道哪些

众所周知,大数据正在以惊人的速度增长,几乎触及各行各业,许多组织都被迫寻找新的创造性方法来管理和控制如此庞大的数据,当然这么做的目的不只是管理和控制数据,而是要分析和挖掘其中的价值,来促进业...【详细】

大数据  Hadoop  2016-09-26

大数据领域开源技术 除了Hadoop你还知道哪些

数据库管理的下一站:云环境Hadoop

最近这些年,在数据库管理方面发生了许多变化。开发人员在选择全新的数据库类型,随着云计算使用日益增长,关系型数据库全面统治企业的地位受到了挑战。【详细】

Hadoop  2016-09-09

数据库管理的下一站:云环境Hadoop

数据太大?你该了解Hadoop分布式文件系统

大数据时代来了。当所有人都争吵着这件事情的时候,当所有企业都看好大数据的发展前景的时候,却都很少关注这些数据从哪儿来,我们有没有足够优秀的技术能力处理这些数据。【详细】

Hadoop  2016-09-07

数据太大?你该了解Hadoop分布式文件系统

Hadoop十年 推动数据驱动型分析快速发展

Hadoop迎来了10周年的生日。关于Hadoop,有很多大事件依然历历在目:Hadoop成为Apache的子项目并获得命名,第一版Hadoop代码发布,第一批用户部署了该代码。为了纪念这些事件,大数据供应商的高管们为该分...【详细】

Hadoop  2016-09-02

Hadoop十年 推动数据驱动型分析快速发展

将现有的SQL工作负载迁移至hadoop竟然如此简单!

想迁移现有的数据仓库到Hadoop平台?想在Hadoop上重用其他RDMBS的SQL技能?有何方案能帮助您解决这类问题,答案是IBM Big SQL。【详细】

Hadoop  2016-08-30

将现有的SQL工作负载迁移至hadoop竟然如此简单!

Hadoop遭遇瓶颈的七大危险信号

大多数企业大数据应用案例尚处于实验和试点阶段,对于少数首次在生产环境部署Hadoop系统的用户来说,最常遇到的就是扩展问题,此类问题往往导致企业因噎废食,终止大数据应用项目。【详细】

Hadoop  2016-08-26

Hadoop遭遇瓶颈的七大危险信号

大数据开源时代 Hadoop真能淘到金吗?

IDC的大数据市场预测,大数据将会迎来大时代。分析公司表示截止到2015年大数据产值将达169亿美元,不过我们尚不明确这个市场有多新,也不确定大数据新兴企业是否真正会刮起一个淘金热。【详细】

Hadoop  2016-08-18

大数据开源时代 Hadoop真能淘到金吗?

想要从大数据中获益?请先做好Hadoop管理

Hadoop管理正在成为大数据用户和供应商首先考虑的分部署处理框架,它在企业的业务运营中扮演着越来越重要的角色。 【详细】

大数据  Hadoop  2016-08-17

想要从大数据中获益?请先做好Hadoop管理

吕品:Hadoop技术在银行的应用与演进

2016年6月24日,由数据中心联盟金融信息技术委员会主办、中国IDC圈协办的"2016金融信息化成果展示会"暨金融信息化技术委员会成立一周年报告会在北京国际会议中心盛大召开。...【详细】

Hadoop  银行  大数据  2016-07-01

吕品:Hadoop技术在银行的应用与演进

云上运行 Hadoop 会面临哪些挑战

在云上运行Hadoop,很多人担心性能。因为一提到虚拟化就会有人想到有成本,往往得出有偏见的结论-在云上运行肯定比物理机器上运行性能差。确实,在云上运行Hadoop对平台方还是面临一些挑战的,下面主要讲...【详细】

Hadoop  挑战  2016-06-15

云上运行 Hadoop 会面临哪些挑战

除Hadoop外你还需要知道的9个大数据技术

Hadoop是大数据领域最流行的技术,但并非唯一。还有很多其他技术可用于解决大数据问题。除了Apache Hadoop外,另外9个大数据技术也是必须要了解的。【详细】

Hadoop  大数据技术  2016-05-31

除Hadoop外你还需要知道的9个大数据技术

从Hadoop洞悉大数据市场:路漫漫其修远兮

现今科技界红到发紫的大数据革命的代表性技术就是Hadoop(注:一个分布式系统基础架构)。Hadoop是一个由一系列不同的技术组成的生态系统。做Hadoop相关产品的公司有很多,其中也有很多不一样的选择和变种...【详细】

Hadoop  大数据市场  2016-04-18

从Hadoop洞悉大数据市场:路漫漫其修远兮

顶级Hadoop管理员面试问题与回答

在2010年,没有人知道什么是Hadoop,但是今天,房间里的大象这个标志已经成为了大数据的宠儿。根据Wikibon, Hadoop市场在2012年,供应商的收入已经有256美元,预计2017年底增加到17亿、程序员、架构师、系...【详细】

Hadoop  2016-04-08

顶级Hadoop管理员面试问题与回答

不同Hadoop上的SQL数据库引擎如何适配BI工作?

Impala是Cloudera公司主导开发的新型查询系统,它提供SQL语义,能查询存储在Hadoop的HDFS和HBase中的PB级大数据。【详细】

Hadoop  SQL  2016-03-30

不同Hadoop上的SQL数据库引擎如何适配BI工作?

科普文:从大数据到Hadoop,Spark,Storm

大数据,官方定义是指那些数据量特别大、数据类别特别复杂的数据集,这种数据集无法用传统的数据库进行存储,管理和处理。大数据的主要特点为数据量大(Volume),数据类别复杂(Variety),数据处理速度快(Ve...【详细】

大数据  Hadoop  Spark  Storm  2016-03-25

科普文:从大数据到Hadoop,Spark,Storm

大数据时代为什么都在谈Hadoop?

最近知乎上有这样一个问题“为什么很多公司都采用Hadoop方案处理大数据业务”,引来很多回答,笔者整理如下,其观点或有时而可商,欢迎讨论。【详细】

大数据  Hadoop  2016-03-16

大数据时代为什么都在谈Hadoop?

Hadoop生态系统在壮大:十大炫酷大数据项目

在开发人员开发Hadoop以克服大数据带来的挑战之后的10年间,这些技术的生态系统在不断发展壮大。Apache软件基金会下面有众多的开源大数据技术项目。本文介绍一些重要项目,并顺便了解几个新兴项目。【详细】

Hadoop  2016-03-07

Hadoop生态系统在壮大:十大炫酷大数据项目

YARN:下一代 Hadoop计算平台

Apache Hadoop 是最流行的大数据处理工具之一。它多年来被许多公司成功部署在生产中。尽管 Hadoop 被视为可靠的、可扩展的、富有成本效益的解决方案,但大型开发人员社区仍在不断改进它。【详细】

YARN  Hadoop  2016-02-24

YARN:下一代 Hadoop计算平台

Hadoop 集群管理上的新“绝招”

Hadoop在一些企业部署时,往往会遇到多个用户各自创建的数据处理工作的情况。这些工作都运行在同一个Hadoop系统上时,他们之间可能会彼此冲突,争夺可用的处理器资源。【详细】

Hadoop  2016-02-24

Hadoop 集群管理上的新“绝招”

管理大数据之初探Hadoop发行版

Hadoop是一项开源技术,它是当今与大数据应用最为息息相关的数据管理平台。该分布式处理框架主要由Yahoo创建于2006年,部分是基于由Google在一些技术论文中所阐述的思想;很快,诸如Facebook,Linkedln以及...【详细】

大数据  Hadoop  2016-02-22

管理大数据之初探Hadoop发行版

Hadoop之父Doug Cutting眼中大数据技术的未来

2016,Hadoop走过第十个年头。Hadoop之父Doug Cutting1985年毕业于美国斯坦福大学,早期的他并不是一开始就决心投身IT行业的。他如何成为Hadoop之父?Hadoop的发展和未来期待又是如何的?【详细】

Hadoop  Doug  Cutting  大数据技术  2016-02-17

Hadoop之父Doug Cutting眼中大数据技术的未来

7种常见的hadoop和spark项目

有一句古老的格言是这样说的,如果你向某人提供你的全部支持和金融支持去做一些不同的和创新的事情,他们最终却会做别人正在做的事情。如比较火爆的Hadoop、Spark和Storm,每个人都认为他们正在做一些与这...【详细】

hadoop  spark  2016-02-14

7种常见的hadoop和spark项目

Cloudera:2016年Hadoop的三大预测

Hadoop以一种开源的方式创建,开源的强大力量可以创造标准,人人共享,这样才有更多的人参与进来并不断完善。十年前谁也没有料想到Hadoop能取得这样的成就,而如今一切均已实现。Hadoop之父Doug Cutting认...【详细】

Cloudera  Hadoop  2016-02-01

Cloudera:2016年Hadoop的三大预测

大数据新手入门:给刚玩Hadoop的朋友一些建议

随着两会中间央视新闻天天说大数据,很多人纷纷开始关注大数据和Hadoop以及数据挖掘和数据可视化了,我现在创业,遇到很多传统数据行业往Hadoop上面去转型的公司和个人,提了很多问题,大多数问题还都是差...【详细】

大数据  Hadoop  2016-01-28

大数据新手入门:给刚玩Hadoop的朋友一些建议

2分钟读懂Hadoop和Spark的异同

谈到大数据,相信大家对Hadoop和Apache Spark这两个名字并不陌生。但我们往往对它们的理解只是提留在字面上,并没有对它们进行深入的思考,下面不妨跟我一块看下它们究竟有什么异同。 解决问题【详细】

Hadoop  Spark  2016-01-27

2分钟读懂Hadoop和Spark的异同

别把数据湖变成数据沼泽

为了利用大数据做出更为智能的商业决策,很多公司都采用了Hadoop等开源的技术。但是,仅仅凭借Hadoop是无法建好数据湖的。事实上,如果不遵守一些规则,在Hadoop上花费的时间的投资就会变成巨大的浪费。本...【详细】

大数据  Hadoop  2016-01-25

别把数据湖变成数据沼泽

别总想着取代谁 Hadoop和Spark结合起来更好用

Apache的Spark,一个新的大数据框架, 已被描述为一个替代Hadoop的可能。一些观点认为,Spark由于比旧的框架更容易理解和强大,因此在新兴的大数据和分析项目中更适合。【详细】

Hadoop  Spark  2016-01-15

别总想着取代谁 Hadoop和Spark结合起来更好用

Spark淘汰MapReduce,拯救Hadoop

2016年大数据领域会发生什么情况?考虑到如今在深层神经网络和规范性分析方面取得的进展,你可能觉得这个问题很好回答。而实际上,来自业界的大数据预测大不相同,本文精选出了最值得关注的33个预测,为您...【详细】

Spark  MapReduce  Hadoop  2016-01-12

Spark淘汰MapReduce,拯救Hadoop

【dbdao Hadoop 大数据学习】大数据的动机

在大数据已经成为主流,而其背后的两个主要驱动因素是开源Hadoop软件和云计算的出现。这两种发展使得人们大规模地采用大数据方法以较低的成本处理业务问题。Hadoop是所有大数据解决方案的基石。虽然其他编...【详细】

dbdao  Hadoop  大数据  2016-01-04

【dbdao Hadoop 大数据学习】大数据的动机