大数据气数已尽，Hadoop已死，有事烧纸

Xavier · 26 December 2019 10:25

虽然大数据依然如日中天，但该领域曾经的领头羊 Cloudera、Hortonworks 和 MapR 三家公司最近步履蹒跚，多少掩盖了其几分风光。作为曾经的数据宠儿，过去筹集到的巨额投资源源不断。例如，英特尔公司就曾向 Cloudera 注入 7.66 亿美元，这还仅仅只是一轮投资的数额！如今，这些大数据领域的重量级公司纷纷被迫瘦身，Cloudera 和 Hortonworks 合并，而 MapR 开始裁员。与此同时，大数据领域的其他开源供应商（如 Elastic 和 MongoDB 公司）却势头正猛。到底发生了什么事？当然，这背后有种种原因，但其中一个事实是，老牌 Hadoop 供应商把大赌注押在了错误的目标用户上，瞄准的是所谓数据中心的专职架构师。然而，市场已经转向了在云计算环境中寻求自由的个体开发人员。此消彼长在那些靠 Hadoop 发家致富的供应商中，MapR 是最新的牺牲品。MapR 公司一度估值超过 10 亿美元，但最近披露的消息是，除非能找到新的投资者，否则公司必须裁员 122 人，这个数量约占员工总数的 25%，而且裁员名单包括其首席执行官 John Schr…

被“围攻”的 Hadoop 没有对手 Data Science

相信很多人对于 Hadoop 领域近期发生的事件都有所耳闻，先是曾估值 10 亿美元的 MapR 向加州就业发展局提交文件，称如果找不到新的投资人，公司将裁员 122 人，并关闭位于硅谷的总部公司，再是 Cloudera 在 6 月 6 日美股开盘之后，股价暴跌 43%，公司估值从 41 亿美元缩水为 14 亿美元。从 2006 年 1 月诞生以来，Hadoop 就以黑马之姿一路开挂成为了火爆整个技术圈的“明星”技术，为什么现在 Hadoop 领头羊商业公司突然都不同程度的遭遇到了挫折？这是否意味着 Hadoop 发行版已经几近无路可走？Hadoop 商业公司的颓势是否能够反映 Hadoop 技术、生态的发展情况？Hadoop 的竞争对手到底是谁？…为了回答上述问题，我们和星环科技研发总监刘汪根进行了长达一小时的对话。 Hadoop 是 ASF 旗下的分布式系统基础架构，我们现在看到的 Hadoop 生态有很多组件，但在刘汪根看来，大部分组件产品化程度不够，真正有技术生命力的组件只有两个 HDFS 和 Zookeeper。并且，这种技术生命力是长久的，至少在如今的科技类企业和互联…

大数据--2019年最危险的行业 Data Science

大数据的发展，经历了一波又一波的上下，到2019年，终于变成了最危险的行业了。在中国，有无数多从事“大数据”的码农，和无数多的“大数据”创业公司多多少少经历了一场被抓的经历。这里有在互联网金融公司工作，利用大数据帮助企业进行风控的人员。有做大数据“创新”创业，甚至连创新工厂都投钱的，从各个求职网站上用爬虫抓取个人简历，并给企业卖服务，提醒自己家员工是不是要离职赚钱的创业公司。这些年里，大数据从无到有，从口头上的泡沫到实际能赚钱，也是经历了一波又一波。这一点和大数据一开始从谷歌发展起来是一脉相承的。谷歌作为一个广告公司，其大数据技术主要是为了通过全方位搜集个人隐私，并更好的替谷歌的广告服务。我想你一定有过这样的经历，你搜索了某个东西之后，全世界所有网站都是这个东西的广告。我记得有一次我搜索了几辆车，未来三个月内我的互联网上，无论我访问什么网站，到处都是车的广告，上下左右，有浮窗的有弹窗的。只不过谷歌打开的这个潘多拉魔盒，被Facebook更好的发扬光大了。于是过去两三年内，Facebook深陷于数据泄露和隐私保护不得力的困扰。同样的故事在中国互联网公司里的发展就更…

HUDEVE · 26 December 2019 15:17

大数据不行数据有没有未来?

Xavier · 26 December 2019 19:23

当然有

anonymous12 · 27 December 2019 03:58

Hadoop已经凉透了。连spark都没人提了。大数据刚刚热身。aws 2019 reinvent 好好看看。

匿名1687 · 27 December 2019 21:32

真的诶我看到好多都只是用 EMR+S3 就好了
不过Spark也不行了吗我看还一直说Spark比Hadoop好之类的。。。

Xavier · 27 December 2019 21:41

嗯，但那也是过去式了
都淘汰了