云计算与Hadoop11年相互关系及影响_光环大数据培训

光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cn云计算与云计算与 Hadoop11Hadoop11 年相互关系及影响年相互关系及影响_ _光环大数据培训光环大数据培训同时诞生于 2006 年，十年间云计算革了架构的命，那 hadoop 呢?Doug Cutting，在外界看来至少有两个称谓：作为技术大牛他是 Hadoop 之 父，作为商业领袖他是 Cloudera 首席架构师。近日，Doug Cutting 来到北京，也因此接受了科技茱比莉的 独家采访 。 过去的十年毫无疑问属于云计算和大数据。其中，Hadoop 被认为是大数据领域 的一个里程碑，它驱动了大数据的快速发展，还将深刻影响 IoT 和 AI 的走向。这次访谈，茱比莉并没有请 Hadoop 之父去简单回顾 Hadoop 的发展，而是 选取了与 Hadoop 一同诞生于 2006 年的云计算，看两者十年间如何“相爱相杀” 。至少在 Doug Cutting 看来， Cloudera 最大的竞争对手竟是云计算第一巨头 AWS，更有意思的是，它同时也是最重要的合作伙伴 。而展望下一个十年，Hadoop 的代表企业 Cloudera 在 2017 年刚刚上市，作 为开源企业在商业上的阶段性成功， Doug Cutting 认为 Cloudera 虽然尚未盈 利但未来营收会超越 Red Hat，因为大数据正和 AI、IoT 纠缠在一起 最大的对手和伙伴都是 AWSHadoop 和云计算什么关系?在技术上可谓互相成就，但在商业上 Doug Cutting 认为 Cloudera 最大的竞争对手与合作伙伴都是 AWS。2006 年，Hadoop 诞生。它的原型是 Nutch 项目，初衷是基于开源创建网络搜索引擎并实现具备可 扩展性和收缩性的数据技术，而当 Nutch 与谷歌论文的想法合体，Hadoop 应运 而生。时至今日，Hadoop 的发展也远远超出了 Doug Cutting 的预料不仅成 为大数据技术发展史上的一个里程碑，还组成了一个具备自我演进能力的、多 种技术有机融合的、稳定而强大的生态系统。这也正是 Cloudera 应运而生的缘 由。2006 年，云计算诞生。光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cn它彻底改变了企业 IT 基础架构，也带来了新的商业模式。在 Doug Cutting 看来，云计算使得 Hadoop 的应用更加灵活：一，在本地安装 Hadoop，用户需要部署大规模集群以支持不同类型的应用， 并拥有统一的数据存储;而在云环境中运行 Hadoop，用户可以针对不同的应用 创建不同的集群，并按需对这些集群进行弹性伸缩，而且云服务商可以帮助用 户管理数据存储。二，从数字化转型角度来看，过去，IT 往往只集中在企业用户的 IT 部门， 但是随着云计算的普及，数字化在企业各个部门得到广泛应用，这意味着更多 的非 IT 部门在 IT 应用中可以自我管理、自我服务。然而，这并不意味着 Hadoop 产品的全盘云化。Doug Cutting 认为，云部署和本地部署两种交付方式都会长期共存：对于 一些数据量较大，且自身 IT 资源和能力较强的客户来说，不少工作负载特别是 像需要全天候永续运行的工作负载是放在本地数据中心上的，这样做更经济更 实用，扩展性也更强。还有一些工作负载或者是数据，由于受制于法律法规的 要求，必须要放在本地数据中心运行。就 Cloudera 而言，三年前正式推出了 Cloudera Director 管理云环境中运 行的集群。目前，云模式占到 15%到 20%的营收比重，并且会不断增长。我预计 这个比例最终会达到 40%到 60%，但是不会到 90%，也就是说本地部署模式仍然 会是 Cloudera 企业业务的一个重要组成部分。”而在谈到 Cloudera 的竞争格局时， Doug Cutting 出人意料地将 AWS 作为 最大的竞争对手，但同时也是最大的合作伙伴。在 Hadoop 创业公司当中，业界总是把 Cloudera 与 Hortonworks 和 MapR 三 家公司相提并论。此外，在大数据维度的竞争中，还总是拿上市后的 Cloudera 和 IBM、Oracle、微软等商业大数据软件企业对比。但在 Doug Cutting 看来，和其他创业公司相比就如“ 我们做可口可乐， 他们做百事可乐” ，一直保持优势。而在大数据的商业软件领域，微软是 Cloudera 的合作伙伴，Oracle 是 Cloudera 的分销商 ，“大数据领域采用最多 的还是开源的系统”。不过，让 Cloudera 更加重视的竞争对手，并非来自传统的大数据领域，比 如亚马逊，它希望通过云服务来代替传统大数据解决方案供应商的工作。“打一个比方，不论是可口可乐还是百事可乐，人们不喝汽水改喝白水了。 这样的跨界竞争是更加有挑战性的竞争，非传统竞争对手的加入更让我们警惕， Cloudera 也会对自身加以调整来适应新的竞争格局。”Doug Cutting 表示。光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cn但同时，AWS 也是 Cloudera 最大的云合作伙伴。当 Cloudera 应用云模式 交付的时候，亚马逊 AWS、微软 Azure、谷歌云都会应用，但比例最大的仍是 AWS。尽管 AWS 会推出与 Cloudera 竞争的同类产品像 EMR，但仍然会为用户提供 Cloudera 的产品。表面看这与 AWS 的产品又矛盾冲突，但是从整体云计算企业 之间的竞争来看，Cloudera 能够为 AWS 带来新的企业级客户。另一方面，如果 客户选择私有部署 Cloudera 的产品，对于 AWS 来说收入仍旧是零。此外，亚马逊 AWS、微软 Azure、谷歌云也会有一些用户的大数据应用使用 的是专有的商用软件服务。不过，Doug Cutting 认为，假以时日这些用户会意 识到，在云中使用开源的大数据解决方案，成本更低、质量更高，而且开源的 Hadoop 可以让业务在不同的云环境之间自由迁移，商业软件因此并不过构成严 重威胁。Cloudera 会比 Red Hat 更成功?Cloudera 虽然上市但未实现盈利。Doug Cutting 认为，现在就和 Red Hat 对比，只能说很多人缺乏耐心，实际上 Red Hat 也曾经多年亏损，而 Cloudera 还非常年轻，由于 AI、IoT 的发展，未来盈利也会超越 Red Hat。云计算、大数据、IoT、AI 等趋势接踵而至，Hadoop 作为一项基础技术仍 然发挥着关键作用，Spark 也有效地推动了 IoT 和 AI 的应用。Doug Cutting 认为，大数据和 AI 是非常匹配的技术，因为 AI 本身就是一 种大数据的应用。在对 AI 的系统进行训练的时候，使用的数据越多，AI 系统 就越先进。比如，Cloudera 近日就推出了 AI 平台 Data Science Workbench。它的初 衷在于，一些用户应用 Spark，他们的 AI 系统基于 spark，而 Cloudera 已经支 持了 Spark;另一些数据工作者倾向于使用 Spark 以外的其他工具，例如通过 Python 或 R 来做 AI，但 Python 和 R 和 Hadoop 的集群并非天生就匹配。因此， 新平台旨在让所有数据工作者在一个安全环境中创建 AI 系统的时候，仍然能够 使用他们自己熟悉的工具。另一方面，Cloudera 的产品和业务增长仍然有很大的一部分会来自于传统 的任务，比如数据仓库，用于支持搜索的运行时环境，各种传统的数据库应用。 其实，大部分用户在采用大数据工具方面还处在非常早期的发展阶段。因此， 传统的应用和技术仍有较大的增长前景，尽管它们并不那么频繁地出现在人们 关注的热点当中。这些都决定了 Cloudera 所处的产业仍然处于高速发展的快车道上。光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cn此外，Doug Cutting 对开源极力推崇归。在开源的世界当中，竞争的逻辑 不同。开源技术的开放性和分享性决定了没有哪个公司完全拥有开源的技术。 每当开源的技术有了新的突破或进展，开源的整个生态系统进一步的发展和改 进，开源群体中的每一份子都会受益其中。这也决定了 Cloudera 的商业模式符合未来发展的潮流。据悉，Cloudera 既有用户的采购量过去 5 年平均涨幅为 40%;而近几年来通过云模式等新型合作 方式，新客户数量尤其是中小企业数量也增势喜人。Cloudera 能不能超越 Red Hat 还需时日，而开源的商业模式和大数据、AI 的发展轨道足够让它上市，也足够让它持续发展。为什么大家选择为什么大家选择光环大数据光环大数据！大数据培训、人工智能培训、Python 培训、大数据培训机构、大数据培训班、数据分析培训、大数据可视化培训，就选光环大数据！光环大数据，聘请专业的大数据领域知名讲师，确保教学的整体质量与教学水准。讲师团及时掌握时代潮流技术，将前沿技能融入教学中，确保学生所学知识顺应时代所需。通过深入浅出、通俗易懂的教学方式，指导学生更快的掌握技能知识，成就上万个高薪就业学子。【报名方式、详情咨询报名方式、详情咨询】光环大数据官方网站报名：光环大数据官方网站报名：http:/hadoop.aura.cn/http:/hadoop.aura.cn/手机报名链接：手机报名链接：http:/http:/ hadoop.aura.cnhadoop.aura.cn /mobile/mobile/