阿里云发布的数加是什么鬼

  • 时间:
  • 浏览:8
  • 来源:uu直播快3官方_UU快3直播平台

太满我们 做的第一件事情是重新梳理租户模型,在此基础上部署了一套新的Base实例。现在回头来看,累似 年也能快速的把数加平台搭起来,也能在这次DT World上顺利发布,最初的决定是对的,省去了太满的依赖和扯皮,只要从一开始英语 了就把租户累似 最核心的依赖做对了。但数加是颗尚未发芽的种子,面对可能有一颗树开始英语 了抽枝散叶的情况汇报下,这是非常不容易的,这里面为宜 给两位CXO级别的老板写过邮件才得到最终的资源和授权。太满我一开始英语 了跟团队强调,现在何必 提那先 平台,这样足够多的客户也何必 想那先 平台,先踏踏实实的做好工具产品。

2016.1.20,阿里云在云栖大会上海站的主题是DT World,这是一场规模宏大的大数据产品的发布会。发布的近20款产品, 几乎都出自阿里巴巴一一个多多多占据 已久的团队:数据平台事业部,从2015年初开始英语 了变成了阿里云数据事业部。累似 团队占据 有多久?都可不上能 说比阿里云累似 可不上能 久。累似 团队最早和DBA在同时,负责人是淘宝的第一位DBA七公,已经 DBA归属运维,数据平台则在七公的带领下迅猛发展,底层的平台历经多次升级,集群规模也从最初的一个多多多节点Oracle RAC到20个节点Oracle RAC,再从数百名到数千台Hadoop,直到目前的数万台ODPS,只要在CDO时期整合了当时集团各个BU最强的一帮大数据人才,成为了承载集团大数据梦想的数据公司。这里面的故事,2个团队的纠缠不休,2个项目的惊心动魄,估计讲个几天几夜都毫无尿点。

从一开始英语 了,你会把数加定位成大数据业务平台。在数加时候 ,集团结构实际上可能一个多多多大数据的平台,一一个多多多是面向集团结构的在云端,另外一一个多多多是面向结构电商场景的御膳房。累似 个多多平台的底层技术组件基本是一致的,2014年底的5K+项目也致力于让两者的底层详细统一,结构称之为一一个多多多Base,多套部署实例。既然可能有一一个多多多对外的实例了,这样数加做为业务平台,是基于已有的御膳房实例来构建,还是单独再部署一一个多多多实例呢?这是要做的第一一个多多多决定。从技术上来说,当然应该选折 基于已有实例来做,原先都可不上能 轻装上阵。但实际情况汇报是御膳房针对电商场景做了比较多的业务逻辑封装,有点硬累似 于聚石塔在电商场景下对阿里云的封装。累似 封放入电商场景下是合理的设计,但要面向通用的云计算和大数据场景,都在太满不尽合理的限制,甚至在最底层的租户模型上,当时都在累似 设计冲突。

这样,说了太满,到底数加是那先 鬼?当天发布的底层计算引擎有累似 Hadoop/EMR的ODPS(发布会上回应改名为MaxCompute)、有累似 Storm的StreamCompute、有做实时多维计算的Analytic DB、有机器学习的PAI。计算引擎之上,有数据开发者友好的Web IDE、有业务任务的调度系统、有元数据管理等一整套操作界面。对于大要素做大数据开发的同学来说,底层的计算引擎大要素情况汇报是不可见的,日常可不上能 操作的主要太满这层界面,也太满http://data.aliyun.com累似 网站。这两层产品相互依赖,都可不上能 说是数加的平台产品。基于累似 平台,不管是阿里结构,还是结构的数据开发者,都都可不上能 来做大数据的开发和应用。大会上发布的累似 产品,包括移动数据分析、DataV可视化、规则引擎、推荐引擎、BI报表、应用托管、郡县图治等,我人太好看起来名目繁多,实际上太满平台之上进行补充和富于的工具、服务以及典型的大数据应用案例。阿里云的主要目标应该是做好下面两层平台,并将平台的能力更多更快更好的开放出来,这两层才是阿里云大数据的核心竞争力,上层开放则都可不上能 形成富于的生态,未来应该有更多的第三方基于数加平台来开发和提供富于的大数据服务和应用,这是我对累似 事情的理解。

简单的八卦故事到这里应该告一段落了。我在2015年11月从阿里云离职,和2个前同事同时创立了袋鼠云。太满人问为那先 离职?数加当时我人太好做得辛苦,可不上能 从法务到财务到底层的Base/ODPS技术,到计费团队,要做这累似 情都可不上能 从最里面的业务突然贯通到最下面的技术运维,但总体上目标是清晰的,前景是光明的,数加累似 小团队自身相处得也很融洽。但也正是在做数加的过程中,我看多了云的趋势、计算的趋势和数据的趋势,也坚信面向企业的云服务和大数据有一波新的可能。我可能在阿里八年多,历经淘宝DBA、手机淘宝数据产品和数据事业部数加团队,收获太满,也错过了太满。可能再多待几年,还是会有不错的收入,头顶着平台的光环也都可不上能 吹吹牛B,但可能会离开从头开始英语 了的勇气。错过这波可能,未来回头来看的时候 ,你会会我会后悔的。当然,创业维艰,失败的概率很大,但为宜 我经历过的选折 都何必 后悔。

注:本文首发于袋鼠云公众号

-------------------- 技术改变商业 ---------------------

2015年4月还占据 了另外一件事情,我开始英语 了跑步了。没多久数加在产品方向上基本选折 了要做新的计费模型、服务商模型和数据服务市场等主要的事情。老张和我讨论团队的口号的时候 ,我们 达成了三点:成全他人、莫向外求、跑马拉松。其中跑马拉松是我提出的,一方面是让团队做好持久战的心理准备,另外一方面我也给另一方定下跑马拉松的目标。到数加发布为止,我一共跑完了一个多多多半马一一个多多多全马,想想当年在学校跑50000米都在死要活的,只要有目标,这样那先 可能。

直到2015年初,独立山头的数据平台事业部,变成阿里云旗下数据事业部,名字相差太满,但我我人太好角色占据 了很大的变化。阿里云总裁孙权同学对新的数据事业部提出了结构创业的想法,希望将过去几年主要为集团内提供服务的大数据平台也能正式全面的对外商用,并通过结构的创业工作室模拟结构客户来打磨平台。这是一一个多多多很大胆的想法,对于大要素都在技术人员的数据事业部来说,不啻于一场大革命。从15年4月份开始英语 了,数加业务团队、数加技术团队和结构2个创新工作室相继成立,并搬到了当时还这样那先 人气的云栖小镇办公。我也是累似 时候 开始英语 了正式负责数加技术团队,有幸和一群饱经磨难的数据同学同时感受了一段结构创业的过程。

太满我们 袋鼠云目前正在开发的一款大数据应用型的产品,将来也希望也能成为累似 生态里的一一个多多多小花朵,在我原先为之付出汗水的平台上顺利的结出果实。里面可能在繁忙的创业过程中也能抽出时间,也会更多的分享基于数加做大数据的技术文章,欢迎我们 持续关注袋鼠云公众号。

还是略过历史,回到数加吧。前面说到数据平台事业部是承载集团梦想的数据公司,累似 梦想是很远大的,就像某年年会的口号说的,是星辰大海。下要做好大规模计算的分布式平台,中要做好集团数据人的开发平台,上要挖掘集团数据的商业价值,三路大军浩浩荡荡,场面颇为壮观。但细看之下,却好比段誉同学通过北冥神功吸收了好几股真气,在这样融为己用时候 ,真气乱串因为 偶尔是神功盖世,偶尔是武功尽失。