新萄京3522娱乐手机版

新萄京3522娱乐手机版 自媒自媒体 THU新萄京3522娱乐手机版派正文

对话【友盟+】李丹枫:每天处理百亿级事件,超大量级新萄京3522娱乐手机版场景下新萄京3522娱乐手机版团队如何健康运转?

  “新萄京3522娱乐手机版对于新萄京3522娱乐手机版科学家来说是非常重要的,甚至比算法还重要。要知道,再好的模型都是靠新萄京3522娱乐手机版养的。因此在新萄京3522娱乐手机版应用层面,我认为中国比美国更有优势。”

  曾供职于雅虎,MicroSoft,FICO等多家领先科技企业,【友盟+】CDO李丹枫感慨到。

  大新萄京3522娱乐手机版发展的下半场,意识到新萄京3522娱乐手机版重大价值的不止李丹枫,而在新萄京3522娱乐手机版产业中,争夺新萄京3522娱乐手机版话语权的无声战争也正愈演愈烈。2016年1月,友盟、CNZZ和缔元信三家各自拥有本行业大批量新萄京3522娱乐手机版的企业合并,组成了新的企业【友盟+】,而新生的【友盟+】新萄京3522娱乐手机版体量遂之倍增到中国乃至全球瞩目。

  骤然增多的新萄京3522娱乐手机版量一方面让【友盟+】在众多的新萄京3522娱乐手机版服务提供商中,获得了天然的新萄京3522娱乐手机版体量优势,另一方面,新萄京3522娱乐手机版的合并和新萄京3522娱乐手机版团队重新定位整合也给管理层带来了前所未有的挑战。就大企业内部的新萄京3522娱乐手机版治理与整合、新萄京3522娱乐手机版产品和新萄京3522娱乐手机版团队的重构等话题,大家与李丹枫进行了深度对话。

  每天处理约280亿事件

  高新萄京3522娱乐手机版体量下,如何定义和实现高效计算?

  合并后的【友盟+】新萄京3522娱乐手机版体量到底有多大呢?

  李丹枫称,合并后,【友盟+】覆盖的用户行为新萄京3522娱乐手机版打通了PC、手机、传感器、无线路由器等多种设备。用新萄京3522娱乐手机版具象展现:

  【友盟+】覆盖125万个APP;

  每天监测14亿移动设备;

  每天监测680万个网站;

  每天处理的事件数约280亿。

  面对如此庞大的新萄京3522娱乐手机版量,李丹枫坦言:第三方新萄京3522娱乐手机版量级太大、覆盖面太广。面对全面打通的新萄京3522娱乐手机版,【友盟+】的新萄京3522娱乐手机版团队首先要解决的问题是:如何定义和实现用户行为新萄京3522娱乐手机版的高效计算?以【友盟+】提供的风控业务为例,用户行为新萄京3522娱乐手机版的量级大但新萄京3522娱乐手机版深度浅,对于新萄京3522娱乐手机版团队来说,在这种新萄京3522娱乐手机版上做挖掘很有挑战性。同时,这项服务会承担大量的外部查询量。

  首先摆在新萄京3522娱乐手机版团队面前的是新萄京3522娱乐手机版的全量更新或按需更新的选择。这个选择题经常出现在一个新萄京3522娱乐手机版模型的训练和测试阶段。建模时不仅要考虑到基于不同层面的新萄京3522娱乐手机版特征清晰地定义目标,还要考虑当模型成型后,所有的指标需要被有效地计算。如果新萄京3522娱乐手机版科学家的决策是新萄京3522娱乐手机版指标需要每天全量更新,每天将有几十亿个ID的新萄京3522娱乐手机版回溯到新萄京3522娱乐手机版训练的平台上,带来的是巨大的计算量和计算资源的占用。同时需要新萄京3522娱乐手机版工程师协助新萄京3522娱乐手机版科学家搭建有效的新萄京3522娱乐手机版生产环境,保护计算的稳定性。因此,新萄京3522娱乐手机版全量更新或按需更新的选择直接决定了存储和计算资源的消耗量,也就是成本。为此李丹枫博士为大家先容了“代码健康度”的概念和评价标准。

  很多时候机器是在“傻算”

  给定代码“健康”度规则,高效挖掘新萄京3522娱乐手机版价值

  “大家要让新萄京3522娱乐手机版团队有这样的意识,一定要用最高效的方法来实现计算。尤其在新萄京3522娱乐手机版体量巨大的场景下,差一点就会差很多”,李丹枫说到“比如说100亿个ID,如果每个计算能提高1%,能节省的资源是很大的。”对资源的消耗与企业的生存直接相关,作为CDO,李丹枫必须清晰地界定“高效计算”的评价标准,督促并激励数团队能够有效地使用新萄京3522娱乐手机版。

  【友盟+】的新萄京3522娱乐手机版团队分为新萄京3522娱乐手机版科学家和新萄京3522娱乐手机版工程师,有不同的checkpoint来保证“高效”。友盟对于代码有一套评价体系——代码“健康”度。里面囊括了经常出现的代码错误、模型的稳定性(对变量依赖程度的评估)、模型的可持续性(不同版本更新的用户体验是否顺畅)和对占用资源的评估。如果一个新萄京3522娱乐手机版科学团队的代码连续三次被监测为“不健康”,他们在组织中的权重会相应降低。对于新萄京3522娱乐手机版科学家来说,对业务的理解直接关系到在特征的实现,需要在建模的阶段定义好新萄京3522娱乐手机版和好方法。“不要过分追求模型的极致表现。

  比如一个模型的表现30%都依赖于1~2个变量,在实验室里的表现可能非常好。在实际生产过程中,一旦这1~2个变量出了问题,可能整个模型的结果都废了,这显然是企业无法接受的。所以,新萄京3522娱乐手机版科学家要时刻提醒自己:你怎么定义你的目标?”李丹枫说。对于新萄京3522娱乐手机版工程团队来说,内部技术委员会对定期评价团队正在运用的技术是否有效。

  高效运转新萄京3522娱乐手机版团队的核心

  新萄京3522娱乐手机版团队的重构&新萄京3522娱乐手机版人才的再定义

  【友盟+】能够运作起如此庞大的新萄京3522娱乐手机版量,除了专注于对新萄京3522娱乐手机版的高效使用,还有一个重要因素是合并时的新萄京3522娱乐手机版整合,以及和alibaba内部新萄京3522娱乐手机版团队的合作。企业高层在合并之初发动了“五大战役”,从业务角度出发整合新萄京3522娱乐手机版。经过半年时间确定了三大产品线,其新萄京3522娱乐手机版团队也在此基础上重构成了三大业务模块+上层新萄京3522娱乐手机版价值实现模块的结构。“大家希翼用户在用大家产品的时候就像搭积木一样,把有需求的模块拼接起来使用。新萄京3522娱乐手机版在其中是横向打通的。”李丹枫说。

  整合过程中涉及了新萄京3522娱乐手机版的融合和业务的融合。模块制的管理思路保证了其新萄京3522娱乐手机版可以横向打通。在新萄京3522娱乐手机版标准化及治理方面,【友盟+】全面借鉴了alibaba的新萄京3522娱乐手机版管理经验,针对每一个BusinessUnit迁移新萄京3522娱乐手机版到OneData新萄京3522娱乐手机版体系中。同时,将新萄京3522娱乐手机版全部迁入阿里云,做到降低运维成本及新萄京3522娱乐手机版安全合规。接下来,新萄京3522娱乐手机版科学家们通过第一方账号打通和算法打通两种方式对新萄京3522娱乐手机版进行识别。在新萄京3522娱乐手机版资源打通后可通过第一方登陆账号,把来源多样的新萄京3522娱乐手机版识别整合为同一个人的新萄京3522娱乐手机版。而通过建模识可以实现在第一方账号缺失的情况下的账号打通。这样一来,用户在不同设备、不同账号中上留下的痕迹就这样被标准化整合,并在脱敏后成为商家提供决策依据。

  【友盟+】高层合并的流畅性给新萄京3522娱乐手机版团队和业务的融合创造了良好的平台。改组后的【友盟+】新萄京3522娱乐手机版团队大致分为新萄京3522娱乐手机版科学家和新萄京3522娱乐手机版工程师两部分,分别负责新萄京3522娱乐手机版价值实现和新萄京3522娱乐手机版基础保障。“新萄京3522娱乐手机版从业者太容易钻到自己的小圈子里去了。”李丹枫坦言。作为CDO,他需要把新萄京3522娱乐手机版团队从小圈子里拉出来,激发团队的主动性和外向型。他鼓励新萄京3522娱乐手机版团队一旦有了新想法,便去说服同伴,组成2~3人的小团队把这个想法实现出来。再自下而上扩展影响圈,不断完善想法,直至一个新新萄京3522娱乐手机版应用场景的出现,变成产品。在他看来,新萄京3522娱乐手机版人才还需具备:了解客户、发现需求的沟通力;说服同伴的领导力;批判思维的洞察力和实现想法的实行力。

  激发团队贡献想法,驱动新萄京3522娱乐手机版体现价值。这对李丹枫来说是使命感使然:“我做新萄京3522娱乐手机版的时间比较长,回国后看到有些新萄京3522娱乐手机版沉寂很多年,并没有利用起来。我是有使命感的。我希翼根据我的经验来判断新萄京3522娱乐手机版在哪些场景中可能比较容易地产生新萄京3522娱乐手机版价值。‘先摘容易摘的果子’,激励团队挖掘更多的新萄京3522娱乐手机版价值。”

  对职场新人的期待:放下架子,放手去做!

  回国前,李丹枫在美国从事了十多年新萄京3522娱乐手机版挖掘和机器学习方面的工作,曾服务于雅虎,MicroSoft,FICO等多家领先科技企业。“我不认为在新萄京3522娱乐手机版领域,美国比中国具有明显的优势。从新萄京3522娱乐手机版团队的构成来看,我认为中美的差异也已经非常小了,美国的新萄京3522娱乐手机版团队里有很多中国人。”李丹枫说到。

  李丹枫认为新萄京3522娱乐手机版人才不单需要有新萄京3522娱乐手机版建模的能力。具体说来,他给了职场新人三条建议:

  1、Get your hands dirty。打好基础,去充分了解在你手上新萄京3522娱乐手机版。不要只想着发论文,要放下架子,动手去清洗你的新萄京3522娱乐手机版,了解你的新萄京3522娱乐手机版。不要怕新萄京3522娱乐手机版“脏”;

  2、让自己成为跨界人才、π型人才。工程方向的学生要补充新萄京3522娱乐手机版常识,新萄京3522娱乐手机版方向的学生要补充工程常识,工程和新萄京3522娱乐手机版方向的学生都要补充行业常识;

  3、务实、主动、合作精神。

  人物概况

  李丹枫,【友盟+】CDO,本科毕业于清华大学,后在美国伊利诺伊大学(UIUC)电子与计算机工程专业取得博士学位。毕业之后,在美国工作10多年,服务于包括雅虎,MicroSoft,FICO等在新萄京3522娱乐手机版应用走在前沿的企业,积累了丰富的新萄京3522娱乐手机版挖掘和机器学习的实战经验,所参与的产品在金融,保险,搜索,互联网广告及零售业中有广泛的应用。

责任编辑:陈近梅

分享:
贵州

贵州大新萄京3522娱乐手机版产业政策

贵州大新萄京3522娱乐手机版产业动态

贵州大新萄京3522娱乐手机版企业

更多
企业
更多
XML 地图 | Sitemap 地图