首页 > 科技 > 直播 | 汇量科技资深算法架构师陈绪:基于 PySpark 打造全栈数据智能开发体验

直播 | 汇量科技资深算法架构师陈绪:基于 PySpark 打造全栈数据智能开发体验

本文为将门技术社群第184线上分享,也是2020年的第一场talk~

北京时间1月2日(周四)晚8点,在将门技术社群,我们很开心邀请到汇量科技资深算法架构师陈绪,他与大家分享的主题是Deep Learning on PySpark:基于 PySpark 打造全栈数据智能开发体验

届时,他将介绍汇量科技开发的一站式机器学习平台 MindAlpha 的一个重要特性,即在 PySpark 中无缝集成 TensorFlow 或 PyTorch 等深度学习框架,能够直接高效访问 Spark 的 DataFrame 数据,同时支持对大规模稀疏特征的分布式训练。

活动信息

主题:基于 PySpark 打造全栈数据智能开发体验

嘉宾:汇量科技资深算法架构师 陈绪

时间:北京时间 1月2日 (周四) 20:00

地点:将门创投斗鱼直播间

分享提纲

在搜索、推荐、广告算法等领域,往往需要通过复杂的大规模数据处理,才能进入到模型训练阶段。在数据处理领域,Spark 是常用的开发工具。然而,在机器学习领域,TensorFlow 或者 PyTorch 则是事实标准。这导致业务算法的开发流程需要在不同工具间切换和同步数据,开发和执行效率比较低。

汇量科技的 MindAlpha 平台在 PySpark 之上构建了 Deep Learning on PySpark 框架,在 PySpark 中无缝集成 TensorFlow 或 PyTorch,能够直接高效访问 Spark 的 DataFrame 数据,同时支持对大规模稀疏特征的分布式训练。算法工程师在一套框架上即可完成从数据聚合、特征抽取、模型训练的完整流程,极大地提升了效率。

具体分享内容大纲如下:

1. 大数据和深度学习框架整合的现状;

2. Deep Learning on PySpark 的原理;

3. 从特征提取到模型训练:在 PySpark 上的分布式 Deep Learning 开发示例。

嘉宾介绍

陈绪

汇量科技资深算法架构师

陈绪,2018年初加入汇量科技(Mobvista),任资深算法架构师,负责汇量科技大规模数据智能计算引擎和平台的研发工作。在此之前陈绪在阿里巴巴任高级技术专家,负责大规模机器学习平台的研发。

Ask Me Anything

赶不上直播也想向嘉宾提问?

希望嘉宾提供最佳解答?

扫描下方二维码就能提问!在直播中被嘉宾选中回答的小伙伴将获得一个红包奖励

(截止时间:直播前一小时

观看直播或加群

将门是一家以专注于发掘、加速及投资技术驱动型创业公司的新型创投机构,旗下涵盖将门创新服务、将门技术社群以及将门创投基金。将门成立于2015年底,创始团队由微软创投在中国的创始团队原班人马构建而成,曾为微软优选和深度孵化了126家创新的技术型创业公司。

将门创新服务专注于使创新的技术落地于真正的应用场景,激活和实现全新的商业价值,服务于行业领先企业和技术创新型创业公司。

将门技术社群专注于帮助技术创新型的创业公司提供来自产、学、研、创领域的核心技术专家的技术分享和学习内容,使创新成为持续的核心竞争力。

将门创投基金专注于投资通过技术创新激活商业场景,实现商业价值的初创企业,关注技术领域包括机器智能、物联网、自然人机交互、企业计算。在近四年的时间里,将门创投基金已经投资了包括量化派、码隆科技、禾赛科技、宽拓科技、杉数科技、迪英加科技等数十家具有高成长潜力的技术型创业公司。

如果您是技术领域的初创企业,不仅想获得投资,还希望获得一系列持续性、有价值的投后服务,欢迎发送或者推荐项目给我“门”: bp@thejiangmen.com

本文来自投稿,不代表本人立场,如若转载,请注明出处:http://www.souzhinan.com/kj/268661.html