博客
2018/10/31
Beam 峰会欧洲 2018 首届回顾
大约一个月前,我们很高兴在伦敦的 Level39 欢迎 Beam 社区参加 Beam 峰会伦敦的首届活动。
首届 Beam 峰会伦敦的第一天进展顺利!来自 @SkyUK @GCPcloud @Talend @PlantixApp 等公司的演讲!#ApacheBeam #apachebeamlondon #l39 #level39 @ApacheBeam #summit pic.twitter.com/aEESFnbgxT
— Matthias Baetens 🌆 (@matthiasbaetens) 2018 年 10 月 1 日
首届活动!
首届峰会是一场免费活动,有超过 125 人报名。我们进行了为期两天的内容分享;第一天重点关注项目的路线图、ASF 和使用 Beam 的公司的用例。第二天分为两个主题(初级主题和高级主题)。这些演讲和研讨会是为超过 **80 名参加者** 准备的,除此之外,还有其他一些活动,例如讨论、头脑风暴环节、用户体验展台和签署环节。我们能够为参加者提供来自以下公司的 **17 场演讲**,包括 Google、Spotify、Talend、Sky、Amazon、Data Artisans、Datatonic、Vente Exclusive、ML6、Flumaion、Plantix、Polidea、Seznam 等!
#### 主题包括使用 Python 在 Flink 上运行 Beam
不要错过 @snntrable 在 2018 年 10 月 2 日 Beam 峰会伦敦的演讲,主题是关于 #Python 流式管道与 @ApacheBeam 和 @ApacheFlink!在此注册:https://#/wblzUeiTIg #streamprocessing #BigData #MachineLearning pic.twitter.com/7Ph51WqspW
— data Artisans (@dataArtisans) 2018 年 9 月 26 日
#### 使用 Beam 和 TensorFlow 变换集成进行 ML
很高兴聆听 @FsMatt 在 #BeamSummit 上关于 TensorFlow 变换的演讲!@ApacheBeam @TensorFlow @Level39CW
— datatonic (@teamdatatonic) 2018 年 10 月 2 日
查看他演示的代码:https://#/8IS41A2aF2 https://#/UWytiudmRO
#### 可移植性层是一个重要议题
由 @stadtlegende 进行的关于在 #ApacheBeam 中添加可移植性的精彩演讲,这是 Apache Beam 愿景实现的重大里程碑和下一步!pic.twitter.com/M9jERlTeAE
— Matthias Feys (@FsMatt) 2018 年 10 月 2 日
#### 以及关于如何构建自己的 SDK 的演讲
Robert Bredshaw 解释了如何构建新的 @ApacheBeam SDK。#BeamSummit pic.twitter.com/Bj84GJimdo
— Maximilian Michels 🧗 (@stadtlegende) 2018 年 10 月 2 日
演讲
在峰会结束后,您可以查看所有演讲的幻灯片。
第一天:用例
- 第一天 - 演讲 1 - Sky 使用 Apache Beam 进行大规模流式分析
- 第一天 - 演讲 2 - 使用 Apache Beam 运行量化分析
- 第一天 - 演讲 3 - Talend 数据流:使用 Apache Beam 构建大数据管道
- 第一天 - 演讲 4 - 从将 Apache Beam 用于地理数据可视化迁移中汲取的教训
第二天:初级主题
- 第二天 - 初级 - 演讲 1 - 使用 Apache Beam 的开发环境
- 第二天 - 初级 - 演讲 2 - 迈向可移植性和超越
- 第二天 - 初级 - 演讲 3 - 使用 Beam 在 Flink 上运行的 Python 流式管道
- 第二天 - 初级 - 演讲 4 - 运行器如何执行 Beam 管道
- 第二天 - 初级 - 演讲 5 - Apache Beam 中的 IO 集成测试框架
第二天:高级主题
- 第二天 - 高级 - 演讲 1 - 使用 Apache Beam 和 tf.Transform 对 TensorFlow 管道进行预处理
- 第二天 - 高级 - 演讲 2 - 将流式数据导入 BigQuery:使用 Protobuf 生成架构
- 第二天 - 高级 - 演讲 3 - 实现 SplittableParDo
- 第二天 - 高级 - 演讲 4 - 使用 Scala 和 Scio 在 Google Cloud 上进行大数据处理
- 第二天 - 高级 - 演讲 5 - 卫星图像的土地利用分类
- 第二天 - 高级 - 演讲 6 - Beam SDK 的 Java 8 DSL
- 第二天 - 高级 - 演讲 7 - 因此,您想编写一个 Beam SDK?
录制视频
如果您更喜欢与幻灯片一起重新观看录制的演讲,我们也很乐意分享大多数演讲的录制视频。
第一天:用例
- 第一天 - 演讲 1 - Sky 使用 Apache Beam 进行大规模流式分析
- 第一天 - 演讲 2 - 使用 Apache Beam 运行量化分析
- 第一天 - 演讲 3 - Talend 数据流:使用 Apache Beam 构建大数据管道
- 第一天 - 演讲 4 - 从将 Apache Beam 用于地理数据可视化迁移中汲取的教训
第二天:高级主题
- 第二天 - 高级 - 演讲 1 - 使用 Apache Beam 和 tf.Transform 对 TensorFlow 管道进行预处理
- 第二天 - 高级 - 演讲 2 - 将流式数据导入 BigQuery:使用 Protobuf 生成架构
- 第二天 - 高级 - 演讲 3 - 实现 SplittableParDo
- 第二天 - 高级 - 演讲 4 - 使用 Scala 和 Scio 在 Google Cloud 上进行大数据处理
- 第二天 - 高级 - 演讲 5 - 卫星图像的土地利用分类
- 第二天 - 高级 - 演讲 6 - Beam SDK 的 Java 8 DSL
- 第二天 - 高级 - 演讲 7 - 因此,您想编写一个 Beam SDK?
总结
我们也在收集有关峰会的反馈和想法,请将您的想法和讨论添加到 邮件列表的主题中。
总的来说,我们希望参加者们喜欢我们的首届峰会,并感谢 **我们的赞助商 Google、Datatonic、Vente-Exclusive** 使这一切成为可能。
总结 #BeamSummit 的第一天。来自 #level39 会场的绝佳景色。对阵容非常满意。pic.twitter.com/7FhokKbQY5
— Alex Van Boxel (@alexvb) 2018 年 10 月 1 日