最佳Kafka峰会视频
以下演讲(提供视频录音和幻灯片)在2018 年以来的Kafka Summit会议 上获得了社区的最佳评价。感谢各位演讲者的辛勤付出!
目录
Kafka 内部结构和基础知识
- 让 Kafka 成为云原生,Jay Kreps(Confluence),KS EU 2021
- ksqlDB 的工作原理,Michael Drogalis (Confluence),KS EU 2021
- 了解高吞吐量应用程序的 Kafka Produce 和 Fetch API 调用,Jason Gustafson (Confluence),KS EU 2021
- Kafka式的 Raft 协议,Mik Kocikowski (Cloudflare),KS EU 2021
- Kafka ♥ 云(主题演讲),Jay Kreps(Confluence),堪萨斯州 2020
- 分布式系统设计中的权衡:Kafka 是最好的吗?,Ben Stopford 和 Michael G. Noll(汇合),堪萨斯州 2020
- Kafka Streams 和 ksqlDB 的通量电容器,Matthias J. Sax (Confluence),KS 2020
- 跨越流:Kafka Streams 中新的流外键连接功能,John Roesler (Confluence),KS 2020
- 欢迎来到Kafka;我们很高兴你在这里,Dave Klein (Centene),堪萨斯州 2020
- Kafka的新架构(主题演讲),Gwen Shapira(Confluence),KS 2020
- Apache Kafka 入门 - 贡献者之旅,Israel Ekpo (Microsoft) 和 Matthias J. Sax (Confluence) 和 Nikolay Izhikov (Sberbank),堪萨斯州 2020
- Kafka不需要(动物园)守护者 (摘要),Jason Gustafson 和 Colin McCabe(Confluence),SFO 2019
- 当你可以改变世界时,为什么要阻止世界呢?增量合作再平衡的设计与实现 (摘要),Konstantine Karantasis(Confluence),SFO 2019
- Kafka 102:流和表一路向下 (摘要),Michael G. Noll(Confluence),SFO 2019
- 几点了?……为什么? (摘要),Matthias J. Sax(Confluence),SFO 2019
- 禅与流媒体连接的艺术:什么、何时和为什么 (摘要),Nick Dearden(Confluence),纽约 2019
- Exactly Once Semantics Revisited (Exactly Once Semantics Revisited) (摘要),Jason Gustafson (Confluence),纽约市 2019
- Kafka Streams 应用程序的性能分析与优化 (摘要),王国章(Confluence),LON 2019
- 关于 Kafka 重新平衡协议您一直想知道但又不敢问的一切 (摘要),Matthias J. Sax(Confluence),LON 2019
- 使用 Apache Kafka 进行可靠的消息传递 (摘要),Ying Cheng 和 Xiaobing Li (Uber),SFO 2018
- 强化 Kafka 复制 (摘要),Jason Gustafson(Confluence),SFO 2018
- 不要重复自己:Apache Kafka 中的 Exactly-Once 语义简介 (摘要),Matthias J. Sax(Confluence),LON 2018
应用程序和用例
- 你应该以流的方式还是批量的方式读取 Kafka?你应该关心吗?、伊多·纳德勒(尼尔森)和奥弗·杜布罗夫斯基(尼尔森)
- 使用 Apache Kafka 扩展核心银行引擎,Peter Dudbridge(Thought Machine),KS APAC 2021
- 使用 IBM 和 Confluence 扩展事件驱动架构,Antony Amanse (IBM) 和 Anton McConville (IBM),KS EU 2021
- 使用实时数据源开发旅游动态定价,Mourad Benabdelkerim(立即免费),KS EU 2021
- 使用 Pac-Man 构建事件流应用程序,Ricardo Ferreira (Confluence),堪萨斯州 2020
- Apache Kafka、分层存储和 TensorFlow,无需数据湖即可实现流式机器学习,Kai Waehner(Confluence),KS 2020
- KSQL-操作!在野外运行 ksqlDB,Simon Aubury (ThoughtWorks),堪萨斯州 2020
- 迈向我们的量子未来,David Elbert 和 Tyrel McQueen(约翰霍普金斯大学),堪萨斯州 2020
- KafkaConsumer – 解耦消费和处理以实现更好的资源利用,Igor Buzatović (Inovativni trendovi doo),KS 2020
- Kafka 可以处理 Lyft 乘车服务吗?、Andrey Falko 和 Can Cecen (Lyft),堪萨斯州 2020
- 用Kafka拉平曲线,Rishi Tarar(诺斯罗普·格鲁曼公司),堪萨斯州 2020
- 使用流处理进行零售业风险管理,Daniel Jagielski(Virtuslab/Tesco),堪萨斯州 2020
- 0-60:特斯拉的流数据平台 (摘要),Jesse Yates(特斯拉),SFO 2019
- 赛事活动 – Netflix 原创! (摘要),尼廷·夏尔马 (Netflix),SFO 2019
- 使用 Apache Kafka 对 NASA 深空网络进行关键任务实时故障检测 (摘要),Rishi Verma(NASA 喷气推进实验室),SFO 2019
- 使用 Kafka 发现数据库中隐藏的事件 (摘要),Anna McDonald(SAS 研究所),SFO 2019
- 构建企业事件框架 (摘要),Bryan Zelle (Centene) 和 Neil Buesing (Object Partners, Inc),SFO 2019
- ksqlDB 性能调优的乐趣和利润 (摘要),Nick Dearden(Confluence),SFO 2019
- 使用 Kafka Streams 发现药物 (摘要),Ben Mabey 和 Scott Nielsen(Recursion Pharmaceutical),SFO 2019
- 成为云世界中的 Apache Kafka 开发英雄 (摘要),Ricardo Ferreira(Confluence),SFO 2019
- 流应用程序和毒丸:使用 Kafka Streams 处理意外情况 (摘要),Loic Divad(Xebia 法国),SFO 2019
- 印度板球饥饿人口规模 (摘要),Bhavesh Raheja 和 Namit Mahuvakar(Hotstar),SFO 2019
- 在 Ticketmaster 中利用流处理器应用程序中的服务 (摘要),Derek Cline (Ticketmaster),SFO 2019
- 使用 Spring 框架进行流处理(就像您以前从未见过的一样) (摘要),Josh Long (Pivotal)、Tim Berglund (Confluence),NYC 2019
- 如何使用 Apache Kafka 和 Druid 来驯服路由器数据 (摘要),Rachel Pedreschi(隐含数据),纽约 2019
- Kafka Connect 和 ksqlDB:从遗留系统迁移到 Kafka Streams 的有用工具 (摘要),Alex Leung 和 Danica Fine(彭博社 LP),纽约,2019 年
- 使用 Kafka 构建无服务器应用程序 (摘要),Dale Lane (IBM),LON 2019
- 将事件和流处理引入全国建筑协会 (摘要),Robert Jackson 和 Pete Cracknell(全国建筑协会),LON 2019
- 自定义 ksqlDB 函数的令人兴奋的前沿 (摘要),Mitch Seymour (Mailchimp),LON 2019
- 使用位置数据展示 Kafka Streams DSL 和 ksqlDB 中的键、窗口和连接 (摘要),Neil Buesing(Object Partners, Inc),LON 2019
- ksqlDB 实践 (摘要),Almog Gavra(Confluence),LON 2019
- 基于 Kafka 的行业就绪 NLP 服务框架 (摘要),Bernhard Waltl 和 Georg Bonczek(宝马集团),LON 2019
- Booking.com 的数据流生态系统管理 (摘要),Alex Mironov (Booking.com),SFO 2018
- 企业中的 Kafka——从头开始构建数据流平台的两年之旅 (摘要),Benny Lee 和 Christopher Arthur(澳大利亚联邦银行),SFO 2018
- 《生活是一系列事件》 (摘要),Bjørn Kvernstuen 和 Tommy Jocumsen(挪威工作与福利局),SFO 2018
- Kafka 多租户 — LINE 的一个共享集群上每日 1600 亿条消息 (摘要),Yuto Kawamura(LINE Corporation),SFO 2018
- 将 Tinder 的规模与 Kafka 相匹配 (摘要),Krunal Vora (Tinder),SFO 2018
- 在第一资本构建企业流媒体平台,Chris D'Agostino(第一资本),SFO 2018
- 更多数据,更多问题:在 LinkedIn 上扩展 Kafka 镜像管道 (摘要),Celia Kung (LinkedIn),SFO 2018
- 从螺旋桨到喷气式飞机:在飞行中升级发动机 (摘要),Christopher Morris (PagerDuty),SFO 2018
- 理解流式 SQL 的可视化方法 (摘要),Shant Hovespian(Arcadia Data),SFO 2018
- 使用 Kafka 实现医疗保健数字化转型 — 构建低延迟数据管道 (摘要),Dmitry Milman 和 Ankur Kaneria (Express Scripts),SFO 2018
- 使用 Kafka Streams 构建 Pinterest 实时广告平台 (摘要),Liquan Pei 和 Boyang Chen (Pinterest),SFO 2018
- 使用 Kafka 和 Flink 将状态流处理提升到新水平 (摘要),Stephan Ewen (Ververica),LON 2018
- 大规模驯服数十亿个指标和日志:以 Kafka 作为 CERN 监控中央数据中心的两年 (摘要),Luca Magnoni (CERN),LON 2018
- ksqlDB 201:深入探讨查询处理 (摘要),Hojjat Jafarpour(Confluence),LON 2018
- ING 银行的 Kafka 演变 (摘要),Timor Timuri 和 Richard Bras (ING),LON 2018
架构和模式
- 错误——我犯了一些错误。事件驱动架构中的错误,Simon Aubury(ThoughtWorks 澳大利亚),KS APAC 2021
- 借助 ksqlDB 实现更好的 CQRS,Ans human Mukherjee (Airwallex),KS APAC 2021
- 在微服务之间共享数据:如何使用 Kafka Connect 捕获变更数据来拯救我们,Ali Nazemian (Brolly) 和 Milad Vahood (Brolly),KS APAC 2021
- Apache Kafka 和数据网格,Ben Stopford (Confluence) 和 Michael Noll (Confluence),KS EU 2021
- 如何构建数据网格基础:原则性方法,Zhamak Dehghani (ThoughtWorks),KS EU 2021
- 快速了解 MirrorMaker 2,Mickael Maison (IBM) 和 Ryanne Dolan (Twitter),KS EU 2021
- 对事件驱动的世界做出反应,Kate Stanley 和 Grace Jansen (IBM),堪萨斯州 2020
- 两个数据中心的故事:Kafka 流弹性,Anna McDonald (Confluence),堪萨斯州 2020
- Kafka 作为您的数据湖——可行吗?, Guido Schmutz (Trivadis), 堪萨斯州 2020
- GDPR 合规性:事件驱动系统中个人身份信息的透明处理,Masih Derkani (SolarWinds),KS 2020
- Apache Kafka 上的同步命令,Neil Buesing(Object Partners, Inc),KS 2020
- 混合 Kafka,对业务进行实时分析,Cody Irwin (Google Cloud) 和 Josh Treichel (Confluence) 和 Jeff Ferguson (Confluence),堪萨斯州 2020
- 我并不总是测试我的流,但当我这样做时,我会在生产中进行,Viktor Gamov (Confluence),KS 2020
- 使用事件建模构建信息系统,Bobby Calderwood(Evident Systems),堪萨斯州 2020
- 使用 Kafka 和云事件构建事件驱动架构 (摘要),Dan Rosanova(微软),SFO 2019
- 事件溯源、流处理和无服务器,Ben Stopford (Confluence),SFO 2019
- 粉碎巨石 (摘要),Martin Kess(即),SFO 2019
- 关于流媒体和事件的硬道理 (摘要),Dan Rosanova(微软),纽约 2019
- 分布式系统中的复杂事件流 (摘要),Bernd Ruecker (Camunda),纽约市 2019
- 使用 Apache Kafka 经济有效且可靠地每天聚合数十亿条消息 (摘要),Chunky Gupta 和 Osman Sarood(Mist Systems),纽约,2019 年
- 基于 Kafka 的应用程序的跟踪:理解事件驱动的数据流 (摘要),Jorge Esteban Quilcate Otoya (SYSCO AS),纽约市 2019
- 从每天一百万到万亿事件:可笑模式下的流处理 (摘要),Shrijeet Paliwal (Tesla) NYC 2019
- 迁移到事件驱动的微服务 (摘要),Adam Bellemare (Flipp),纽约,2019 年
- 谈论交通:驾驶员座位上的数据 (摘要),Dominique Chanet (Klarrio),LON 2019
- Kafka世界的隐私工程 (摘要),Alexander Cook(Privitar),LON 2019
- 流媒体之谜 – 有趣和利润的代码谜题 (摘要),Nick Dearden(Confluence),LON 2019
- Kafka是数据库吗?, Martin Kleppmann(剑桥大学),LON 2019
- 事件驱动的工作流程:使用 Kafka 和 Zeebe 监控和编排您的微服务环境 (摘要),Mike Winters 和 Sebastian Menski(Camunda),LON 2019
- 使用 Apache Kafka 处理 GDPR:如何遵守而不惊慌? (摘要),David Jacot(独立,正式瑞士电信),LON 2019
- 统治一切的一把钥匙 (摘要),Richard Noble 和 Francesco Nobilia(Babylon Health),LON 2019
- 如何使用 Kafka 和 Druid 驯服路由器数据 (摘要),Rachel Pedreschi 和 Eric Graham(隐含数据),LON 2019
- Apache Kafka 和面向事件的架构,Jay Kreps (Confluence),SFO 2018
- 将流数据带给大众:降低流数据平台的“入场成本” (摘要),Bob Lehmann(拜耳),SFO 2018
- 使用变更跟踪、Kafka 和 KStreams/ksqlDB 分解 SQL 整体 (摘要 Wanny Morellato (SAP Concur),SFO 2018
- Kafka 作为事件系统,将整体架构重新构建为微服务 (摘要),Madhulika Tripathi (Intuit),SFO 2018
- 使用基于事件的系统进行实验,Martin Fowler 和 Toby Clemson (ThoughtWorks),LON 2018
数据管道
- 使用 Apache Kafka 步入正轨:使用铁路数据构建流式 ETL 解决方案,Robin Moffatt (Confluence),KS APAC 2021
- Apache Kafka 和 ksqlDB 实际应用:让我们构建流数据管道!,罗宾·莫法特(汇合),堪萨斯州 2020
- 使用 Debezium 和 Kafka Streams 更改数据捕获管道,Gunnar Morling(红帽),KS 2020
- 精彩六号,实时进行。将动视数据管道过渡到流媒体,Yaroslav Tkachenko(动视),堪萨斯州 2020
- Kroger 如何在构建实时数据管道中采用“模式优先”理念,Rob Hoeting、Rob Hammonds 和 Lauren McDonald (Kroger),SFO 2019
- 使用 ksqlDB 通过 Apache Kafka 构建流处理应用程序 Robin Moffat (Confluence),SFO 2019
- Kafka Connect:从战壕中汲取的操作经验 (摘要),Elizabeth Bennett(Confluence),SFO 2019
- Oracle RDBMS 和 Apache Kafka 之间双向集成的解决方案 (摘要),Guido Schmutz (Trivadis),SFO 2019
- Airbnb 日志事件的流式摄取 (摘要),Hao Wang (Airbnb),纽约市 2019
- 不再孤岛:将数据库集成到 Apache Kafka (摘要),Robin Moffatt(Confluence),纽约市 2019
- 使用 Kafka Connect 构建连接器的经验教训 (摘要),Katherine Stanley 和 Andrew Schofield(IBM 英国),纽约,2019 年
- 为《使命召唤》游戏构建可扩展和可扩展的数据管道 (摘要),Yaroslav Tkachenko(动视),纽约,2019 年
- 从零到英雄与 Kafka Connect (摘要),Robin Moffatt(Confluence),LON 2019
- 使用 Debezium 更改微服务的数据流模式 (摘要),Gunnar Morling(红帽),LON 2019
- 超越消息传递:企业规模、多云智能路由 (摘要),Anand Phatak (Adobe),SFO 2018
- 你必须构建额外的管道:暴雪的 Kafka 上的 Pub-Sub (摘要),Stephen Parente 和 Jeff Field(暴雪),SFO 2018
- 你想写一个连接器吗? (摘要),Randall Hauch(Confluence),SFO 2018
Kafka操作
- 注意应用程序:如何监控您的 Kafka 流应用程序,Simon Aubury (ThoughtWorks),KS EU 2021
- 加密静态 Kafka 消息以保护应用程序,Robert Barnes (HashiCorp),KS EU 2021
- 关于 Kubernetes 上的 Kafka,您需要了解但又不敢询问的一切,Jakob Scholz(红帽),KS EU 2021
- 完全托管、多租户 Kafka 集群:提示、技巧和工具,Christopher Beard(彭博社),堪萨斯州 2020
- 克服Kafka秘密蔓延的危险,Tejal Adsul(Confluence),堪萨斯州 2020
- 人类的 Kafka 滞后监控,Elad Leev (AppsFlyer),堪萨斯州 2020
- 共享即关怀:创建自调整多租户 Kafka,Anna Povzner (Confluence),KS 2020
- Kubernetes 上的 Kafka:保持简单,Nikki Thean (Etsy),SFO 2019
- 请升级 Apache Kafka。现在! 格温·夏皮拉(Confluence),SFO 2019
- 与小团队一起应对 Kafka,Jaren Glover (Robinhood),SFO 2019
- 在真正的多租户环境中大规模保护 Kafka (摘要),Vishnu Balusu 和 Ashok Kadambala(摩根大通),SFO 2019
- 在 Yelp 上运行大规模 Kafka 升级 (摘要),Manpreet Singh (Yelp),SFO 2019
- Kubernetes 上的生产就绪 Kafka (摘要),Devandra Tagare (Lyft),SFO 2019
- Uber 的 Kafka 集群联盟 (摘要),Yupeng Fui 和 Xiaoman Dong (Uber),SFO 2019
- 大规模运营 Apache Kafka® 的经验 (摘要),Noa Resare(Apple),纽约市 2019 年
- 用于企业安全的 Kafka 可插拔授权 (摘要),Anna Kepler (Viasat),纽约市 2019
- Kafka on Kubernetes:这真的一定是“艰难的方式”吗? (摘要),Viktor Gamov 和 Michael Ng (Confluence),纽约 2019
- SASL/OAUTHBEARER 的灵活身份验证策略 (摘要),Michael Kaminski(《纽约时报》)和 Ron Dagostino(道富银行),纽约市 2019 年
- 带故障树分析的 Bulletproof Apache Kafka (摘要),Andrey Falko (Lyft),纽约市 2019 年
- 多 DC Kafka 的基础 (摘要),Jakub Korab(Confluence),LON 2019
- 向我展示将提高我的生产力的 Kafka 工具 (摘要),Stephane Maarek (DataCumulus)
- 在 Kubernetes 中运行 Kafka:实用指南 (摘要),Katherine Stanley(IBM 英国),LON 2019
- 在 Kubernetes 中运行生产 Kafka 集群 (摘要),Balthazar Rouberol (Datadog),LON 2019
- 不要害怕:大规模多租户集群支持 (摘要),Kelly Attaway 和 Cabe Waldrop(Pandora Media),LON 2019
- Kafka on ZFS:通过文件系统改善生活 (摘要),Hugh O'Brien (Jet.com),SFO 2018
- Kafka 安全 101 和现实世界技巧 (摘要),Stephane Maarek (DataCumulus),SFO 2018
- Confluence 平台的端到端安全性 (摘要),Vahid Fereydouny(Confluence),SFO 2018
- Kafka Streams 的稳健操作 (摘要),Bill Bejeck(Confluence),SFO 2018
- 使用 Docker 和 Kubernetes 部署 Kafka Streams 应用程序 (摘要),Gwen Shapira 和 Matthias J. Sax(Confluence),SFO 2018
- 城市规划计划?原谅你!您必须了解的三个指标 (摘要),Todd Palino (LinkedIn),SFO 2018
- 像专业人士一样监控 Kafka (摘要),Gwen Shapira 和 Xavier Léauté(Confluence),LON 2018