视频回顾 | Pulsar Summit 2021 北美峰会 - 用户案例专场演讲

关于 Pulsar Summit

Pulsar Summit 是 Apache Pulsar 社区年度盛会，它将分布在世界各地的 Apache Pulsar 项目 Contributor、Committer 和各企业 CTO/CIO、开发者、架构师、数据科学家，以及消息和流计算社区的精英召集在一起。于此盛会，大家分享实践经验、交流想法、探讨关于 Pulsar 项目和社区的知识，切磋互动。

今天为大家分享 Pulsar Summit 北美峰会视频回顾系列第三篇：用户案例专场演讲篇。在本专题中，腾讯游戏、印度最大电商 Flipkart、德国健康科技公司 Vivy 、美国领先数字营销互动公司 Iterable、Splunk 等十余家企业分享了他们部署、使用、改进 Pulsar，并将 Pulsar 与其他系统集成的经验。

视频展示如下，演讲 PPT 可根据底部下载方式获取。

演讲视频为英文无字幕，快来伴随视频锻炼听力吧😁️😁️

点击上方图片，观看完整版视频

演讲详情

Migrating a Billion Transactions a Day To Apache Pulsar

Tom Wang, Staff Software Engineer @Iterable
Thomas Kim, Principal Engineer @Iterable

视频看点：从 RabbitMQ 到 Pulsar Pulsar Flink 集成 平滑的系统迁移 十亿数量级

美国领先数字营销互动公司 Iterable 每天处理十亿数量级的队列事务，即程序化营销活动中的用户流量， Iterable 团队目前正在将系统从 RabbitMQ 迁移到 Apache Pulsar。本次演讲分享了 Apache Pulsar 如何成功地使 Workflow Campaigns 承载此工作量，并分享其无停机的系统迁移经验。Iterable 未来计划使用 Pulsar Flink Connector，集成 Pulsar 与 Flink 系统来限制入口进程。

How Pulsar Enables Netdata to Offer Unlimited Infrastructure Monitoring for Free

Christopher Akritidis, Chief Operations Officer @Netdata

视频看点：Pulsar 应用于 SaaS 百万级实时数据

Netdata Cloud 使用 Pulsar 作为其核心，几乎其所有消息的往返都经过 Pulsar。Pulsar 易于扩缩容的架构为其提供了系统所需的灵活性。同时 Netdata Cloud 也依赖于 Pulsar 进行微服务之间的通信（使用具有共享订阅的 CQRS 模式以实现可扩展性），并且利用 Pulsar 消息的可靠持久性调试特定的生产问题，以此实现溯源模式。本视频介绍 Netdata Cloud 使用 Pulsar 的经验并引入一组新功能。

Add Horsepower to AI/ML streaming Pipeline

Kiran Matty, Director of Product @Aerospike

视频看点：Pulsar Spark 集成 AI/ML 场景

在本次演讲中，Aerospike 产品总监 Kiran 分享了由 Apache Pulsar、Apache Spark 3.0、Aerospike 数据库及 Spark Pulsar 连接器组成的高性能 AI/ML 训练和推理管道的参考架构。社区用户可以参考使用该架构，低成本地扩展到其他需要低延迟和高吞吐量的场景。

Pulsar in a Healthtech: Heart of the Event Sourced System

Kirill Merkushev, Head of Backend @Vivy

视频看点：从 Kafka 到 Pulsar AWS 部署 Pulsar

本次视频讲述了德国流行的健康数据管理公司 Vivy 全线部署 Pulsar 的经历，Vivy 整支撑着数百万德国个人健康管理的数据。视频涵盖以下几点：

·从 Kafka 迁移到 Pulsar 的历程；·如何通过 aws 中的 CloudFormation 部署 Pulsar；·GDPR 合规性：如何清理数据、透明地卸载敏感数据；·在存储与 Pulsar 分离的偏移量时遇到的问题与解决方案。

How Tencent Applies Apache Pulsar to Apache InLong —— A Streaming Data Integration Platform

Zirui Peng, Software Engineer @Tencent

视频看点：数百亿数据集成 KoP 广告场景

因 Pulsar 具有高可用、多租户、读写分离、跨区域复制和灵活的容错等能力，Apache InLong 选择 Pulsar 作为其消息中间件，为腾讯全球数十亿的用户提供服务。腾讯大数据团队分享了他们在核心数据引擎中采用 Pulsar 处理数百亿数据集成的经历，以及在此过程中遇到的一些问题，和他们对 Pulsar 所做的改进。

Building Topic-as-a-Service Using Pulsar

Ankur Jain, Architect @Flipkart

视频看点：电商场景 私有云 从 Kafka 到 Pulsar

印度最大电商 Flipkart 通过提供 Topic-as-a-Service 来消除团队使用不同消息系统所带来的运营复杂性。本次视频分享 Flipkart 在私有云中使用 Pulsar 的一些设计决策和改进：

·如何确保共享集群中新租户的容量；·相比于开箱即用的 active-active，如何在 Pulsar 上提供 Active-Passive topic；·如何推动部署和说服 Kafka 用户迁移到 Pulsar。

Security and Multi-tenancy with Apache Pulsar in Yahoo! (Verizon Media)

Rajan Dhabalia, Principal Software Engineer @Verizon Media
Ludwig Pummer, Principal Production Engineer @Verizon Media

视频看点：公有云 Pulsar 安全和 proxy

本次演讲分享针对用户在多租户环境中可安全地从本地、公有云和跨企业访问 Pulsar 的场景，Verizon Media 所使用的 Apache Pulsar 安全和 proxy 解决方案。此外，本视频分享了 Verizon Media 使用 Pulsar 的多租户维度来为 Pulsar 共享集群上的不同场景和应用程序提供服务的经验。

Streaming Millions of Contact Center Interactions in (Near) Real-Time with Pulsar

Frank Kelly, Principal Engineer @Cogito Corp

视频看点：AI/ML 场景 Kubernetes Pulsar 百万级 topic

Cogito 在消息流场景中运行 AI/ML 模型上的实时音频和数据分析。本视频分享了在 Kubernetes 上配置 Pulsar 以处理数百万个 topic 的经验。

Streaming Market Data to the Cloud

Yezdaan Baber, CEO @Belvedere Trading

视频看点：本视频分享全球领先的股票指数和商品衍生品交易服务企业 Belvedere Trading 如何利用 Pulsar 将交易市场数据传输上云。

How Splunk Is Using Pulsar IO

Jerry Peng, Principal Software Engineer @Splunk

视频看点：Pulsar Functions Pulsar IO

Splunk 弃用 DSP（数据流处理器）连接器框架的自制平台，转而使用由 Pulsar IO 支持的框架。在本次演讲中，Splunk 工程师分享了选择使用 Pulsar IO 框架的评估和决策过程，讨论 Splunk 如何利用 Pulsar IO 框架，并展示了他们提高 Pulsar Functions/IO 扩展性和稳定性所做的改进。

Apache Pulsar at Tencent Game: Adoption, Operational Quality Optimization Experience, and Future

Liping Zhao, Senior Software Engineer @Tencent

视频看点：腾讯游戏日数据传输量可达 1.7 万亿。MQ 系统作为大数据平台的关键组成部分，对于提供实时的服务运营质量保证至关重要。腾讯大数据工程师分享他们在腾讯游戏实时服务场景下优化 Apache Pulsar 运营服务质量的实践与经验。

Apache Pulsar 正在越来越多的行业落地，应用于越来越丰富的场景。在本次北美峰会中，我们看到了很多新的 Pulsar 用户案例，见证了 Pulsar 在全新的场景下的使用。相信通过观看回顾视频，会对你带来新的启发和思考。