Apache Pulsar Meetup 广州站
Hide
2020 年因为疫情,我们打造了 TGIP 系列直播与社区成员在线互动,但线上互动无法替代面对面建立起来的联接。随着当今疫情缓和,我们决定重启 Apache Pulsar Meetup 活动。
2021 年 4 月 18 日(周日),Apache Pulsar Meetup 将在广州举办。本次 Meetup 由 StreamNative 联合 BIGO 等合作伙伴精心筹备,将为大家带来 Pulsar 深度剖析及探讨。Apache Pulsar PMC 成员、核心贡献者、社区技术专家汇聚一堂,面对面交流,解疑答惑,充值信仰!
备注:疫情防控不放松,仍会控制现场活动规模,名额有限,报名从速
StreamNative
2021 年 4 月 18 日(周日)13:30
广州市番禺区市桥街兴泰路 296 号基盛万科里C座
翟佳 / Apache Pulsar PMC 成员,StreamNative 联合创始人
当新生事物出现时,总有两种角度去观察它,要么把它看小,要么把它放大。对于 Apache Pulsar,把它看小的角度通常是“Apache Pulsar 只是一个新的消息队列而已“,或者“Apache Pulsar 只是一个新的数据管道而已“,”队列系统早就有了,只是 Apache Pulsar 更具扩展性也能解决某些场景问题而已,基本没啥本质区别“。很明显,上述种种认识都不对。在本环节,翟佳将分享 Pulsar 社区目前已有的 Pulsar 应用情况,并探讨在消息、流、数据管理和技术基础设施层面的技术演进。
陈航,BIGO 大数据消息团队负责人
BIGO 目前旗下有 BIGO Live 和 Likee 短视频两大视频产品与服务,当前 BIGO Live 直播业务已覆盖 150 多个国家与地区,Likee 短视频也拥有超过 1 亿用户,在 Z 世代中广泛流行。在过往的技术架构中, BIGO 采用开源 Kafka 集群来支撑实时数据计算分析与短视频推荐业务。但随着业务不断快速发展,过往架构遇到了巨大挑战。Apache Pulsar 具备的分层架构及低延迟、持久化存储、水平扩展能力等特性帮助我们解决了生产系统中面临的巨大问题。本文将介绍 BIGO 基于 Pulsar 消息流平台,借助 Flink、Flink SQL 支撑实时 ETL 以及 AB-Test 实时数据报表业务中的应用。
徐昀泽,StreamNative 软件工程师
KoP(Kafka on Pulsar) 的诞生主要是希望在 Apache Pulsar 上原生支持 Kafka 协议。将 KoP 协议处理插件添加到现有 Pulsar 集群后,用户不用修改代码就可以将现有的 Kafka 应用程序和服务迁移到 Pulsar。这样,Kafka 应用程序就可以使用 Pulsar 的强大功能,例如利用 Pulsar 企业级多租户特性简化运营;避免数据搬迁,简化操作;利用 Apache BookKeeper 和分层存储持久保留事件流;利用 Pulsar Functions 进行无服务器化事件处理等等。
吴展鹏,BIGO 高级工程师 / Senior Engineer
BIGO 广泛使用开源的 Kafka 框架来搭建内部实时数据流系统,并在此架构下支撑起了众多的业务场景;但是随着业务的快速发展,无论是从运维角度、还是消息系统特性的丰富度出发,在复杂的应用场景下,Kafka 的能力都愈显疲惫,这时候 Apache Pulsar 所展现出的分层架构、多租户、低延迟、水平易扩展等特性无疑是行业所聚焦的。为了更好地帮助用户从 Kafka 应用平稳过渡到 Pulsar 系统,我们深入研究了 KoP(Kafka on Pulsar) 系统,并对 KoP 的读写吞吐能力做了大量验证。本文将从基本的监控指标出发,一步步深入介绍 KoP 在 BIGO 的性能优化实践。
杨阳,StreamNative 软件工程师
StreamNative Cloud 是业界唯一由 Apache Pulsar 的原始开发者提供支持的全托管、云原生的消息和事件流平台,提供了一种在世界不同区域、不同云平台上安全、便捷、可靠、可扩展、高效费比的托管式 Pulsar 服务。用户可以通过与平台的简单交互快速获取到一个调优过的生产级 Pulsar 服务,以与开源 Pulsar 完全一致的方式使用客户端进行访问,从而可以更多的专注于核心业务逻辑,无需关心运维部署细节。在本次分享中,我将介绍S treamNative Cloud 的功能、特性,并演示如何使用 Cloud 平台来创建和使用 Pulsar 服务。
(3年前)
(3年前)
(3年前)
(3年前)
(3年前)
(3年前)
StreamNative 是一家开源基础软件公司,由 Apache 软件基金会顶级项目 Apache Pulsar 创始团队组建而成,围绕 Pulsar 打造下一代云原生批流融合数据平台。StreamNative 作为 Apache Pulsar 商业化公司,专注于开源生态和社区构建,致力于前沿技术领域的创新,创始团队成员曾就职于 Yahoo、Twitter、EMC 等知名大公司。 Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。 GitHub 地址:http://github.com/apache/pulsar/