分享好友 资讯首页 频道列表

Apache Spark & Paimon Meetup · 北京站,助力 LakeHouse 架构生产落地

2024-11-12 14:0062040

众所周知,LakeHouse 架构是当前大数据领域领先的技术架构之一。LakeHouse 由海外知名大数据公司 Databricks 提出,旨在融合数据湖的灵活性及成本效益与传统数据仓库的强大事务支持、高性能分析能力于一体,并且能够无缝集成机器学习等多种应用场景,为企业提供了更加全面的数据管理和分析平台。

Apache Spark 作为近十几年来大数据领域最优秀的开源项目之一,提供了强大统一的大数据处理和分析能力,涵盖了实时离线数据处理、SQL、图计算、机器学习及深度学习等多个维度,作为 LakeHouse 的核心组件,Spark 在大数据和AI方向持续发力。

Apache Paimon 作为新兴的数据湖存储技术,最初在Flink社区中以 Flink Table Store项目孵化。2023 年,Paimon独立出来成为一个 Apache Incubator项目,2024 年 4 月完成孵化成为了一个Apache顶级项目。Apache Paimon 采用开放的数据格式和技术理念,提供高吞吐、低延迟的数据摄入、更新及查询能力,且与诸多业界主流计算对接,是 LakeHouse 架构中不可或缺的一部分。

为了助力 LakeHouse 架构在企业中的实践与落地,阿里云 EMR 技术团队联合 Apache Paimon 社区,联合举办“ Apache Spark & Paimon, 助力 LakeHouse 架构生产落地”线下 meetup,邀请阿里云、VIVO、美团等众多业内大咖分享 LakeHouse 架构的核心技术和最佳实践经验,为大数据从业者提供一个开放的分享与交流平台。

活动详情

● 活动时间:2024年11月15日 13:30-17:30(周五)

● 活动地点:北京市朝阳区阿里中心-望京A座-05F

● 报名方式:扫描下方二维码或点击链接进行报名

   https://hd.aliyun.com/form/5276

微信截图_20241112140419

活动亮点

1. 业内大咖云集

本次 Meetup 特邀阿里云、VIVO、美团等知名企业的技术专家现场分享,将为大家带来最前沿的技术洞察和实践经验,分享他们在 LakeHouse 架构实施过程中遇到的挑战与解决方案。

2. 深入探讨 LakeHouse 架构

LakeHouse 架构作为一种新兴的大数据存储与处理架构,融合了数据湖和数据仓库的优势。本次活动将深入探讨LakeHouse 架构的核心技术,包括数据采集、数据存储、数据分析、数据管理等多个方面,帮助企业更好地理解和应用这一创新架构。

3. Apache Spark Paimon 的深度整合

Apache Spark 作为大数据处理的利器,与 Paimon 的深度整合将带来更加强大的数据处理能力。本次 Meetup 将详细介绍 Spark 与 Paimon 的集成实践,分享在具体项目中的应用案例,展示其在提升数据处理效率方面的卓越表现。

4. 最佳实践与成功案例分享

除了技术的探讨,本次 Meetup 还将分享多个企业在 LakeHouse 架构实践中的成功案例。通过这些最佳实践,您将了解到不同企业在不同场景下的应用经验,找到适合自己企业的解决方案,从而推动业务的创新与发展。

期待您的参与

无论您是大数据技术爱好者,还是企业技术决策者,都能通过本次活动找到有价值的信息与灵感。我们期待与您在活动现场相见,共同开启 LakeHouse 架构的探索之旅!

EMR Serverless Spark 版是开源大数据平台 E-MapReduce 基于 Spark 提供的一款全托管、一站式的数据计算平台,它为用户提供任务开发、调试、发布、调度和运维等全方位的产品化服务。EMR Serverless Spark 完全兼容 Paimon,通过内置的 DLF 的元数据实现了和其余阿里云产品如实时计算 Flink 版的元数据互通,形成了完整的流批一体的解决方案。同时支持灵活的作业运行方式和参数配置,能够满足实时分析、生产调度等多项需求。阿里云 EMR Serverless Spark 版已于2024年9月14日正式商业化售卖,欢迎体验!

QQ截图20241112140652

举报 0
收藏 0
打赏 0
阿里云受邀加入Elastic AI Ecosystem联盟,助力企业加速RAG应用开发
近日,AI搜索公司Elastic宣布推出其全新的AI Ecosystem联盟,阿里云作为中国唯一受邀加入的厂商,携手Elastic共同为全球用户提供强大的AI搜索开发平台,推动AI搜索技术的广泛应用。

0评论2024-11-225528

智能建造领军企业获国际智能建造可持续发展合作伙伴荣誉
2024年11月18日,一场聚焦智能建造未来发展的高端论坛国际智能建造高端论坛在北京成功召开。此次论坛汇聚了众多国内外智能建造领

0评论2024-11-225552

高校AI通识课全面铺开,老师率先“升级”迎接挑战”
11月16-17日,西安交通大学和百度共同举办了AI通识教育主题高级研修班。60多名来自全国各地的老师花了一个周末,和百度的工程师一起探讨AI通识课“教什么”“怎么教”。

0评论2024-11-215913

第十九届中博会圆满落幕!五大关键词解读盛会成果
11月18日,为世界中小企业搭建“展示、交易、交流、合作”平台的第十九届中国国际中小企业博览会落下帷幕,五大关键词解读盛会成果。

0评论2024-11-215710

未来之“光”:艾迈斯欧司朗引领汽车照明革新
作为光源领域的领导者,艾迈斯欧司朗以光子为媒介,架起智能化汽车与终端用户(包括驾驶员、乘客及道路使用者)之间的交互桥梁。

0评论2024-11-185969

发展新质生产力,龙华区亮相第26届高交会展示硬核科技
2024年11月14日至16日,第二十六届中国国际高新技术成果交易会(以下简称“高交会”)在深圳国际会展中心举行,龙华区共28家创新型企业组团亮相。

0评论2024-11-156193

深圳NEPCON电子展圆满落幕,镭晨科技新品备受瞩目
2024年 11 月 6 日- 8 日,2024 NEPCON ASIA亚洲电子展在深圳国际会展中心如期举行,镭晨科技携多款新品及最新技术隆重亮相。

0评论2024-11-126098

电装:推进碳中和,人才培养不计成本
10月21日,电装在电装(广州南沙)有限公司举办碳中和节能体感教育培训活动。

0评论2024-11-126251

从富士通到RAMXEED,以全新一代FeRAM迎接边缘智能高可靠性无延迟数据存储需求
近日,富士通半导体科技(上海)有限责任公司总经理冯逸新在由E维智库举办的第12届中国硬科技产业链创新趋势峰会暨百家媒体论坛上分享公司开展FeRAM的业务。

0评论2024-11-126193

智能无处不在:安谋科技“周易”NPU开启端侧AI新时代
近日,在EEVIA主办的第12届中国硬科技产业链创新趋势峰会暨百家媒体论坛上,安谋科技产品总监鲍敏祺发表了精彩的主题演讲《端侧AI应用芯机遇,NPU加速终端算力升级》。

0评论2024-11-126276