如何 Get 字节跳动同款云原生大数据平台

随着业务和数据的快速增长,云计算和大数据技术也得到了迅速发展,云原生化和智能化已成为一种趋势。在此背景下,字节跳动进行了一系列大数据架构 Serverless 化的探索与实践,并在 AI 智能化方向进行了研究,最终形成火山引擎云原生大数据平台方案。

11月18日,在由上海白玉兰开源开放研究院、人工智能开源软件发展联盟联名主办的 Data & AI Con Shanghai 2023 大会上,将特别设立云原生****大规模计算实践专场 。来自火山引擎的技术专家们将详细介绍字节跳动在云原生大规模计算方面的实践经验。此外,专场还设立了工作坊环节 您将可以亲身体验字节跳动同款云原生大数据平台 ,更有机会领取海量大礼

  • 时间:2023年11月18日(周六) 13:30-17:00
  • 地点:上海圣诺亚皇冠假日酒店

扫码报名

主题演讲

字节跳动云搜索的 云原生 之路与 AI 初探

黄杨锋 火山引擎云搜索服务控制面负责人

演讲简介: 在当今数字化时代,云原生和 AI 已经成为推动技术和业务创新的重要驱动力。云原生为企业提供更高效、更灵活的服务,加速产品的交付和创新。从 ChatGPT 爆火以来,AI 逐渐引入并应用于各行各业,助力企业智能化升级。

本次分享将介绍火山引擎云搜索服务在过去几年中在云原生方面的实践,以及对 AI on Search 方面的先行探索和应用,AI 和云搜索的结合将助力企业实现智能化搜索。

讲师简介: 目前就职于字节跳动云原生团队,负责云搜索服务的控制面方向 和 内外部客户的BP工作,致力于将字节跳动云搜索在发展过程中积累的技术能力和成功实践提供给外部客户。此前曾服务于华为、腾讯等企业,在后端开发和大数据方面有十多年经验。

云原生大规模计算实践专场

字节跳动基于 K-NN 向量搜索

鲁蕴铖 字节跳动基础架构高级研发工程师

演讲介绍: 当今,随着图片和视频数据的爆炸式增长,人们对于多样化数据搜索的需求也越来越迫切。多模态搜索场景已经成为当前搜索领域的主要趋势。在这个背景下,本次演讲将重点介绍字节跳动在K-NN向量搜索领域的探索,并探讨如何在多模态数据场景下进行海量数据搜索。

在多模态数据搜索领域,我们面临着许多挑战和机遇。一方面,不同类型的数据(如图像、音频、文本等)具有不同的特征表示方式,如何有效地将它们进行统一的处理和搜索是一个关键问题。另一方面,海量数据的搜索速度和准确性也是需要解决的难题。在演讲中,我们将探讨这些挑战,并分享我们在多模态数据搜索方面的实践经验,探讨K-NN在多模态搜索中的应用。

讲师简介: ES内核研发,多年ES/Lucene研发经验,目前负责字节跳动ES的内核研发工作

超大规模云原生消息引擎详解

雷丽媛 火山引擎 云原生 计算研发工程师

演讲简介: 随着字节跳动内部业务快速增长,经典消息队列 Kafka 劣势开始逐渐暴露,在弹性、规模、成本及运维方面都无法满足业务需求。因此字节研发了计算存储分离的云原生消息队列 BMQ,在极速扩缩容及吞吐上都有非常好的表现。本次分享将从架构、容灾容错能力以及实战应用几个方面介绍字节跳动超大规模云原生消息引擎 BMQ。

讲师简介: 2015-2017 年就职于百度搜索架构部门,参与分布式表格及分布式文件系统的研发工作。17年5月加入字节跳动,曾负责 HDFS 的研发工作,目前任离线消息队列方向负责人,与团队从零搭建了新一代就兼容 Kafka 协议的云原生消息队列 BMQ。

李佳林 火山引擎 云原生 大数据解决方案架构师

演讲简介: 随着云计算和大数据技术的快速发展,Serverless架构已成为一种趋势,我们可以将应用程序的部署和管理工作交给云服务提供商,从而实现更高效、更灵活的使用方式,避免运维云产品。

OpenSearch提供了快速的搜索和分析能力,使得数据在写入后可以立即进行查询和分析。Flink作为一种高效的流处理框架,能够处理大量实时数据流并支持复杂的事件处理,数据流量不可避免的存在高峰和低谷,最适合无服务器的弹性架构。

讲师简介: 字节跳动基础架构团队,主要负责大数据组件Serverless化,服务于集团内,私有化,公共云等业务方。曾拥有多年 Flink 产品设计经历,具有丰富的实时数据平台建设经验。曾担任 FFA 2022风控专场负责人。

Workshop:字节跳动云原生大数据平台体验坊

❯ 字节跳动日志导入方案

❯ 构建以图搜图、以文搜图 应用

❯ 快速搭建智能问答系统

手把手体验字节跳动同款云原生大数据平台,领取定制电脑包、「坦诚清晰」空调毯、字节加湿器、马克杯等精美礼品!

点击「阅读原文」参与报名

相关推荐
AI攻城狮1 小时前
OpenClaw Session 管理完全指南:Context 压缩、重置与持久化
人工智能·云原生·aigc
字节跳动数据平台4 小时前
代码量减少 70%、GPU 利用率达 95%:火山引擎多模态数据湖如何释放模思智能的算法生产力
大数据
得物技术6 小时前
深入剖析Spark UI界面:参数与界面详解|得物技术
大数据·后端·spark
武子康7 小时前
大数据-238 离线数仓 - 广告业务 Hive分析实战:ADS 点击率、购买率与 Top100 排名避坑
大数据·后端·apache hive
武子康1 天前
大数据-237 离线数仓 - Hive 广告业务实战:ODS→DWD 事件解析、广告明细与转化分析落地
大数据·后端·apache hive
大大大大晴天1 天前
Flink生产问题排障-Kryo serializer scala extensions are not available
大数据·flink
武子康3 天前
大数据-236 离线数仓 - 会员指标验证、DataX 导出与广告业务 ODS/DWD/ADS 全流程
大数据·后端·apache hive
阿里云云原生4 天前
阿里云获评 Agentic AI 开发平台领导者,函数计算 AgentRun 赢下关键分!
云原生
武子康4 天前
大数据-235 离线数仓 - 实战:Flume+HDFS+Hive 搭建 ODS/DWD/DWS/ADS 会员分析链路
大数据·后端·apache hive
阿里云云原生4 天前
MSE Nacos Prompt 管理:让 AI Agent 的核心配置真正可治理
微服务·云原生