写点什么

AI 驱动的大数据自治:智能应对复杂运维挑战|QCon 北京

  • 2025-03-27
    北京
  • 本文字数:1395 字

    阅读完需:约 5 分钟

AI 驱动的大数据自治:智能应对复杂运维挑战|QCon北京

2025 年 4 月 10 - 12 日,QCon 全球软件开发大会将在北京召开,大会以 “智能融合,引领未来” 为主题,将汇聚各领域的技术先行者以及创新实践者,为行业发展拨云见日。


腾讯专家工程师、腾讯云 EMR 技术负责人熊训德已确认出席,并发表题为《AI 驱动的大数据自治:智能应对复杂运维挑战》的主题演讲。在大数据平台高速发展的当下,生态扩张与业务量激增,致使大数据分布式组件问题愈发棘手,传统专家运维模式捉襟见肘。以腾讯大数据庞大的规模为例,面对海量计算单元、繁杂技术栈以及千万级任务管理,借助 AI 驱动实现大数据系统的故障和问题的快速洞察与自治能力,已成为行业迫切需求。


在本次演讲中,熊训德将介绍如何通过可拔插的决策引擎、以及数据专家自治智能体构建大数据智能管家,让企业能够理解如何高效、智能地处理复杂的运维场景,从而大幅提升大数据场景下运维效率与准确性,引领大数据线上系统迈向全面自治的新征程。


熊训德是腾讯专家工程师、腾讯云 EMR 技术负责人,有丰富的大数据领域系统架构、开发、专家系统调优经验。本次会议中,他的详细演讲内容如下:


演讲提纲

1. 开源大数据系统运维背景与挑战

  • 大数据自治决策对实时性要求和挑战

  • 错综复杂的大数据存储、计算、调度技术栈对根因分析决策引擎挑战

  • 传统专家系统对构建复杂大数据自治系统的局限分析

2. 大数据智能管家技术框架及关键实现路径

  • 可拔插的智能决策引擎思考和设计

  • 基于腾讯云大数据海量专家知识库构建的自治智能体

  • AI 驱动的智能洞察及通用大模型对构建复杂大数据自治系统的分析和构建

3. 实践效果与案例分享

  • 不同数据量场景下大数据智能自治的具体决策路径及效果

  • 分享在大数据存储和调度在故障场景下的自优化过程

4. 探讨大数据智能管家经验和教训

  • 稳定性:数据质量对构建自治智能体稳定性的影响及优化

  • 安全性:决策系统应对数据安全的相关教训和思考

5. 探讨智能管家未来发展方向与潜在影响

  • 大模型在大数据运维应用的趋势

  • 大数据智能持续优化与创新的路径


您认为,这样的技术在实践过程中有哪些痛点?

  • 可拔插的决策引擎思考和设计

  • 构建复杂大数据自有知识库的自治智能体

  • AI 驱动的智能洞察和自治系统的分析和构建


演讲亮点

  • 可拔插的智能决策引擎:结合大数据庞杂组件现状,创新性设计了可拔插的决策引擎,同时具备通用性和高效率

  • 大数据智能运维深入思考及实践路径:系统分析了大数据运维智能化在腾讯真实碰到的问题和解决,推动大数据智能化运维及自治的不断发展


听众收益

  • 了解大数据系统运维发展当前的困境和挑战

  • 掌握基于通用大模型怎么结合大数据专有知识库和自治智能体,构建大数据专有自治系统

  • 获取提升大数据系统运维高效而准确性的技术方案与实践经验


除此之外,本次大会还策划了多模态大模型及应用AI 驱动的工程生产力面向 AI 的研发基础设施不被 AI 取代的工程师大模型赋能 AIOps云成本优化Lakehouse 架构演进越挫越勇的大前端等专题,届时将有来自不同行业、不同领域、不同企业的 100+资深专家在 QCon 北京现场带来前沿技术洞察和一线实践经验。


现在报名即可以享受 9 折优惠,单张门票立省 680 元,详情可扫码或联系票务经理 18514549229 咨询。



为确保大会顺利举行,现诚邀大二以上学生加入志愿者服务,时长 3.5 天。可与大咖交流、获极客时间 VIP 月卡、大会演讲视频资源和证书。主办方提供午餐和交通支持。时间:4 月 9 日 13:00-4 月 12 日 18:00,地点:北京万达嘉华酒店,报名链接:https://www.infoq.cn/form/?id=2088

2025-03-27 10:584013

评论

发布
暂无评论
发现更多内容

上海市宝山区委书记陈杰一行参访旺链科技

旺链科技

区块链 产业区块链 Vone新闻

ko在数栈中的应用

袋鼠云数栈

用简单例子带你了解联合索引查询原理及生效规则

华为云开发者联盟

sql 索引 查询 联合索引

基于CC2530设计的智能风扇

DS小龙哥

2月月更 智能风扇

凡泰极客成为W3C成员并加入MiniApps工作组,将积极参与小程序快应用技术标准化进程

FinClip

小程序

C++异常处理机制

正向成长

c++ 异常处理

80%的软件环境管理问题,根因都在这里 | 研发效能提升36计

阿里云云效

阿里云 DevOps 云原生 持续交付 部署

Python 中的数组哪去了?

宇宙之一粟

Python 数组 2月月更

十年所学,梦想终至,不负时光 | 《云端架构》新书首推发布,来自极度努力的吕校长

博文视点Broadview

[Python]第一章(建议收藏)

謓泽

Python 2月月更

Netty如何高效接收网络数据?一文聊透ByteBuffer动态自适应扩缩容机制

bin的技术小屋

网络编程 Netty nio 中间件 Java【

面试突击25:sleep和wait有什么区别?

王磊

java面试

学生管理系统的架构设计

凌波微步

「架构实战营」

如何打造一个能自动回复的钉钉机器人

老表

Python 机器人 Linxu 跟老表学云服务器

CSS实现阮大佬博文的阅读进度功能

战场小包

CSS css3 前端 2月月更

前端培训:Vue3计算属性比普通函数好的原因

@零度

Vue 前端开发

Nginx跨域解决配置示例

nginx 跨域

好用不卡,这些插件和配置让你的 Webstorm 更牛逼!

前端下午茶

前端 工具 webstorm

开源| 直播推拉流2.0升级了什么

anyRTC开发者

开源 音视频 屏幕共享 视频直播 美颜滤镜

大数据培训:Flink CDC 高频面试题

@零度

大数据 flink

VIPKID基于Karmada的容器PaaS平台落地实践

华为云原生团队

开源 Kubernetes k8s多集群管理 混合云 分布式云

阳振坤:从电动汽车看分布式数据库的发展和崛起

OceanBase 数据库

数据库 OceanBase 开源 OceanBase 社区版 HTAP

鲲鹏DevKit & BoostKit直播解密:如何“做开发者的开发者”

科技热闻

OpenHarmony移植案例与原理:如何适配服务启动引导部件bootstrap_lite

华为云开发者联盟

OpenHarmony 移植 bootstrap_lite startup 系统服务

UMEM:友盟统计自定义事件多应用一键同步 & 批处理工具

SamgeApp

Docker Vue 友盟助手 友盟自定义事件批处理 友盟统计

数据库读写分离如何保证主从一致性?

蜜糖的代码注释

MySQL 数据库 2月月更

盘一盘常见的6种索引失效情况

华为云开发者联盟

MySQL 索引 字符串 查询 索引失效

大厂偏爱的Agent技术究竟是个啥

捉虫大师

架构 agent

学生管理系统架构设计文档

阿卷

架构实战营

netty系列之:EventLoop,EventLoopGroup和netty的默认实现

程序那些事

Java Netty nio 程序那些事 2月月更

张海宁:首个 CNCF 中国开源项目 Harbor 的修炼之道

腾源会

开源 腾源会

AI 驱动的大数据自治:智能应对复杂运维挑战|QCon北京_腾讯_QCon全球软件开发大会_InfoQ精选文章