【AICon】 如何构建高效的 RAG 系统?RAG 技术在实际应用中遇到的挑战及应对策略?>>> 了解详情
写点什么

七牛存储运维实践

  • 2019-09-24
  • 本文字数:605 字

    阅读完需:约 2 分钟

七牛存储运维实践

CNUTCon上海2018大会上,林天智讲师做了《七牛存储运维实践》主题演讲,主要内容如下。


演讲简介


  1. 七牛原本的告警系统是通过 zabbix 来触发,然后有一个人工告警通知的团队来通知各个业务线告警,再由各自的运维团队处理告警。这个在规模小的时候没有问题,但是在机器规模变大的时候会遇到很多问题,告警数量爆增,信息流单项无法确认,缺乏历史记录等。需要针对这个来做改造,但是过程中会遇到大量告警如何迁移,如何保证不影响当前的正常工作等,中间运用到一些开源服务比如 prometheus,pushgateway,node_exporter 等,以及一些自己开发的系统。最终存储运维相关的故障减少 80%以上,以及不需要人工告警团队再继续通知。

  2. 资源利用以及集群复制。当前存储的部署是基于物理机部署,对于资源利用很不充分,也不利于集群的复制(私有云),会从这些角度讲如何从物理集群迁移到容器集群。


主要内容:


  1. 监控数据搜集;

  2. 告警收敛;

  3. 告警后续处理;

  4. 容器化方案。


听众受益:


  1. 灵活运用开源组件;

  2. 如何自动化的思路,避免无意义的工作;

  3. 容器化的思路。


讲师介绍


林天智


七牛存储 &直播运维 负责人


在七牛曾经做过存储研发,转到数据处理,后面参与到直播调度相关的设计以及研发,再后来转到技术保障部作为存储 &直播运维的负责人,有 5 年的 golang 编程经验,对分布式有一定经验,对 k8s 有一定了解,运维方面有大规模运维改造的实践经验。












完整演讲 PPT 下载链接


https://cnutcon.infoq.cn/2018/shanghai/#schedule


2019-09-24 15:08736

评论

发布
暂无评论
发现更多内容

活动回顾 | StoneDB亮相2023数据技术嘉年华:增强AP、升级TP、信创替换,让万千DBA用得更省心,企业用得更省钱

StoneDB

数据技术 StoneDB 数据技术嘉年华

Linux系统Tomcat安装与配置。

百度搜索:蓝易云

tomcat Linux 运维 云服务器 云服务器ECS

面向大模型的存储加速方案设计和实践

Baidu AICLOUD

数据湖 大模型 并行文件系统 缓存加速

OpenTiny 前端组件库正式开源啦!面向未来,为开发者而生

OpenTiny社区

开源 前端 UI组件库

C++中set的用法学习

攻城狮Wayne

Linux查看进程PID的方法?

百度搜索:蓝易云

Linux 运维 云服务器 PID 虚拟主机

Gluten + Celeborn: 让 Native Spark 拥抱 Cloud Native

阿里云大数据AI技术

后端 企业号 7 月 PK 榜 Push Shuffle

Last Week in Milvus

Zilliz

云服务 非结构化数据 Milvus Zilliz zillizcloud

Java程序性能分析:内存

javalover123

Java 性能优化 性能 性能分析 性能监控

Linux系统下如何在防火墙开放指定端口

百度搜索:蓝易云

Linux 运维 服务器 云服务器 运维、

Centos8升级到Centos 8 stream教程。

百度搜索:蓝易云

Linux 运维 服务器 云服务器 ECS

率先布局 RWA 赛道,PoseiSwap 成为最具先进性的 DEX

BlockChain先知

Istio与Mcp Server服务器讲解与搭建演示

谐云

istio

一些有用的资料

Joseph295

代码随想录 Day13 - 栈与队列(下)

jjn0703

率先布局 RWA 赛道,PoseiSwap 成为最具先进性的 DEX

大瞿科技

机器学习洞察 | 分布式训练让机器学习更加快速准确

亚马逊云科技 (Amazon Web Services)

机器学习 分布式

六月更新 | MeetingOps:让有效协作与高效会议共同发生在云端

CODING DevOps

率先布局 RWA 赛道,PoseiSwap 成为最具先进性的 DEX

鳄鱼视界

2023-07-10:Kafka如何做到消息不丢失?

福大大架构师每日一题

福大大架构师每日一题

率先布局 RWA 赛道,PoseiSwap 成为最具先进性的 DEX

EOSdreamer111

数字税务时代的革新利器:低代码开发平台助力税务办公数字化大步迈进!

快乐非自愿限量之名

人工智能 低代码 数智化 税务云

神州数码:我们和阿里云是市场和技术的共同体

新云力量

云计算 阿里云 神州数码

架构师的核心工作:价值放大

高鹏

Java 深度思考 架构 架构师

AI写代码靠谱吗?

石云升

ChatGPT AI编码

业务系统技术债治理终极指南

高鹏

Java 架构

率先布局 RWA 赛道,PoseiSwap 成为最具先进性的 DEX

威廉META

【HDC.Cloud 2023】华为云区块链分论坛内容值得再读!

华为云PaaS服务小智

云计算 软件开发 华为云 华为开发者大会2023

率先布局 RWA 赛道,PoseiSwap 成为最具先进性的 DEX

股市老人

权衡矩阵-《敏捷实战-破解敏捷落地的60个难题》读后感

Bruce Talk

websocket和http有什么不同?以及websocket协议如何实现?

百度搜索:蓝易云

Linux 运维 HTTP websocket

七牛存储运维实践_CNUTCon_林天智_InfoQ精选文章