写点什么

仇应俊谈阿里云 OTS

  • 2012-11-18
  • 本文字数:643 字

    阅读完需:约 2 分钟

11 月 9 号的阿里云开发者大会上。来自与阿里的仇应俊分享了阿里云 OTS(开放结构化数据服务的技术实践),他首先分享了 OTS 的产生背景:

  1. 用户规模和应用所处理的数据呈现爆炸式增长;
  2. 服务的高可用性要求;
  3. 应用的数据库表结构会随着业务的增长而改变;

随后他又举了一个实例来说明传统数据库的局限:

用户数到达 3500 万的应用,图片记录数达到 10 万,每秒新增 3000 条记录,总数据量近百 TB。在这样的场景下,对于单机数据库,在规模处理时无能为力,最多支撑 1TB。静态表的分区、扩容也容易出现问题。

OTS 采用飞天的内核实现调度与底层通讯,在其上有结构化数据处理的引擎,应对用户的并发请求,并通过简介的 API 来供开发者调用。他指出了 OTS 在处理这些问题时的原则:

  1. 规模可伸缩性;数据会被水平分割成很多分区,自动调配到数据节点进行处理,当原有的数据分区不能满足需求以后自动进行再次的调配;
  2. 高可用性;针对硬件比如交换机之类的故障将会自动被侦测到,失效机器上的数据分区会被转移到其他的节点上;通过热升级的方式保证高可用性;
  3. 自动应对表结构变化。OTS 的数据模型对于属性列没有限制,可以实现动态增加;

数据安全一直都是一个敏感的话题,针对 OTS 的数据,他们目前会在几个层面上做保证:

  1. 数据会统一存储在底层分布式的文件系统,分布式文件系统会保证每个数据有多份的拷贝,当拷贝丢失或者损害的时候,系统会自动检测到会恢复。
  2. 每个数据在 OTS 里面都是隔离的,这样保证用户的数据是本身是安全可靠。

目前阿里的“冰火鸟”以及“云·OS”的用户存储空间都使用的 OTS。

2012-11-18 03:192939
用户头像

发布了 89 篇内容, 共 33.0 次阅读, 收获喜欢 4 次。

关注

评论

发布
暂无评论
发现更多内容

React的useLayoutEffect和useEffect执行时机有什么不同

beifeng1996

React

4天带你上手HarmonyOS ArkUI开发——《HarmonyOS ArkUI入门训练营之健康生活实战》

HarmonyOS开发者

HarmonyOS

贴吧低代码高性能规则引擎设计

百度Geek说

低代码 规则引擎 平台化 企业号 1 月 PK 榜

Rancher RFO 正式 GA

openEuler

Linux 开源 Kubernetes 操作系统 rancher

AIGC最近很火,给大家推荐一个已经有1000位开发者使用的中文aigc开源模型,包括ai画图、ai聊天

AIGC布道者

人工智能 机器学习 AI AIGC AI绘画

2023我的前端面试小结

loveX001

JavaScript

功能上新|一键归因分析,快速洞察指标波动原因

Kyligence

指标中台 归因分析

小心被坑死!如果你还在用 Zookeeper 做注册中心

风铃架构日知录

Java zookeeper 程序人生 后端 注册中心

深入理解JS作用域链与执行上下文

loveX001

JavaScript

前端一面常考react面试题

beifeng1996

React

JavaScript刷LeetCode拿offer-树的遍历

js2030code

JavaScript LeetCode

web前端技术应该怎么规划学习?

小谷哥

尚硅谷&腾讯云EMR实时数仓教程发布

小谷哥

国内首款支持gRPC+WebSocket调试的工具——Apipost

不想敲代码

Koordinator v1.1发布:负载感知与干扰检测采集

阿里巴巴云原生

阿里云 云原生 Koordinator

OpenHarmony系统使用gdb调试init

OpenHarmony开发者

openha

前端培训机构如何学习开发技术

小谷哥

深圳大数据培训机构怎么选

小谷哥

SPL 实现电力高频时序数据实时存储统计

石臻臻的杂货铺

SPL

一体化运维,降本增效!秒云助力海富通基金打造智能运维平台

MIAOYUN

运维 金融 智能运维 IT解决方案

JavaScript刷LeetCode拿offer-栈相关题目

js2030code

JavaScript LeetCode

【架构设计】你的应用该如何分层呢?

JAVA旭阳

Java 架构

用javascript分类刷leetcode13.单调栈(图文视频讲解)

js2030code

JavaScript LeetCode

2023我的前端面试小结

loveX001

JavaScript

ARM 算子性能优化上手指南

MegEngineBot

深度学习 开源 性能优化 MegEngine

如何通过C#/VB.NET将格式应用于 Word 中的字符

在下毛毛雨

C# .net word文档 字符格式

校招前端二面常考react面试题(边面边更)

beifeng1996

React

React循环DOM时为什么需要添加key

beifeng1996

React

云时代,最好用的MySQL客户端工具推荐

NineData

MySQL 数据库 GUI

经常会采坑的javascript原型应试题

loveX001

JavaScript

基于ERNIELayout&pdfplumber-UIE的多方案学术论文信息抽取

汀丶人工智能

nlp 信息抽取 2022年终总结 2023新展望

仇应俊谈阿里云OTS_服务革新_水羽哲_InfoQ精选文章