QCon北京「鸿蒙专场」火热来袭!即刻报名,与创新同行~ 了解详情
写点什么

仇应俊谈阿里云 OTS

  • 2012-11-18
  • 本文字数:643 字

    阅读完需:约 2 分钟

11 月 9 号的阿里云开发者大会上。来自与阿里的仇应俊分享了阿里云 OTS(开放结构化数据服务的技术实践),他首先分享了 OTS 的产生背景:

  1. 用户规模和应用所处理的数据呈现爆炸式增长;
  2. 服务的高可用性要求;
  3. 应用的数据库表结构会随着业务的增长而改变;

随后他又举了一个实例来说明传统数据库的局限:

用户数到达 3500 万的应用,图片记录数达到 10 万,每秒新增 3000 条记录,总数据量近百 TB。在这样的场景下,对于单机数据库,在规模处理时无能为力,最多支撑 1TB。静态表的分区、扩容也容易出现问题。

OTS 采用飞天的内核实现调度与底层通讯,在其上有结构化数据处理的引擎,应对用户的并发请求,并通过简介的 API 来供开发者调用。他指出了 OTS 在处理这些问题时的原则:

  1. 规模可伸缩性;数据会被水平分割成很多分区,自动调配到数据节点进行处理,当原有的数据分区不能满足需求以后自动进行再次的调配;
  2. 高可用性;针对硬件比如交换机之类的故障将会自动被侦测到,失效机器上的数据分区会被转移到其他的节点上;通过热升级的方式保证高可用性;
  3. 自动应对表结构变化。OTS 的数据模型对于属性列没有限制,可以实现动态增加;

数据安全一直都是一个敏感的话题,针对 OTS 的数据,他们目前会在几个层面上做保证:

  1. 数据会统一存储在底层分布式的文件系统,分布式文件系统会保证每个数据有多份的拷贝,当拷贝丢失或者损害的时候,系统会自动检测到会恢复。
  2. 每个数据在 OTS 里面都是隔离的,这样保证用户的数据是本身是安全可靠。

目前阿里的“冰火鸟”以及“云·OS”的用户存储空间都使用的 OTS。

2012-11-18 03:192981
用户头像

发布了 89 篇内容, 共 33.4 次阅读, 收获喜欢 4 次。

关注

评论

发布
暂无评论
发现更多内容

JavaScript基础篇运算符与表达式

你好bk

JavaScript html 大前端 html/css

开源项目——FLutter开发录音APP

思想者杰克

你管这破玩意叫锁

中间件兴趣圈

高并发 java; 11月日更

王者荣耀商城异地多活架构

白开水又一杯

#架构实战营

12年高级工程师的“飞升之路”,腾讯大牛教你自己写Android第三方库

android 程序员 移动开发

模块7作业

4anonymous

王者荣耀商城异地多活架构设计 - 模块 7

刘琦Logan

软件工程师的专业素养解读(二)

卢卡多多

职业素养 软件IT专业 11月日更

算法,从今天开始

ES_her0

11月日更

解决报错:Couldn't create temporary file /tmp/apt.conf.IRqbCz

liuzhen007

11月日更

学生管理系统架构设计文档

deng

架构实战营

架构实战营 -毕业总结

思梦乐

Java 主函数 main 中的关键字 static

HoneyMoose

模块七作业

potti

04 K8S之生态系统

穿过生命散发芬芳

k8s 11月日更

极客时间架构实战营模块7作业

jjn0703

架构实战营

架构实战营 - 模块七作业

Alex.Wu

10天用Flutter撸了个高仿携程App(附小技巧积累总结),小红书安卓面试题目

android 程序员 移动开发

开源项目——5种技术编写的7个demo工程

思想者杰克

Redis利用漏洞

网络安全学海

网络安全 信息安全 渗透测试 WEB安全 安全漏洞

0 基础架构入门 - 7(王者荣耀商城异地多活架构设计)

felix

架构实战营 0 基础架构入门

模块七:王者荣耀商城异地多活架构设计(作业)

紫云

linux系列之: 你知道查看文件空间的两种方法吗?

程序那些事

Linux 操作系统 程序那些事 11月日更

tar 备份linux系统

入门小站

Linux

小谈音视频质量检测

声网

人工智能 音视频

开源项目——FLutter/iOS/Android编写的三个计算器APP

思想者杰克

端开发技术——解密Flutter响应式布局.md

思想者杰克

架构实现训练营|第7课|作业

Frode

架构实战营

10道阿里Android岗必问题摆这儿了,你爱刷不刷!,透彻解析

android 程序员 移动开发

端开发技术——FLutter开发即时通讯

思想者杰克

在线文本转二进制工具

入门小站

工具

仇应俊谈阿里云OTS_服务革新_水羽哲_InfoQ精选文章