InfoQ Geekathon 大模型技术应用创新大赛 了解详情
写点什么

Nikita Ivanov 谈内存计算平台 Ignite

  • 2017-04-27
  • 本文字数:1359 字

    阅读完需:约 4 分钟

Apache Ignite 是一个内存计算平台,支持事务、键值存储、流和复杂事件处理(CEP)。Ignite 最早由 GridGain 于 2014 年下半年开源,并成为Apache 孵化器项目。

InfoQ 访问了 GridGain 的 CTO Nikita Ivanov,了解更多有关 Ignite 的内容。

InfoQ:Ignite 提供了很多基于内存的特性,从键值存储到流式处理。它主要的使用场景有哪些呢?

Nikita Ivanov: Ignite 主要用于高性能的计算任务,特别是金融领域的服务和 Fintech 公司。对于这些公司来说,收益与应用程序的性能和伸缩性有直接的关系。他们直接从高性能、低延迟和伸缩性中获得价值。Ignite 为这些公司的很多应用程序提供了支持,包括自动化交易、实时合规、价差赌注、欺诈检测、回溯测试、数据分析,等等。

Ignite 也经常被集成到第三方的软件系统或 SaaS 解决方案。增长较快的两个垂直领域分别是 SaaS 和 IoT 供应商,为了提供最优化的用户体验,或者满足 Web 应用程序的 SLA 需求和物联网应用程序的数据需求,他们的业务模型要求很高的性能和伸缩性。

InfoQ:Ignite 如何与其他流行的内存计算框架竞争,比如 Apache Spark?如何将它与 Alluxio 进行比较?

Ivanov: Ignite 可以在以下几个方面与 Spark 展开竞争。Spark 是一个只读的系统,不支持事务,主要用于数据分析和机器学习。Ignite 是一个高性能的支持事务的系统。如果将两者用在一起,Ignite 可以作为 Spark RDD 的内存存储层,在 Spark 的作业之间共享状态。另外,Ignite 对 Spark 存储在内存里的数据进行了索引。运行在 Spark 上的 SQL 查询会进行全局扫描,而 Ignite 的索引可以提升查询性能。

至于 Alluxio,我们没见过有人将它与其他框架进行对比,所以很难说。

InfoQ:2016 年 12 月, Netflix 开源了缓存框架 Hollow ,它支持在客户端嵌入缓存,以便减小请求延迟和对 RPC 的依赖。Ignite 里可以做到类似的事情吗?

Ivanov:虽然我们也没看到有关 Hollow 的评测,不过我对它的特性比较熟悉,Hollow 提供的所有特性 Ignite 也提供了。

InfoQ:Ignite 的一个很重要的特性是它提供了事务和一致性保证。你能解释一下 Ignite 的设计和 CAP 理论之间的关系吗?

Ivanov:我们相信,只支持 CAP 的产品是无法与 Ignite 相提并论的。如果只支持最终一致性(EC)事务,那就无法做到完整一致性。你可以改进 EC,让它变得更快,但仍然无法得到完整一致性。所以,如果你的系统需要事务,比如转账或账号管理,像 Apache Cassandra MongoDB Apache CouchDB 这些 EC 解决方案就不能满足需求,因为它们不提供完整的一致性。

Ignite 提供了成熟的两阶段提交事务来支持完整一致性,与 Oracle 的别无二致。不过用户也可以通过配置禁用两阶段提交,从而获得 EC 的性能。Ignite 同时提供了两种方案,可以配置完整的事务,也可以用部分的一致性换取性能。根据我们客户的反馈,这种灵活性是 GridGain 的一个重要的优势。

InfoQ:Ignite 是否支持适合用于数据分析的基于列的内存格式?

Ivanov: Ignite 不支持基于列的格式。

InfoQ:Ignite 的路线图是什么?

Ivanov: Ignite 的路线图中包含了两个非常重要的方面。首先,为了满足整个数据库无法放进 RAM 的使用场景,需要极大地改进基于磁盘的存储。其次,改进对机器学习和深度学习的支持。这些特性将在未来的几个主版本里发布。

查看英文原文: Nikita Ivanov on Apache Ignite In-Memory Computing Platform

活动推荐:

2023年9月3-5日,「QCon全球软件开发大会·北京站」 将在北京•富力万丽酒店举办。此次大会以「启航·AIGC软件工程变革」为主题,策划了大前端融合提效、大模型应用落地、面向 AI 的存储、AIGC 浪潮下的研发效能提升、LLMOps、异构算力、微服务架构治理、业务安全技术、构建未来软件的编程语言、FinOps 等近30个精彩专题。咨询购票可联系票务经理 18514549229(微信同手机号)。

2017-04-27 19:001886
用户头像

发布了 321 篇内容, 共 129.0 次阅读, 收获喜欢 139 次。

关注

评论

发布
暂无评论
发现更多内容

【网络安全】网络安全的重要性你知道吗?

行云管家

网络安全

数字化原住民|ONES 人物

万事ONES

软件 招聘 软件工程师

从 SVN 迁移到极狐GitLab

极狐GitLab

svn 迁移 极狐GitLab

网络安全:绕过MSF的一次渗透测试

网络安全学海

黑客 网络安全 信息安全 渗透测试 安全漏洞

Kubernetes API规范:为optional的字段使用pointer

工程师薛昭君

API Kubernetes 集群

敏捷实践|好的用户故事怎么写?

LigaAI

用户故事 敏捷实践

电脑就是我的安全感|ONES 人物

万事ONES

招聘 软件工程师

多场景推进 服务网格在联通的落地实践(下)

百度大脑

科幻变现实:喷下即疗愈,生物3D打印绘就生命密码图

脑极体

如何进行高效的版本管理,版本管理的方法

阿里云云效

云计算 阿里云 项目管理 云原生 版本管理

Centos7安装Nginx

云原生

nginx centos 部署

收藏很久的资源整合网站,一个网站一个世界

小炮

TDesign 更新周报(2022年3月第3周)

TDesign

Git 如何回退代码

秋天

计算机编码规则之:Base64编码

程序那些事

Java base64 nio 程序那些事 3月月更

centos7.6安装MySQL5.7采坑指南

云原生

MySQL 数据库 sql centos

使用 ABAP 开发的一个基于 Web Socket 的小工具,能提高程序员日常工作效率

Jerry Wang

自动化 前端开发 websocket 程序员进阶 3月月更

恒源云(GpuShare)_MaskFormer:语义分割可以不全是像素级分类

恒源云

语义分割 像素分割 MaskFormer

运维审计系统是堡垒机么?跟堡垒机有啥区别?

行云管家

运维 堡垒机 运维审计系统

深入浅出事务的本质,附 OceanBase 事务解析14问!

OceanBase 数据库

oceanbase OceanBase 社区版

Python迎来31岁生日,蝉联年度编程语言排行榜冠军

Python猫

Python

一文搞定 Flutter 底部弹窗实现

岛上码农

flutter 跨平台 ios开发 Android开发 3月月更

在线JSON转HTML,TABLE表格工具

入门小站

工具

什么技术,让浩鲸科技拿下中国移动大奖?

鲸品堂

中国移动

743 网络延迟时间

好吃不贵

在线HTML压缩格式化工具

入门小站

工具

母婴后浪品牌频出,各个细分市场有哪些发展潜力?

易观分析

母婴

“StarRocks 极客营” 重磅来袭,和技术大牛一起推开数据库梦想之门!

StarRocks

数据库 大数据 StarRocks

小程序容器技术,App热更新与敏捷开发新方案

Speedoooo

敏捷开发 APP开发 热更新 小程序容器 动态更新

一周热点回顾|虎符交易所上线多链合一;俄央行称加强监控加密资产等P2P交易

区块链前沿News

区块链 虎符交易所

春分耕种时,AI“现身”田间地头

百度大脑

  • 扫码添加小助手
    领取最新资料包
Nikita Ivanov谈内存计算平台Ignite_架构_Alexandre Rodrigues_InfoQ精选文章