实时计算

关注
收录了实时计算频道下的 2385 篇内容
关注实时计算技术的发展趋势和一线技术实践
  • 全部
  • 文章
  • 视频
  • 话题
  • 电子书
拐点已至? Kafka 如何破局
拐点已至? Kafka 如何破局

Kafka 项目将走向何方?其生态系统将如何演变,Kafka 在快速发展的 AI 领域中将扮演什么角色?

被黑猴子虐爆了! 索尼 8 年耗资 20 亿打造的巨作,14 天速死,成业内最大笑话!
被黑猴子虐爆了! 索尼 8 年耗资 20 亿打造的巨作,14 天速死,成业内最大笑话!

这次事件无疑会成为业内的警示案例,提醒开发者们在 2024 年如何避免打造出一款失败之作。

Netflix 开源下一代数据工作流引擎 Maestro
Netflix 开源下一代数据工作流引擎 Maestro

Maestro 为 Netflix 的数据科学家与需要大量信息的的业务线经理提供了工作流即服务。

隐私计算被推向新高度!信通院牵头编写《隐私计算产品通用安全分级白皮书》,现已发布
隐私计算被推向新高度!信通院牵头编写《隐私计算产品通用安全分级白皮书》,现已发布

隐私计算技术路线众多,且不断有新的技术涌现,应用场景方难以评估不同技术的安全程度。

通往 AGI 之路,数据系统还需挑战哪些物理极限?
通往 AGI 之路,数据系统还需挑战哪些物理极限?

分布式 Data Warebase 是性能、正确性、实时性这三个业务核心需求的必然推论,它不是一个发明,而是一个发现。

数据平台竞技场 2024:AI 或成为必杀技,但面临三个致命挑战
数据平台竞技场 2024:AI 或成为必杀技,但面临三个致命挑战

以 Hadoop 为基础的大数据体系架构已逐步陈旧,新一代的分析平台以及更发挥 AI 能力的数据平台架构仍有非常多的疑问还没有得到解答。

苹果开源一个可提升Apache Spark向量处理速度的插件
苹果开源一个可提升 Apache Spark 向量处理速度的插件

苹果公司发布了一个开源插件,可以帮助 Apache Spark 更有效地执行向量搜索。

Flink十周年专访莫问:存算分离2.0架构的探索与展望
Flink 十周年专访莫问:存算分离 2.0 架构的探索与展望

Flink 的进展和未来规划

Apache Pinot 1.0发布,提供实时的分布式OLAP数据存储
Apache Pinot 1.0 发布,提供实时的分布式 OLAP 数据存储

Apache Pinot 是一个使用 Java 编写的开源列式分布式数据存储系统。

作业帮实时计算平台高可用实践
作业帮实时计算平台高可用实践

业务对实时计算的需求越来越多,对实时任务的稳定性要求也越来越高。

作业帮基于 DolphinScheduler 的数据开发平台实践
作业帮基于 DolphinScheduler 的数据开发平台实践

本文分享了作业帮对数据开发平台的一些思考。

民营银行生存法则“唯快不破”,华瑞银行风险特征计算平台如何做到实时响应
民营银行生存法则“唯快不破”,华瑞银行风险特征计算平台如何做到实时响应

“下一个要攻破的问题就一个字——快。”

四次迭代,视源股份(CVTE)大规模实时流计算应用历程
四次迭代,视源股份(CVTE)大规模实时流计算应用历程

流计算技术探索中根据应用场景和需求变化,技术也迭代了四次,最终期望在技术演进走在业务前面,通过技术创新改变业务。

HubSpot 使用 Apache Kafka 泳道实现工作流操作的实时处理
HubSpot 使用 Apache Kafka 泳道实现工作流操作的实时处理

HubSpot 采用在多个 Kafka 主题(称为泳道)上为同一生产者路由消息的方式,避免了消费者群组滞后的积压,并且能够优先处理实时流量。通过自动和手动相结合的方式探测流量峰值,该公司能够确保大多数消费者的工作流能够在无延迟的情况下执行。

上云还是下云:章文嵩博士解读真正的云原生 Kafka 十倍降本方案!
上云还是下云:章文嵩博士解读真正的云原生 Kafka 十倍降本方案!

本文从技术架构的角度,来揭秘 AutoMQ 为 Kafka 量身打造的云原生十倍降本方案。

ClickHouse彪悍发言:云数仓死贵死贵的,Snowflake这种就不应该成为当前主流!
ClickHouse 彪悍发言:云数仓死贵死贵的,Snowflake 这种就不应该成为当前主流!

ClickHouse 版本的“云数据库是不是杀猪盘”?

上海华瑞银行风控数据团队负责人丁清华确认出席 FCon,分享上海华瑞银行风险特征计算平台演进路线
上海华瑞银行风控数据团队负责人丁清华确认出席 FCon,分享上海华瑞银行风险特征计算平台演进路线

随着大数据计算技术的成熟,上海华瑞银行建设了风险特征计算平台,晚上了平台功能,将产品打造成全行的特征计算平台,并将功能同风险策略、模型等日常场景紧密结合。

是时候基于云重新设计 Kafka 了!AutoMQ 如何实现 Kafka 十倍的降本增效
是时候基于云重新设计 Kafka 了!AutoMQ 如何实现 Kafka 十倍的降本增效

AutoMQ 研发团队积累了十多年的消息队列生产运维经验。

兴业银行大数据基础平台负责人刘家闰确认出席FCon,分享兴业银行实时数据服务实践
兴业银行大数据基础平台负责人刘家闰确认出席 FCon,分享兴业银行实时数据服务实践

兴业银行实时数据服务技术不断发展,离线计算和实时计算如何整合、批量数据和流式数据如何作为一个整体提供服务,成为一个重要课题。

存算分离实践:构建轻量、云中立的大数据平台
存算分离实践:构建轻量、云中立的大数据平台

值得一提的是,多点团队利用 JuiceFS 社区版实现了与 Ranger 组件进行权限的对接。

LinkedIn开源Iris消息处理器,速度比旧系统快86.6倍
LinkedIn 开源 Iris 消息处理器,速度比旧系统快 86.6 倍

LinkedIn 开源 Iris 消息处理器,相比之前的处理器,在平均负载下速度快 4.6 倍,在高负载下快 86.6 倍。

中邮消费金融李远鑫:如何用数字化搞定获客成本和用户运营难题?
中邮消费金融李远鑫:如何用数字化搞定获客成本和用户运营难题?

消费金融公司的整体数字化进程比其它金融机构要快得多。

信也科技副总裁陈磊:数据应用与数据合规如何兼顾?
信也科技副总裁陈磊:数据应用与数据合规如何兼顾?

如何处理好金融数智化过程中的数据「养料」?

中国工商银行大数据和人工智能实验室 / 部门经理袁一确认出席 FCon ,分享工商银行大数据平台助力全行数字化转型之路
中国工商银行大数据和人工智能实验室 / 部门经理袁一确认出席 FCon ,分享工商银行大数据平台助力全行数字化转型之路

工商银行大数据平台在近几年数字化转型过程中,对大数据平台的使用越来越重。

FCon联席主席吴震操:金融数据治理既是技术问题也是管理问题
FCon 联席主席吴震操:金融数据治理既是技术问题也是管理问题

金融行业数字化转型的挑战主要表现在业务复杂、数据异构,强监管,和业务传统带来的惯性。

用 Rust 编写核心组件!独家揭露阿里云开源 GraphScope 如何成为全球最快图计算引擎
用 Rust 编写核心组件!独家揭露阿里云开源 GraphScope 如何成为全球最快图计算引擎

技术详解阿里云开源图计算引擎 GraphScope 如何打破世界纪录

联想戴炜:以三种交付方式全面支持三类算力场景的混合计算需求
联想戴炜:以三种交付方式全面支持三类算力场景的混合计算需求

力赋高质量发展”为主题的 2023 中国算力(基础设施)大会在银川召开。作为我国算力领域、数字经济方面的标志性大会,会议聚焦算力前沿技术领域,展示算力融合应用成果,推动算力产业加速发展。

字节跳动的多云云原生实践之路
字节跳动的多云云原生实践之路

只有构建好适合自身的分布式云架构,才能真正做到“用好云”。

    大模型与 RAG 技术在教育领域的应用探索
    大模型与 RAG 技术在教育领域的应用探索

    林辉 | 网易有道 技术总监

    立即下载
    二手电商前端团队价值之路

    井铎铎 | 转转公司 研发中心 技术总监

    立即下载
    下一代 RAG 引擎的技术挑战与实现

    张颖峰 | 英飞流 CEO

    立即下载