写点什么

物联网及电子交易的实时 BI 分析场景探讨

  • 2021-03-24
  • 本文字数:2009 字

    阅读完需:约 7 分钟

物联网及电子交易的实时BI分析场景探讨

在大数据时代,消费互联网和工业互联网每时每刻都在产生大量的实时流式数据,以 Flink、Spark Streaming 为代表的流数据处理系统将数据处理之后,通过 Kafka,MQTT 等通道分发给各种下游系统。在实际应用中,对于可连接流式数据的可视化平台的需求应运而生。本文将基于实时数据可视化软件 Altair Panopticon 与大家共同探讨物联网及电子交易的实时 BI 分析场景。

为什么需要实时流数据 BI 软件?

在电子交易、物(车)联网、工业制造、电信和能源等对实时性要求高以及需要事中分析的业务场景中,延迟的决策是代价高昂的。


Altair Panopticon™允许业务用户和工程师使用 UI 界面, 构建、修改和部署复杂的流式数据分析和可视化应用程序。用户可以连接到几乎任何数据源,包括实时流式数据,如 Kafka 和时序数据库。开发复杂的流数据处理流程,并设计可视化界面,从而在大量快速变化的数据上做出迅速和充分的决策。

1. 实时数据可视化软件 Altair Panopticon

Panopticon 是 Altair 公司的实时流数据及可视化商务智能(BI)分析平台,包括 Panopticon Visual Analytics 和 Panopticon Streams 两个主要模块。


其中,Panopticon Visual Analytics 是市场上唯一真正的实时数据可视化系统,Panopticon 作为基于流式数据的可视化方案,具有卓越的速度、灵活性和可扩展性,进一步简化了用户生成分析报表、仪表板的过程。


而 Panopticon Streams 是一个流数据处理引擎,支持用户在完全可视化的界面上构建复杂的流数据处理流程。

2. Panopticon 产品架构

Panopticon 可以直接与各种实时信息系统,包括 MQTT, Kafka, Solace, Rabbit MQ 等,以及时间序列数据存储,包括 Kx kbd+, OneTick, MemSQL, Vertica, SparkSQL 等集成。并这些数据的基础上,生成可视化分析报告。



3. 主要功能

① 实时数据分析:从直连实时数据开始,构建支持纳秒级别的实时数据分析,同时支持任何速度的回放数据流。支持的数据连接包括文件、数据库和流式数据源。



② 无代码开发:使用 UI 界面,通过点击和拖拽生成流数据处理和分析看板。快速响应不断变化的业务需求,降低风险和成本,并可以在几分钟内快速部署新的流程和仪表板。分析人员可以在 Panopticon 中快速、直观地分析时间序列和实时数据,从而能够在几秒钟内发现操作环境中的异常情况。



③ 构建基于 Kafka 的流数据处理程序:Panopticon Streams 流处理引擎基于 Apache Kafka 构建,支持实时数据的聚合、计算和警报。用户无需编写任何 Java、Scala 或者 KSQL 代码就可以实现 Kafka 数据流处理功能。



  • 流式数据准备:将多个实时流与历史数据源相结合

  • 计算引擎:根据业务需求计算性能指标

  • 聚合驱动程序:根据需要组合数据

  • 报警引擎:根据用户定义的阈值突出显示异常情况

  • 集成了 Confluent 企业级控制台

  • 扩展对物联网环境的支持,包括制造、能源、公用事业和运输物流   

典型业务应用场景

1. F1 赛车遥测数据的实时可视化和数据洞察,提升赛车成绩

为了具备更强的竞赛能力,每换到一条赛道或每次遇到天气变化时,都需要重新调校 F1 赛车。有时车队会通过遥测系统反馈的信息、以往比赛取得的经验、以往赛季中记录的数据和计算机模拟的结果对赛车进行有限的调校。


在下方视频中,我们将会介绍如何无需代码使用 Altair Panopticon 实时可视化 F1 赛车的遥测数据,并从数据中获得洞察,从而进一步优化提高性能。

2. 智能电表实时监控与分析

目前的电力公司借助于物联网技术,可以实现对管辖区域内的用电情况实时监控与分析,包括峰谷时间的用电量、用电峰值异常变化、分析历史数据,以及预判供电负荷等,这些目标都需要借助于当前的智能电表数据采集和传输功能来实现。

3. 实时监控市场风险

风险分析师使用这种可视化分析来监控公司各交易层级在指定时间内的承受风险。他们可以设置警报,以在风险超过预定阈值时通知他们,并使用视觉和过滤器在几秒钟内确定任何异常的原因。

4. 实时监控物流车队

使车队运营商能够分析来自传感器和其他来源的关键数据流。这种对车辆和驾驶员性能的实时可视性有助于降低运营成本、保护人员和资产并提高生产率。

分析员可以实时显示所有资产当前位置的地图,检查路线偏差,对任何一组参数设置程序警报,并比较驾驶员的行为。

  • 用户根据自己的业务需要,自定义监控仪表板

比如:驾驶员状态列表,车辆地理位置信息,时间与距离的散点图来查看驾驶员的异常值和平均值等。



  • 回看历史,了解驾驶员的行驶情况,并与其他人或历史数据比较,优化行驶路线等。


5. 实时交易,成本分析与损益统计

此看板旨在使交易员,量化和销售人员能够监视最佳执行情况,并实时分析交易活动的损益以及交易成本。这使他们能够在交易日内立即响应市场事件以及对客户订单流执行和公司获利能力的威胁。



作者简介

Altair 数据分析团队致力于打造企业级数据产品及解决方案,包括数据清洗、数据处理、数据建模、实时数据可视化等多方面业务场景,拥有国内外丰富行业经验,如金融、零售、制造业等等。


本文转载自:DataFunTalk(ID:dataFunTalk)

原文链接:物联网及电子交易的实时BI分析场景探讨

2021-03-24 14:001999

评论

发布
暂无评论
发现更多内容

java高级用法之:在JNA中使用类型映射

程序那些事

Java 程序那些事 3月月更 JNA

【ELT.ZIP】OpenHarmony啃论文俱乐部——轻翻那些永垂不朽的诗篇

ELT.ZIP

OpenHarmony 数据压缩 ELT.ZIP

如何建立高效的质量保障机制

老张

软件测试 质量保障 交付能力

【研讨会报名截止最后一天】全程参会,还有惊喜奖品等你拿!

龙智—DevSecOps解决方案

CI/CD 在线研讨会

React Router 6 (React路由) 最详细教程

蒋川

React react rout

Video.js 使用教程 - 手把手教你基于 Vue 搭建 HTML 5 视频播放器

蒋川

Vue video.js

JavaScript 引擎是如何实现 async/await 的

CRMEB

Linux之time命令

入门小站

Linux

在线HTML压缩工具

入门小站

工具

[Day2]-[回溯] N皇后问题

方勇(gopher)

LeetCode 动态规划 数据结构算法

什么是404页面?

源字节1号

404

智能家居开放平台技术建设新思路

Speedoooo

物联网 智慧社区 智慧家居 智能终端 应用平台

个全中文注释的迷你Spring!

程序员阿杜

Java spring springboot

分布式事务详解:分段提交与最终一致性

分布式事务 可靠消息最终一致 TCC 构架 最终一致性

阿里巴巴代码规约检测&Java 代码规约扫描

阿里云云效

阿里巴巴 阿里云 代码扫描 #java 代码规约检测

Hoo虎符研究院|区块链简报 20220328期

区块链前沿News

虎符 Hoo 虎符交易所

微信业务架构图&学生管理系统架构设计

高山觅流水

架构实战营 「架构实战营」

解决报错:SSL certificate problem: certificate has expired

liuzhen007

git

TDesign 更新周报(2022年3月第4周)

TDesign

直播预告|FeatureStore Meetup V2

星策开源社区

人工智能 大数据 开源 特征平台 MLOps

面试题笔记

Clarke

一文读懂并发与并行

潘大壮

并发编程 多线程 并行 并发’ #java

Petal Maps的美学钥匙,解锁AITO问界M5的硬核浪漫

脑极体

在线常用crontab表达式大全验证解析

入门小站

工具

赋能创新,深开鸿重磅发布面向金融行业KaihongOS发行版

科技汇

企业如何实现在线客服功能?

小炮

在线客服

车联网数据安全新挑战的技术应对方案

Speedoooo

车联网 物联网 数据安全 容器安全

性能测试中的LongAdder

FunTester

性能测试 FunTester

架构实战营6&微信业务架构&学生管理系统方案

唐诗宋词

架构实战营-第6期 模块一课后作业

乐邦

「架构实战营」

DiDi Kafka-Manager安装和简单使用

云原生

kafka spring kafka manager

物联网及电子交易的实时BI分析场景探讨_大数据_DataFunTalk_InfoQ精选文章