写点什么

物联网及电子交易的实时 BI 分析场景探讨

  • 2021-03-24
  • 本文字数:2009 字

    阅读完需:约 7 分钟

物联网及电子交易的实时BI分析场景探讨

在大数据时代,消费互联网和工业互联网每时每刻都在产生大量的实时流式数据,以 Flink、Spark Streaming 为代表的流数据处理系统将数据处理之后,通过 Kafka,MQTT 等通道分发给各种下游系统。在实际应用中,对于可连接流式数据的可视化平台的需求应运而生。本文将基于实时数据可视化软件 Altair Panopticon 与大家共同探讨物联网及电子交易的实时 BI 分析场景。

为什么需要实时流数据 BI 软件?

在电子交易、物(车)联网、工业制造、电信和能源等对实时性要求高以及需要事中分析的业务场景中,延迟的决策是代价高昂的。


Altair Panopticon™允许业务用户和工程师使用 UI 界面, 构建、修改和部署复杂的流式数据分析和可视化应用程序。用户可以连接到几乎任何数据源,包括实时流式数据,如 Kafka 和时序数据库。开发复杂的流数据处理流程,并设计可视化界面,从而在大量快速变化的数据上做出迅速和充分的决策。

1. 实时数据可视化软件 Altair Panopticon

Panopticon 是 Altair 公司的实时流数据及可视化商务智能(BI)分析平台,包括 Panopticon Visual Analytics 和 Panopticon Streams 两个主要模块。


其中,Panopticon Visual Analytics 是市场上唯一真正的实时数据可视化系统,Panopticon 作为基于流式数据的可视化方案,具有卓越的速度、灵活性和可扩展性,进一步简化了用户生成分析报表、仪表板的过程。


而 Panopticon Streams 是一个流数据处理引擎,支持用户在完全可视化的界面上构建复杂的流数据处理流程。

2. Panopticon 产品架构

Panopticon 可以直接与各种实时信息系统,包括 MQTT, Kafka, Solace, Rabbit MQ 等,以及时间序列数据存储,包括 Kx kbd+, OneTick, MemSQL, Vertica, SparkSQL 等集成。并这些数据的基础上,生成可视化分析报告。



3. 主要功能

① 实时数据分析:从直连实时数据开始,构建支持纳秒级别的实时数据分析,同时支持任何速度的回放数据流。支持的数据连接包括文件、数据库和流式数据源。



② 无代码开发:使用 UI 界面,通过点击和拖拽生成流数据处理和分析看板。快速响应不断变化的业务需求,降低风险和成本,并可以在几分钟内快速部署新的流程和仪表板。分析人员可以在 Panopticon 中快速、直观地分析时间序列和实时数据,从而能够在几秒钟内发现操作环境中的异常情况。



③ 构建基于 Kafka 的流数据处理程序:Panopticon Streams 流处理引擎基于 Apache Kafka 构建,支持实时数据的聚合、计算和警报。用户无需编写任何 Java、Scala 或者 KSQL 代码就可以实现 Kafka 数据流处理功能。



  • 流式数据准备:将多个实时流与历史数据源相结合

  • 计算引擎:根据业务需求计算性能指标

  • 聚合驱动程序:根据需要组合数据

  • 报警引擎:根据用户定义的阈值突出显示异常情况

  • 集成了 Confluent 企业级控制台

  • 扩展对物联网环境的支持,包括制造、能源、公用事业和运输物流   

典型业务应用场景

1. F1 赛车遥测数据的实时可视化和数据洞察,提升赛车成绩

为了具备更强的竞赛能力,每换到一条赛道或每次遇到天气变化时,都需要重新调校 F1 赛车。有时车队会通过遥测系统反馈的信息、以往比赛取得的经验、以往赛季中记录的数据和计算机模拟的结果对赛车进行有限的调校。


在下方视频中,我们将会介绍如何无需代码使用 Altair Panopticon 实时可视化 F1 赛车的遥测数据,并从数据中获得洞察,从而进一步优化提高性能。

2. 智能电表实时监控与分析

目前的电力公司借助于物联网技术,可以实现对管辖区域内的用电情况实时监控与分析,包括峰谷时间的用电量、用电峰值异常变化、分析历史数据,以及预判供电负荷等,这些目标都需要借助于当前的智能电表数据采集和传输功能来实现。

3. 实时监控市场风险

风险分析师使用这种可视化分析来监控公司各交易层级在指定时间内的承受风险。他们可以设置警报,以在风险超过预定阈值时通知他们,并使用视觉和过滤器在几秒钟内确定任何异常的原因。

4. 实时监控物流车队

使车队运营商能够分析来自传感器和其他来源的关键数据流。这种对车辆和驾驶员性能的实时可视性有助于降低运营成本、保护人员和资产并提高生产率。

分析员可以实时显示所有资产当前位置的地图,检查路线偏差,对任何一组参数设置程序警报,并比较驾驶员的行为。

  • 用户根据自己的业务需要,自定义监控仪表板

比如:驾驶员状态列表,车辆地理位置信息,时间与距离的散点图来查看驾驶员的异常值和平均值等。



  • 回看历史,了解驾驶员的行驶情况,并与其他人或历史数据比较,优化行驶路线等。


5. 实时交易,成本分析与损益统计

此看板旨在使交易员,量化和销售人员能够监视最佳执行情况,并实时分析交易活动的损益以及交易成本。这使他们能够在交易日内立即响应市场事件以及对客户订单流执行和公司获利能力的威胁。



作者简介

Altair 数据分析团队致力于打造企业级数据产品及解决方案,包括数据清洗、数据处理、数据建模、实时数据可视化等多方面业务场景,拥有国内外丰富行业经验,如金融、零售、制造业等等。


本文转载自:DataFunTalk(ID:dataFunTalk)

原文链接:物联网及电子交易的实时BI分析场景探讨

2021-03-24 14:002040

评论

发布
暂无评论
发现更多内容

完全自动驾驶车辆何时才能成为现实

数据堂

面向对象设计的逆向建模方法和开源工具

高鹏

Java 开源 架构 DDD 架构设计

2024深圳电子展,中国国际电子信息博览会(CITE电博会)

AIOTE智博会

电子展

Scrum看板工具在项目管理中的作用

顿顿顿

敏捷工具 scrum工具 scrum敏捷工具

机遇与挑战——超级自动化产品的国产化替代已成为大势所趋

九科Ninetech

接口测试|Fiddler界面工具栏介绍(三)

霍格沃兹测试开发学社

【领域驱动设计专题】一文带领你透视DDD领域驱动模型的本质和设计原理分析指南(通用语言体系)

码界西柚

领域驱动设计 DDD 领域驱动设计思想 领域驱动模型

es笔记一之es安装与介绍

Hunter熊

elasticsearch Kibana 安装Kibana

什么是区块链?

TiAmo

区块链 去中心化 6 月 优质更文活动

解决QT QGraphicsView提升到QChartView报错的问题

芯动大师

浅析 Jetty 中的线程优化思路

vivo互联网技术

jetty EatWhatYouKill 线程策略

接口测试|Fiddler抓包设置及证书配置

霍格沃兹测试开发学社

强化学习从基础到进阶-案例与实践[6]:演员-评论员算法(advantage actor-critic,A2C),异步A2C、与生成对抗网络的联系等详解

汀丶人工智能

人工智能 深度学习 强化学习 6 月 优质更文活动 A3C算法

最佳实践|亚马逊可持续发展的架构模型

亚马逊云科技 (Amazon Web Services)

JavaScript

探索支付宝云开发,开启一段100ms的神奇旅程!

TRaaS

支付宝小程序 云开发

唯一入选中国厂商!灵雀云获Gartner® 首份《DevOps平台魔力象限报告》“荣誉提及”

York

容器 DevOps 云原生 Gartner 平台工程

复旦大学智能计算平台与世界科学智能大赛启动仪式

新云力量

智能 计算 复旦大学

STC89C52+DHT20设计的环境温湿度检测仪

DS小龙哥

6 月 优质更文活动

接口测试|Fiddler设置手机抓包

霍格沃兹测试开发学社

如何通过场景规划帮助企业实现全面预算管理?

智达方通

智达方通 全面预算管理 财务规划和分析 财务规划与预测 全面预算管理系统

SQL 优化(一):慎用 SQL 函数

hungxy

Java MySQL 后端

接口测试|Fiddler会话栏中添加IP列

霍格沃兹测试开发学社

Selenium 中并行测试的重要性

FunTester

强化学习从基础到进阶-常见问题和面试必知必答[6]:演员-评论员算法(advantage actor-critic,A2C),异步A2C、与生成对抗网络的联系等详解

汀丶人工智能

人工智能 深度学习 强化学习 6 月 优质更文活动

教学实训模块升级,助力应用型数据科学人才培养|ModelWhale 版本更新

ModelWhale

数据分析 大模型 教学实训 在线编程 云课堂

接口测试|Fiddler弱网测试

霍格沃兹测试开发学社

何时使用Kafka而不是RabbitMQ

越长大越悲伤

Kafk Rabbit MQ 消息列队

StarRocks & Friends 上海站活动回顾(含 PPT 下载链接)

StarRocks

数据库 OLAP MPP 大数据 开源

零基础自学:2023年的今天,请谨慎进入网络安全行业

网络安全学海

黑客 网络安全 信息安全 计算机 渗透测试

小程序容器技术在移动警务中的业务价值

FinFish

小程序容器 移动警务 警务app

物联网及电子交易的实时BI分析场景探讨_大数据_DataFunTalk_InfoQ精选文章