写点什么

物联网及电子交易的实时 BI 分析场景探讨

  • 2021-03-24
  • 本文字数:2009 字

    阅读完需:约 7 分钟

物联网及电子交易的实时BI分析场景探讨

在大数据时代,消费互联网和工业互联网每时每刻都在产生大量的实时流式数据,以 Flink、Spark Streaming 为代表的流数据处理系统将数据处理之后,通过 Kafka,MQTT 等通道分发给各种下游系统。在实际应用中,对于可连接流式数据的可视化平台的需求应运而生。本文将基于实时数据可视化软件 Altair Panopticon 与大家共同探讨物联网及电子交易的实时 BI 分析场景。

为什么需要实时流数据 BI 软件?

在电子交易、物(车)联网、工业制造、电信和能源等对实时性要求高以及需要事中分析的业务场景中,延迟的决策是代价高昂的。


Altair Panopticon™允许业务用户和工程师使用 UI 界面, 构建、修改和部署复杂的流式数据分析和可视化应用程序。用户可以连接到几乎任何数据源,包括实时流式数据,如 Kafka 和时序数据库。开发复杂的流数据处理流程,并设计可视化界面,从而在大量快速变化的数据上做出迅速和充分的决策。

1. 实时数据可视化软件 Altair Panopticon

Panopticon 是 Altair 公司的实时流数据及可视化商务智能(BI)分析平台,包括 Panopticon Visual Analytics 和 Panopticon Streams 两个主要模块。


其中,Panopticon Visual Analytics 是市场上唯一真正的实时数据可视化系统,Panopticon 作为基于流式数据的可视化方案,具有卓越的速度、灵活性和可扩展性,进一步简化了用户生成分析报表、仪表板的过程。


而 Panopticon Streams 是一个流数据处理引擎,支持用户在完全可视化的界面上构建复杂的流数据处理流程。

2. Panopticon 产品架构

Panopticon 可以直接与各种实时信息系统,包括 MQTT, Kafka, Solace, Rabbit MQ 等,以及时间序列数据存储,包括 Kx kbd+, OneTick, MemSQL, Vertica, SparkSQL 等集成。并这些数据的基础上,生成可视化分析报告。



3. 主要功能

① 实时数据分析:从直连实时数据开始,构建支持纳秒级别的实时数据分析,同时支持任何速度的回放数据流。支持的数据连接包括文件、数据库和流式数据源。



② 无代码开发:使用 UI 界面,通过点击和拖拽生成流数据处理和分析看板。快速响应不断变化的业务需求,降低风险和成本,并可以在几分钟内快速部署新的流程和仪表板。分析人员可以在 Panopticon 中快速、直观地分析时间序列和实时数据,从而能够在几秒钟内发现操作环境中的异常情况。



③ 构建基于 Kafka 的流数据处理程序:Panopticon Streams 流处理引擎基于 Apache Kafka 构建,支持实时数据的聚合、计算和警报。用户无需编写任何 Java、Scala 或者 KSQL 代码就可以实现 Kafka 数据流处理功能。



  • 流式数据准备:将多个实时流与历史数据源相结合

  • 计算引擎:根据业务需求计算性能指标

  • 聚合驱动程序:根据需要组合数据

  • 报警引擎:根据用户定义的阈值突出显示异常情况

  • 集成了 Confluent 企业级控制台

  • 扩展对物联网环境的支持,包括制造、能源、公用事业和运输物流   

典型业务应用场景

1. F1 赛车遥测数据的实时可视化和数据洞察,提升赛车成绩

为了具备更强的竞赛能力,每换到一条赛道或每次遇到天气变化时,都需要重新调校 F1 赛车。有时车队会通过遥测系统反馈的信息、以往比赛取得的经验、以往赛季中记录的数据和计算机模拟的结果对赛车进行有限的调校。


在下方视频中,我们将会介绍如何无需代码使用 Altair Panopticon 实时可视化 F1 赛车的遥测数据,并从数据中获得洞察,从而进一步优化提高性能。

2. 智能电表实时监控与分析

目前的电力公司借助于物联网技术,可以实现对管辖区域内的用电情况实时监控与分析,包括峰谷时间的用电量、用电峰值异常变化、分析历史数据,以及预判供电负荷等,这些目标都需要借助于当前的智能电表数据采集和传输功能来实现。

3. 实时监控市场风险

风险分析师使用这种可视化分析来监控公司各交易层级在指定时间内的承受风险。他们可以设置警报,以在风险超过预定阈值时通知他们,并使用视觉和过滤器在几秒钟内确定任何异常的原因。

4. 实时监控物流车队

使车队运营商能够分析来自传感器和其他来源的关键数据流。这种对车辆和驾驶员性能的实时可视性有助于降低运营成本、保护人员和资产并提高生产率。

分析员可以实时显示所有资产当前位置的地图,检查路线偏差,对任何一组参数设置程序警报,并比较驾驶员的行为。

  • 用户根据自己的业务需要,自定义监控仪表板

比如:驾驶员状态列表,车辆地理位置信息,时间与距离的散点图来查看驾驶员的异常值和平均值等。



  • 回看历史,了解驾驶员的行驶情况,并与其他人或历史数据比较,优化行驶路线等。


5. 实时交易,成本分析与损益统计

此看板旨在使交易员,量化和销售人员能够监视最佳执行情况,并实时分析交易活动的损益以及交易成本。这使他们能够在交易日内立即响应市场事件以及对客户订单流执行和公司获利能力的威胁。



作者简介

Altair 数据分析团队致力于打造企业级数据产品及解决方案,包括数据清洗、数据处理、数据建模、实时数据可视化等多方面业务场景,拥有国内外丰富行业经验,如金融、零售、制造业等等。


本文转载自:DataFunTalk(ID:dataFunTalk)

原文链接:物联网及电子交易的实时BI分析场景探讨

2021-03-24 14:002094

评论

发布
暂无评论
发现更多内容

Java 客户端操作 FastDFS 实现文件上传下载替换删除

哈喽沃德先生

Java 文件系统 分布式文件存储 fastdfs 文件服务器

MySQL-技术专题-Join语法以及性能优化

码界西柚

技术解码 | 玩转视频播放,自适应码流技术

腾讯云音视频

音视频 转码

第3周学习总结

饭桶

2020南京国际人工智能产品展览会

InfoQ_caf7dbb9aa8a

人工智能

什么是 Kubeless?| 玩转 Kubeless

donghui

Kubernetes kubeless

转型敏捷123

研发管理Jojo

SpringBoot 实战:如何优雅的处理异常

看山

springboot 实战 优雅响应

2020南京国际工业互联网及工业通讯展览会

InfoQ_caf7dbb9aa8a

MySQL-技术专题-实战技巧

码界西柚

深圳派发数字人民币红包!个人数字人民币钱包即将亮相

CECBC

数字货币 数字人民币

2020第十三届南京国际智慧工地装备展览会

InfoQ_caf7dbb9aa8a

从戚家军看组织战斗力塑造(组织的六脉神剑)

凌晞

组织

技术革新的脉络及趋势

凌晞

技术 进步

轻言业务架构图

凌晞

架构 企业架构 架构设计 架构设计原则 业务架构

手把手教你锤面试官 04——假装精通redis

慵懒的土拨鼠

MySQL-技术专题-SQL性能分析

码界西柚

第3周作业提交

饭桶

SpringBoot-技术专题-@Async异步注解

码界西柚

万万没想到!ModelArts与AppCube组CP了

华为云开发者联盟

AI 技术 华为云

2020第十三届南京国际大数据产业博览会

InfoQ_caf7dbb9aa8a

“三段三域法”应用架构模型

凌晞

架构 架构设计 技术架构

Redis-技术专题-数据结构

码界西柚

创新者谈

善宝橘

创新

2020第十三届南京国际智慧停车展览会

InfoQ_caf7dbb9aa8a

高难度对话读书笔记——目的篇

wo是一棵草

我就不服了,看完这篇文章,5大常见消息队列开发你还学不会

小Q

Java 编程 程序员 开发 消息队列

晨间日记的奇迹

熊斌

读书笔记

架构方法论之“极限审视法”

凌晞

架构 方法论 设计思维

架构师训练营第一期 - 第四周课后 - 作业二

极客大学架构师训练营

PanDownload复活了!60MB/s!附下载地址

程序员生活志

PanDownload 网盘 下载器

物联网及电子交易的实时BI分析场景探讨_大数据_DataFunTalk_InfoQ精选文章