GMTC深圳站本周日开幕,14大专题全部上线,完整日程>> 了解详情
写点什么

物联网及电子交易的实时 BI 分析场景探讨

  • 2021 年 3 月 24 日
  • 本文字数:2009 字

    阅读完需:约 7 分钟

物联网及电子交易的实时BI分析场景探讨

在大数据时代,消费互联网和工业互联网每时每刻都在产生大量的实时流式数据,以 Flink、Spark Streaming 为代表的流数据处理系统将数据处理之后,通过 Kafka,MQTT 等通道分发给各种下游系统。在实际应用中,对于可连接流式数据的可视化平台的需求应运而生。本文将基于实时数据可视化软件 Altair Panopticon 与大家共同探讨物联网及电子交易的实时 BI 分析场景。

为什么需要实时流数据 BI 软件?

在电子交易、物(车)联网、工业制造、电信和能源等对实时性要求高以及需要事中分析的业务场景中,延迟的决策是代价高昂的。


Altair Panopticon™允许业务用户和工程师使用 UI 界面, 构建、修改和部署复杂的流式数据分析和可视化应用程序。用户可以连接到几乎任何数据源,包括实时流式数据,如 Kafka 和时序数据库。开发复杂的流数据处理流程,并设计可视化界面,从而在大量快速变化的数据上做出迅速和充分的决策。

1. 实时数据可视化软件 Altair Panopticon

Panopticon 是 Altair 公司的实时流数据及可视化商务智能(BI)分析平台,包括 Panopticon Visual Analytics 和 Panopticon Streams 两个主要模块。


其中,Panopticon Visual Analytics 是市场上唯一真正的实时数据可视化系统,Panopticon 作为基于流式数据的可视化方案,具有卓越的速度、灵活性和可扩展性,进一步简化了用户生成分析报表、仪表板的过程。


而 Panopticon Streams 是一个流数据处理引擎,支持用户在完全可视化的界面上构建复杂的流数据处理流程。

2. Panopticon 产品架构

Panopticon 可以直接与各种实时信息系统,包括 MQTT, Kafka, Solace, Rabbit MQ 等,以及时间序列数据存储,包括 Kx kbd+, OneTick, MemSQL, Vertica, SparkSQL 等集成。并这些数据的基础上,生成可视化分析报告。



3. 主要功能

① 实时数据分析:从直连实时数据开始,构建支持纳秒级别的实时数据分析,同时支持任何速度的回放数据流。支持的数据连接包括文件、数据库和流式数据源。



② 无代码开发:使用 UI 界面,通过点击和拖拽生成流数据处理和分析看板。快速响应不断变化的业务需求,降低风险和成本,并可以在几分钟内快速部署新的流程和仪表板。分析人员可以在 Panopticon 中快速、直观地分析时间序列和实时数据,从而能够在几秒钟内发现操作环境中的异常情况。



③ 构建基于 Kafka 的流数据处理程序:Panopticon Streams 流处理引擎基于 Apache Kafka 构建,支持实时数据的聚合、计算和警报。用户无需编写任何 Java、Scala 或者 KSQL 代码就可以实现 Kafka 数据流处理功能。



  • 流式数据准备:将多个实时流与历史数据源相结合

  • 计算引擎:根据业务需求计算性能指标

  • 聚合驱动程序:根据需要组合数据

  • 报警引擎:根据用户定义的阈值突出显示异常情况

  • 集成了 Confluent 企业级控制台

  • 扩展对物联网环境的支持,包括制造、能源、公用事业和运输物流   

典型业务应用场景

1. F1 赛车遥测数据的实时可视化和数据洞察,提升赛车成绩

为了具备更强的竞赛能力,每换到一条赛道或每次遇到天气变化时,都需要重新调校 F1 赛车。有时车队会通过遥测系统反馈的信息、以往比赛取得的经验、以往赛季中记录的数据和计算机模拟的结果对赛车进行有限的调校。


在下方视频中,我们将会介绍如何无需代码使用 Altair Panopticon 实时可视化 F1 赛车的遥测数据,并从数据中获得洞察,从而进一步优化提高性能。

2. 智能电表实时监控与分析

目前的电力公司借助于物联网技术,可以实现对管辖区域内的用电情况实时监控与分析,包括峰谷时间的用电量、用电峰值异常变化、分析历史数据,以及预判供电负荷等,这些目标都需要借助于当前的智能电表数据采集和传输功能来实现。

3. 实时监控市场风险

风险分析师使用这种可视化分析来监控公司各交易层级在指定时间内的承受风险。他们可以设置警报,以在风险超过预定阈值时通知他们,并使用视觉和过滤器在几秒钟内确定任何异常的原因。

4. 实时监控物流车队

使车队运营商能够分析来自传感器和其他来源的关键数据流。这种对车辆和驾驶员性能的实时可视性有助于降低运营成本、保护人员和资产并提高生产率。

分析员可以实时显示所有资产当前位置的地图,检查路线偏差,对任何一组参数设置程序警报,并比较驾驶员的行为。

  • 用户根据自己的业务需要,自定义监控仪表板

比如:驾驶员状态列表,车辆地理位置信息,时间与距离的散点图来查看驾驶员的异常值和平均值等。



  • 回看历史,了解驾驶员的行驶情况,并与其他人或历史数据比较,优化行驶路线等。


5. 实时交易,成本分析与损益统计

此看板旨在使交易员,量化和销售人员能够监视最佳执行情况,并实时分析交易活动的损益以及交易成本。这使他们能够在交易日内立即响应市场事件以及对客户订单流执行和公司获利能力的威胁。



作者简介

Altair 数据分析团队致力于打造企业级数据产品及解决方案,包括数据清洗、数据处理、数据建模、实时数据可视化等多方面业务场景,拥有国内外丰富行业经验,如金融、零售、制造业等等。


本文转载自:DataFunTalk(ID:dataFunTalk)

原文链接:物联网及电子交易的实时BI分析场景探讨

2021 年 3 月 24 日 14:001487

评论

发布
暂无评论
发现更多内容

关于技术团队搭建&管理的一些思考

LigaAI

团队管理

真香!肝完Alibaba这份面试通关宝典,我成功拿下今年第15个Offer

程序员小毕

Java spring 程序员 架构 面试

挑战进阶教程,和MindSpore更近一步!

Geek_6cdeb6

mindspore

跟着我乔鲁诺学面试(大误)

姬翔

9月日更

低代码在这些方面充满优势

低代码小观

程序员 低代码 企业管理 开发平台 低代码开发

企业级理解Spring IOC

不想秃头

Java spring springioc

推荐一个Mac端的截图工具

IT蜗壳-Tango

9月日更

阿里菜鸟+腾讯IEG面经(阿里5面,腾讯8面)无限秽土转生

Java 程序员 架构 面试 计算机

多租户的共享与隔离

金蝶天燕云

云计算 多租户

如何利用极狐GitLab CI/CD 完成 Jenkins 的迁移

极狐GitLab

CI/CD #GitLab

站在巨人的肩膀上学习可以看得更远:五位阿里大牛联手撰写的《深入浅出Java多线程》

程序员知识圈

Java 程序员 架构 面试 编程语言

我将Github上非常棒的Java开源项目全部整理了下来,你想要的全都有!

程序员知识圈

Java 程序员 架构 面试 编程语言

区块链将帮助监管科技突破壁垒,刺激金融市场的监管活力

Geek_987812

Vue进阶(幺幺幺):实现浏览器全屏

No Silver Bullet

Vue 9月日更

爬虫初探: 重定向处理与新闻明细页解析

程序员架构进阶

Python 实战问题 9月日更 spider

百分点认知智能实验室:智能校对的技术原理和实践

百分点科技技术团队

【直播预告】从校园学习到职场实践——淘系技术开学季特别分享系列

阿里巴巴淘系技术

程序员 应聘tips

Flutter 多引擎支持 PlatformView 以及线程合并解决方案

字节跳动终端技术

字节跳动 前端 跨平台 火山引擎

JS完美收官之——闭包

法医

9月日更

学生管理系统详细设计

缘分呐

设计 学生管理系统架构

☕【JVM 技术指南】「理论总结笔记」Java 虚拟机垃圾回收认知和调优的"思南(司南)"【下部】

浩宇天尚

ZGC JVM G1垃圾回收器 9月日更

影像篡改与识别(三):人工智能时代

腾讯安全云鼎实验室

AI 影像识别

内网渗透攻击技术的利用

网络安全学海

网络安全 信息安全 渗透测试 WEB安全 安全漏洞

GaussDB(for MySQL)如何快速创建索引?华为云数据库资深架构师为您揭秘

华为云数据库小助手

华为云 GaussDB 华为云数据库 GaussDB(for MySQL)

数据湖特点

奔向架构师

数据湖 9月日更

Python——Map-Reduce

在即

9月日更

【Vuex 源码学习】第二篇 - vuex 插件安装 install 逻辑

Brave

源码 vuex 9月日更

使用PaddleNLP打造精准文献检索系统,看万方系统升级放大招!

百度大脑

人工智能 nlp 飞桨

这份GitHub上标星75k+的《Java面试突击》PDF版,能够让你在面试前做好充足的准备

程序员知识圈

Java 程序员 架构 面试 编程语言

被腾讯问蒙的各种Redis复杂问题

hanaper

【架构实战营作业】模块三:学生管理系统架构设计文档

聆息

数据cool谈(第2期)寻找下一代企业级数据库

数据cool谈(第2期)寻找下一代企业级数据库

物联网及电子交易的实时BI分析场景探讨-InfoQ