大厂Data+Agent 秘籍:腾讯/阿里/字节解析如何提升数据分析智能。 了解详情
写点什么

最热开源无服务器函数:五大 Fission 架构参考

  • 2019-01-03
  • 本文字数:2220 字

    阅读完需:约 7 分钟

最热开源无服务器函数:五大Fission架构参考

“无服务器”现在是极具诱惑的技术趋势,没有什么比管理服务器更让人痛苦。亚马逊、微软和谷歌都在云中提供无服务器专有接口。相较于这些云供应商的商业化产品,开源无服务器架构可免于被云厂商锁定,但要以牺牲云便利性和易用性为代价。


近一年,Fission 热度颇高。简单来讲,Fission 是一个构建在 Kubernetes 之上的 FaaS 或 Serverless 函数框架。Fission 使用配有动态装载器的标准容器把 Kubernetes 与内部容器联系在一起,所使用的功能被放置于适当的标准容器中,并被加载以回答容器内 Web 服务器查询。


因为其灵活且不会被锁定到特定云提供商,Fission 已被应用到多个行业,本文将介绍五大行业常见用例的 Fission 架构设计模式。


参考架构 1:物联网(IoT)


从工业互联网到可穿戴设备再到智能汽车,一系列物理设备(传感器、执行器,智能设备和可穿戴设备…)收集各种类型数据,并与数据中心内运行的应用程序进行通信。通常,数据使用网关聚合,然后发送到可分析这些变量的平台以获取业务洞察(性能、趋势、触发事件等)。


物联网应用程序中的整体流程可使用 Fission 编排:


  1. 使用网关聚合数据,并将其发送到在 Kubernetes 上托管运行的 Kafka 服务器集群消息队列;

  2. 基于整个管道流程调用 Fission 函数:


  • 对于放置在消息队列中的给定文件,文件内容将传递到 Fission 函数,该函数首先对其标准化以提取感兴趣的变量,然后将输出发送到 NoSQL 数据库或文件系统;

  • 第二个函数将运行以响应 NoSQL 数据库中的标准化文件。该函数将读取文件内容,根据需要执行计算(基于用例),调用执行功能的微服务,例如将数据发送到 Data Lake 或 Data Mart 以进一步分析;

  • 可以为事件流中任何类型的处理操作编写分支函数,FaaS 可根据数据量按比例放大或缩小。


参考架构 2:金融服务(支付处理,风险计算等)


金融服务行业可以使用基于 Fission 的无服务器架构实时处理支付请求、执行合规性检查和风险度量等关键任务。


金融应用程序中的整体流程可以使用 Fission 编排:


  1. 开发人员将 Fission 部署为跨多个应用程序的共享功能,这些程序是支付处理网关前端,可处理用户身份验证、注册和支付相关数据收集;

  2. 系统将后端与存放交易数据的数据库进行连接;

  3. 创建 Fission 函数以解析具有以下变量的给定输入数据流:用户信用卡数据、交易位置、其它用户信息等。


  • 第一个函数调用欺诈检测 API,并根据检查结果将数据保存到内存数据网格中;

  • 无论检查通过还是失败,均调用第二组函数。如果检查通过,则该函数批准付款并向用户发送确认;

  • 如果怀疑付款存在欺诈性,则会调用另一个函数向后端欺诈检测系统发出告警。


参考架构 3:Web 应用程序扩充


绝大多数企业应用都是三层 Web 程序,这些应用是业务后台及技术任务(如备份、告警、数据收集)的接口。新兴模式是用无服务器 Fission 函数来处理这些任务,而不影响单片 n 层应用程序的开发和部署。


Web 应用程序扩充的总体流程可以使用 Fission 函数编排:


  1. 业务用户继续与(传统)应用程序连接,但可以利用 Fission 函数提供的增强功能;

  2. 为一系列计算和数据处理任务创建新功能;

  3. 主要应用程序触发这些功能,因为需要机会性执行;

  4. Dedicated 函数执行所描述的适当逻辑,如果需要,向应用程序报告。


这可以被视为将传统应用程序重构或分解为微服务的好方法,或者轻松添加不依赖“mother ship”开发和发布过程的附加功能。


参考架构 4:传统系统改造


诸如大型机和 n 层应用之类的传统系统在银行、保险、零售等行业普遍存在并且根深蒂固。由于复杂性、业务依赖性、重构需要大量时间和精力以及这些系统仍然表现良好且具有成熟的使用模式等事实,企业不可能简单撕掉和替换这些系统。为了确保与现代服务(如 Web 和移动应用程序)的互操作性,Fission 函数可以围绕这些系统提供基于标准的 API 包装器。


例如:


  1. 请求被发送到 API 网关,API 网关执行基本转换并根据请求端点需要调用 Fission 函数;

  2. 函数接收输入数据(例如 JSON)并将其转换为终端系统可处理的格式,然后调用(传统)业务系统;

  3. 一旦系统响应,函数可获取并将其转换为源系统理解的格式,再使用适当的响应调用 API 网关。


参考架构 5:使用 Apache Spark 进行机器学习


对于大多数公司而言,机器学习和预测分析通常针对组织内的特定项目。为了实现机器学习的真正价值,跨应用共享数据、算法和模型是有利的。Fission 可以与 Apache Spark 等技术结合,提供最终用户或应用程序所使用的流处理和趋势预测数据。


使用 Fission 和 Apache Spark 编排机器学习应用整体流程:


  1. 业务运营数据实时提取到基于 Kafka 的消息队列集群;

  2. Spark Streaming 以微批方式获取数据,通常基于时间窗口。此数据存储在数据湖中以进行批处理分析,并发送到 Spark MlLib 运行时,其中存储了不同的预测模型;

  3. 这些模型基于在 Spark 上运行的通用 ML 算法,比如有监督和无监督算法 ,聚类、分类算法等;

  4. 一旦将模型结果写入 NoSQL 数据库或内存数据网格,就会触发 Fission 函数;

  5. Fission 函数执行一系列关键业务功能,例如,更新业务分析仪表板,发送实时服务等。


结论


无服务器正在成为继 Kubernetes 之后最热门的趋势之一,开源无服务器解决方案使用高度灵活的技术,基于标准 PaaS 平台解决行业面临的业务挑战,并可在本地和任意公有云运行。但是,与其他新技术一样,无服务器仍然存在一些问题,比如可扩展性、生态系统集成等,如何合理搭建成为技术人员需要思考的重要问题。


参考链接:https://dzone.com/articles/what-is-serverless-part-5-reference-architectures


2019-01-03 08:2010023
用户头像
赵钰莹 极客邦科技 总编辑

发布了 897 篇内容, 共 686.4 次阅读, 收获喜欢 2696 次。

关注

评论 1 条评论

发布
暂无评论
发现更多内容

JavaScript 进阶(二)下

Augus

JavaScript 9月日更

云智一体破解AI落地“最后一公里”难题,企业智能化转型再获新利器

百度大脑

人工智能

架构实战营第二期-模块三作业

娜酱

#架构实战营

架构实战营-模块三作业

南山先生

「架构实战营」

乘风破浪携手共赢——博睿数据深圳渠道大会圆满落幕

博睿数据

Android的Ftp断点上传---Aria使用笔记

Changing Lin

9月日更

架构实战营 - 模块三作业

Alex.Wu

双非二本,外包苦熬4年,花20天吃透这份Java天梯图,成功上岸京东

Java架构师迁哥

中原银行分布式缓存实践

中原银行

redis 中间件 分布式缓存 中原银行

Go 专栏|并发编程:goroutine,channel 和 sync

AlwaysBeta

Go 语言

面试官zookeeper 是如何实现一致性的?我大意了,让我回去等通知

Java 面试 分布式 后端

2021南京国际智慧工地装备展览会

南京专业智博会

智博会 智慧工地展览会 智慧工地论坛会

2021年第十四届南京智慧城市展览会

南京专业智博会

智博会 智慧城市展览会 智慧城市论坛会

模块三作业:学生管理系统架构设计文档

apple

Opus从入门到精通(一):简介

轻口味

android 音视频 9月日更

0基础架构入门 - 3(学生管理系统 - 详细架构设计文档)

felix

架构实战营 0基础架构入门

【架构训练营】【模块三】【作业】【学生管理系统架构文档】

简直走不拐弯

作业 架构训练营

大专的我,闭关苦学56天,含泪拿下阿里offer,五轮面试,六个小时灵魂拷问

Java架构师迁哥

花2个月备战字节,3轮面试拿下总包60W Offer!

Java架构师迁哥

雪花算法,什么情况下发生 ID 冲突?

Java 架构 分布式 算法

不会 Lua?Python 助你快速上手 Apache APISIX 插件开发

API7.ai 技术团队

Python Apache 开源 API网关 APISIX

直播预告丨走进云溪数据库之高可用方案

云计算

存储中间件架构梳理

十二万伏特皮卡丘

交Y所K线机器人系统开发功能介绍(源码搭建)

量化系统19942438797

机器人 k线

联邦学习框架浅析

趣链科技

什么是数据字典?

奔向架构师

数据库 9月日更

内网渗透横向攻击流程

网络安全学海

黑客 网络安全 信息安全 渗透测试 WEB安全

二本Java菜鸟9面字节遭虐,苦修数月深造这份 Java面试宝典,终进阿里

Java 程序员 架构 面试 计算机

区块链“牵手”金融 面临诸多挑战

CECBC

《中国梦》打造数亿中产阶级!疯了,疯了,全涨疯了!!

CECBC

CSS交互动画指南之keyframes

devpoint

CSS css3 9月日更

最热开源无服务器函数:五大Fission架构参考_服务革新_赵钰莹_InfoQ精选文章