写点什么

LinkedIn 重新架构了边缘构建系统,以支持多样化的推理工作流

作者:Leela Kumili

  • 2025-09-03
    北京
  • 本文字数:1047 字

    阅读完需:约 3 分钟

大小:507.14K时长:02:53
LinkedIn重新架构了边缘构建系统,以支持多样化的推理工作流

领英(LinkedIn)详细介绍了其重新架构的边缘构建系统,该系统旨在支持多样化的推理工作流程,为全球会员提供更新鲜、更个性化的推荐。新的架构解决了在其全球平台上对实时可伸缩性、成本效率和灵活性日益增长的需求。

 

边缘构建系统通过推荐“边缘”(即成员和内容之间的联系)来增强 LinkedIn 的图谱。这些推荐是通过推理工作流生成的,推理工作流运行机器学习模型来对候选建议进行评分和排序。随着时间的推移,系统已经演进到需要在不同的推理模式之间平衡新鲜度、延迟和资源效率。

 

第一代依赖于离线推理管道,可以批量计算推荐。虽然这种方法在早期规模上很有效,但缺乏反映动态会员活动所需的新鲜度。为了解决这个问题,LinkedIn 引入了近线推理,用户行为被记录后不久就运行模型,从而实现更快速的推荐,同时保持成本效益。

 

使用离线推理模型的初始架构(来源:LinkedIn工程博客)

 

演进的下一个阶段是专注于在线推理,能够在请求时实时评估候选边缘。这种转变提供了最新的推荐,但引入了延迟和资源扩展挑战。为了管理这种复杂性,LinkedIn 实施了远程推理能力,允许从多个表面调用托管在专门服务系统中的模型。

 

不同的推理模型在新鲜度、可扩展性和效率方面提供了不同的权衡:

 

不同推理模型的比较(来源:LinkedIn工程博客)

 

当前的架构支持离线、近线、在线和远程推理的混合。有向无环图(DAG)对这些工作流程进行编排,支持并行执行和灵活路由。例如,“你可能认识的人”利用在线推理进行即时更新,而大规模内容提要继续依赖离线计算。

 

为了改进候选生成,LinkedIn 采用了基于嵌入的检索(EBR),从会员档案中创建嵌入,并从向量存储中检索相关候选。然后在线对这些候选评分,并与其他工作流程的输出合并,从而增强多样性和相关性。

 

支持多样化推理模型的当前架构(来源:LinkedIn工程博客)

 

在 LinkedIn 的规模下,确保跨工作流的一致性需要在共享特征存储、模型管理框架和分布式服务基础设施上进行大量投资。

 

正如 LinkedIn 工程师Yi-Wen Liu所强调的:

 

通过解耦工作流并支持多种推理策略,我们可以灵活地平衡新鲜度、可扩展性和成本,同时继续为我们的会员提供有意义的推荐。

 

根据 LinkedIn 工程师的说法,经过改进的边缘构建系统能够通过 A/B 测试进行更有效的实验并提高参与度。它还为 AI 生产力、成本优化、大语言模型和 transformer 的采用、基于嵌入的检索以及图神经网络和顺序模型等高级建模技术提供了战略机会——共同实现更及时、个性化和可操作的建议。

 

原文链接:

https://www.infoq.com/news/2025/09/linkedin-edge-recommendations/

2025-09-03 17:006855

评论

发布
暂无评论

酷睿、锐炫加持!英特尔点亮智慧零售新场景

E科讯

JEB Pro v5.29 (macOS, Linux, Windows) - 逆向工程平台

sysin

JEB

YashanDB 知识库|UNDO 表空间一直在涨?查原因 + 给方案,一文说明白

数据库砖家

数据库

“工作区”升级为“磁盘”、数据集统计概览优化|ModelWhale 版本更新

ModelWhale

大模型

PVS‑Studio 7.36 for macOS, Linux & Windows - 代码质量安全静态分析

sysin

DNS DDoS攻击:网络世界中的“洪水猛兽”

防火墙后吃泡面

华为云中间件助力AI应用智能进化与创新突破

华为云开发者联盟

华为云

YashanDB|用 yasldr 批量导入时报内存不足?一文搞懂 bulkload 内存分配逻辑

数据库砖家

数据库

Cyber Triage 3.14 for Windows - 面向事件响应的数字取证软件

sysin

VMware ESXi 8.0U3e macOS Unlocker & OEM BIOS NVMe 驱动特殊定制版 (集成驱动版)

sysin

esxi

HyperWorks汽车B-柱网格变形

智造软件

CAE Hypermesh hyperworks

YashanDB 共享集群实测报告:性能、稳定性、架构三重验证,细节见真章

数据库砖家

数据库

YashanDB 知识库|YCP 单机部署如何离线升级?一文详解 -rpc 升级流程

数据库砖家

数据库

数字化与信息化的关系

优秀

数字化 信息化

2025低代码开发平台大揭秘:国内十大低代码厂商全面解析

优秀

低代码开发平台

CST如何在三维里截取部分区域进行仿真

思茂信息

cst CST软件 CST Studio Suite

网易游戏 Flink 云原生实践

Apache Flink

大数据 flink 云原生

图片导航组件 | 纯血鸿蒙组件库AUI

华哥的全栈次元舱

HarmonyOS 开发语言 纯血鸿蒙 ArkUI / eTS 鸿蒙组件库AUI

MCP 如何构建企业级数据分析 Agent?

阿里巴巴云原生

阿里云 云原生 函数计算

YashanDB 知识库|yasql 报 YASQL-00021:单行字符超 4000.如何绕过限制?

数据库砖家

数据库

YashanDB 知识库|YCP 高可用离线升级指南(以 23.2.4.100 升级至 23.2.11.100 为例)

数据库砖家

数据库

淘宝天猫商品详情API接口(附代码示例)

tbapi

淘宝商品详情接口 淘宝API 天猫商品详情接口

如何选择适合企业的高效财税自动化软件

Techinsight

财税

YashanDB 知识库|Oracle 里的大整数插入正常,换到崖山却报错?问题可能出在字段类型上

数据库砖家

数据库

排行榜的5种实现方案!

不在线第一只蜗牛

架构 开发

YashanDB|如何优化跑批性能?这些参数配置值得关注

数据库砖家

数据库

企业如何利用SD-WAN优化多云架构网络性能

Ogcloud

SD-WAN 企业组网 SD-WAN组网 SD-WAN厂商 sd-wan专线

YashanDB 知识库|MySQL 的 GROUP BY 语句在崖山报错?问题出在这个标准!

数据库砖家

数据库

教育部加快推进教育数字化,2024年来国家级人工智能教育政策合集

ModelWhale

怀进鹏强调高效优化学科布局和专业建设,多所985成立“AI+”新学院

ModelWhale

LinkedIn重新架构了边缘构建系统,以支持多样化的推理工作流_架构_InfoQ精选文章