软件产品中的AIGC:LeptonAI、智谱AI、Dify.AI等团队专家深度分享,点击查看>> 了解详情
写点什么

python 分布式

收录了 python 分布式 频道下的 50 篇内容

Uber正式开源分布式机器学习平台Fiber
Uber 正式开源分布式机器学习平台 Fiber

Fiber是一个新的Python分布式库,现已正式开源。

取代Python多进程!伯克利开源分布式框架Ray
取代 Python 多进程!伯克利开源分布式框架 Ray

Ray是一个用于并行计算和分布式Python开发的开源项目。本文将介绍如何使用Ray轻松构建可从笔记本电脑扩展到大型集群的应用程序。

Fiber 简明入门指南
Fiber 简明入门指南

Fiber,让人工智能的分布式计算变得简单。

如何在Python中实现异步执行?
如何在 Python 中实现异步执行?

这篇文章将会介绍传统的任务队列系统、异步执行所处的位置以及几款常用调用工具的优缺点。

DBPack 赋能 python 微服务协调分布式事务
DBPack 赋能 python 微服务协调分布式事务

DBPack 的分布式事务致力于实现对用户的业务无入侵,使用时下流行的sidecar架构,主要使用 ETCD Watch 机制来驱动分布式事务提交回滚,它对 HTTP 流量和 MYSQL 流量做了拦截代理,支持 AT 模式(自动补偿 SQL)和 TCC 模式(自动补偿 HTTP 请求)。

分布式事务
分库分表
读写分离
seata
dbmesh
javaer 徒手撸一个 python 语言的分布式 rpc

基于python撸了一个分布式rpc,可以给予此快速搭建自己的python微服务

Python
微服务
RPC
Mars:大规模张量计算系统的构建实践
Mars:大规模张量计算系统的构建实践

本次分享基于 Mars 以往的实践介绍系统架构和提升执行效率方面的实践。

实战案例丨分布式系统中如何用 python 实现 Paxos

​​​​​​摘要: 提到分布式算法,就不得不提 Paxos 算法,在过去几十年里,它基本上是分布式共识的代 名词,因为当前最常用的一批共识算法都是基于它改进的。比如,Fast Paxos 算法、 Cheap Paxos 算法、Raft 算法、ZAB 协议等等。

Python
算法
分布式系统
PAXOS
集群库
Python正在吞噬世界
Python 正在吞噬世界

2018 到 2019 年,所有编程语言的流行度都在下滑,除了 Python。Python 为什么会变得越来越火?本文梳理了 Python 的发展史,试图揭示背后的秘密。

DMLC:最大开源分布式机器学习项目

近日,分布式开源机器学习项目正式发布。本文对该项目所包含的库及系统组件进行了简单介绍。

基于UAI-Train平台的分布式训练
基于 UAI-Train 平台的分布式训练

在大型数据集上进行训练的现代神经网络架构,可以跨广泛的多种领域获取可观的结果,涵盖从图像识别、自然语言处理到欺诈检测和推荐系统等各个方面,但训练这些神经网络模型需要大量浮点计算能力。

阿里巴巴AI系统建设的思考
阿里巴巴 AI 系统建设的思考

未来AI的模型发展方向会从单机训练向大规模分布式训练发展,通过大规模预训练模型+小样本的蒸馏的模型开发流程将会成为主流。

为什么已有Spark和Dask,阿里还要开源自研分布式科学计算引擎Mars?
为什么已有 Spark 和 Dask,阿里还要开源自研分布式科学计算引擎 Mars?

随着数据应用类型的愈加丰富和数据规模的不断扩大,单机早已无法满足超大规模数据计算和分析的需求,分布式才是如今大数据领域的核心关键词。

Python之父宣布退休,但Python仍在吞噬世界
Python 之父宣布退休,但 Python 仍在吞噬世界

10 月 30 日,Python 之父 Guido 宣布退休,离开 Dropbox。他发推文说,“这件事感觉既苦涩又甜蜜:苦涩的是,我马上要离开 Dropbox,现在已经退休;甜蜜的是,在 Dropbox 做工程师期间,我学到很多,比如类型标注就来自这段经历。我会非常怀念在这里工作的日子。”

架构新纪元(四):观察分布式服务
架构新纪元(四):观察分布式服务

仅仅构建微服务是不够的,对于一套完整的技术体系而言,除了开发,还需要运维给予强力支持。

64岁Python之父:我不退休了,我要去微软
64 岁 Python 之父:我不退休了,我要去微软

Python之父:退休生活太无聊了。

才云开源云原生分布式训练项目 FTLib:支持弹性伸缩、自动容错
才云开源云原生分布式训练项目 FTLib:支持弹性伸缩、自动容错

真正部署和运行大规模的分布式训练。

机器学习分布式框架Ray
机器学习分布式框架 Ray

Ray是UC Berkeley RISELab新推出的高性能分布式执行框架,具有比Spark更优异的计算性能,而且部署和改造更简单,同时支持机器学习和深度学习的分布式训练,支持主流的深度学习框架(pytorch,tensorflow,keras等)

Python
分布式
python小知识
三周年连更
为什么迁移至Python 3这么难?
为什么迁移至 Python 3 这么难?

你愿意迁移到Python 3吗?

python 分布式专题_资料-InfoQ中文网