写点什么

网易资深系统开发工程师陈静力确认出席 QCon 北京,分享 Curve 文件系统在 AI 场景下的实践

徐晓博

  • 2023-08-21
    北京
  • 本文字数:817 字

    阅读完需:约 3 分钟

网易资深系统开发工程师陈静力确认出席QCon北京,分享Curve 文件系统在 AI 场景下的实践

9 月 3 日 - 5 日,在 QCon 全球软件开发大会(北京站)上,网易资深系统开发工程师陈静力将发表题为《Curve 文件系统在 AI 场景下的实践》主题分享,介绍从 AI 的业务的不同场景出发, AI 业务对存储系统的需求,并介绍 Curve 文件系统采用了哪些技术来满足这些需求,以及在实践过程中遇到的问题与挑战。


陈静力,参与网易 Curve 文件系统从 0 到 1 的开发,在 Curve 文件系统落地 AI 场景有一定的实践。所参与的 Curve 项目是云原生计算基金会 (CNCF) Sandbox 项目,是网易主导自研和开源的高性能、易运维、云原生的分布式存储系统,目前在网易内部已大规模应用。他在本次会议的演讲内容如下:


演讲:Curve 文件系统在 AI 场景下的实践


随着 AI 业务的迅速发展,产生的数据量越来越多,对存储的成本和性能提出了新的挑战。本次演讲将从 AI 的业务的不同场景出发(数据集 / 模型管理、在线编程 / 项目管理、数据预处理、训练和预测),说明 AI 业务对存储系统的需求,并介绍 Curve 文件系统采用了哪些技术来满足这些需求,以及在实践过程中遇到的问题与挑战。


演讲提纲:


  1. 背景


○ 介绍 AI 的业务特点(从不同场景出发讲对存储的需求)

○ 介绍 AI 的业务需求


  1. Curve 实践


○ Curve 文件系统简介

○ Curve 文件系统为 AI 业务降本

○ Curve 文件系统为 AI 业务提效


  1. 总结与展望


○ 和 AI 框架的融合:做到自动预热

○ 大数据和 AI 的融合:提供 HDFS 接口,使用 Curve 文件系统即可以用在数据生产收集也可以用于后续处理和训练

○ 推动在更多业务场景的落地


你将获得:


○ 了解 AI 场景对存储的需求

○ 了解 Curve 文件系统在对接 AI 业务中遇到问题与挑战、解决方案与收益


除上述演讲外,QCon 北京还将围绕 FinOps 落地云原生AIGC 浪潮下的研发效能提升业务安全技术面向 AI 的存储从 BI 到 BI+AI,新计算范式下的大数据平台等进行分享。


110+ 名嘉宾、近 30 个精彩专题、8 种交流活动,QCon 北京 2023,相约 9 月!咨询购票请联系 18514549229(微信同手机号)。



2023-08-21 15:252568

评论

发布
暂无评论
发现更多内容

HarmonyOS NEXT智能家居数据同步与管理方案:基于WLAN和BLE的多设备连接

最新动态

鲲鹏 DevKit 实战!华为开发者空间体验MPI 应用并行调试与编译

华为云开发者联盟

鲲鹏 DevKit 华为开发者空间

华为开发者空间:秒级搭建鲲鹏工程,玩转原生开发

华为云开发者联盟

鲲鹏DevKit 华为开发者空间

Z世代正成为全球市场最具潜力的消费群体:他们是怎么被种草的?

Wolink

跨境贸易 出海企业 海外推广 沃链Wolink 达人营销

HarmonyOS NEXT 应用性能优化实战

最新动态

海量接入、毫秒响应:易易互联携手阿里云构筑高可用物联网消息中枢

阿里巴巴云原生

阿里云 RocketMQ 云原生

HarmonyOS 5.0应用开发——V2装饰器@param的使用

高心星

鸿蒙 HarmonyOS5.0 V2装饰器

鸿蒙高安全性输入法的实现:基础模式与完整体验模式下的输入法功能适配

最新动态

《独立开发者精选工具》第 018 期

Immerse

大数据-98 Spark 从 DStream 到 Structured Streaming:Spark 实时计算的演进

武子康

Java 大数据 flink spark 分布式

鸿蒙 NEXT 社交应用中的安全登录与密码管理实战

最新动态

前端错误可观测最佳实践

观测云

前端可观测性

鸿蒙5参展国家网络安全周:星盾安全架构再升级多方位保护隐私

最新动态

低代码“我的待办” :办理、退签全流程拆解

引迈信息

大庆企业选等保测评公司,牢记这 5 个筛选要点

等保测评

黑龙江等保测评安全技术服务:打造数字时代安全堡垒的秘密武器

等保测评

鸿蒙应用开发从入门到实战(六):ArkTS声明式UI和组件化

程序员潘Sir

鸿蒙 HarmonyOS

容器化构建指南!华为开发者空间 CodeArts Build 连 SWR 实操

华为云开发者联盟

容器 CodeArts 华为开发者空间

实测完主流大模型编程与Agent能力,我发现了。。。

苍何

构建基于 HarmonyOS NEXT 的分布式工业监控系统

最新动态

鸿蒙NEXT应用本地化:多语言社交应用

最新动态

语音合成接口实战!华为开发者空间玩转 CodeArts 工具链

华为云开发者联盟

CodeArts 华为开发者空间

Qoder 正式开放订阅,Credits 耐用度提升1/3

阿里巴巴云原生

阿里云 AI

WebGL 开发数字孪生项目的全流程

北京木奇科技有限公司

数字孪生 软件外包公司 webgl开发

阿里云基础设施 AI Tech Day AI 原生,智构未来——AI 原生架构与企业实践专场

阿里巴巴云原生

阿里云 AI 云原生

华为开发者空间:鲲鹏服务器 MongoDB RPM 部署与调优

华为云开发者联盟

mongodb 鲲鹏服务器 华为开发者空间

舆情监测和舆情管理的区别与协同价值

沃观Wovision

跨境贸易 出海企业 沃观Wovision 舆情监测系统 海外舆情监测

鸿蒙NEXT应用国际化:日历与历法处理

最新动态

鸿蒙NEXT应用国际化:时间与日期格式化

最新动态

网易资深系统开发工程师陈静力确认出席QCon北京,分享Curve 文件系统在 AI 场景下的实践_AI&大模型_InfoQ精选文章