写点什么

网易资深系统开发工程师陈静力确认出席 QCon 北京,分享 Curve 文件系统在 AI 场景下的实践

徐晓博

  • 2023-08-21
    北京
  • 本文字数:817 字

    阅读完需:约 3 分钟

网易资深系统开发工程师陈静力确认出席QCon北京,分享Curve 文件系统在 AI 场景下的实践

9 月 3 日 - 5 日,在 QCon 全球软件开发大会(北京站)上,网易资深系统开发工程师陈静力将发表题为《Curve 文件系统在 AI 场景下的实践》主题分享,介绍从 AI 的业务的不同场景出发, AI 业务对存储系统的需求,并介绍 Curve 文件系统采用了哪些技术来满足这些需求,以及在实践过程中遇到的问题与挑战。


陈静力,参与网易 Curve 文件系统从 0 到 1 的开发,在 Curve 文件系统落地 AI 场景有一定的实践。所参与的 Curve 项目是云原生计算基金会 (CNCF) Sandbox 项目,是网易主导自研和开源的高性能、易运维、云原生的分布式存储系统,目前在网易内部已大规模应用。他在本次会议的演讲内容如下:


演讲:Curve 文件系统在 AI 场景下的实践


随着 AI 业务的迅速发展,产生的数据量越来越多,对存储的成本和性能提出了新的挑战。本次演讲将从 AI 的业务的不同场景出发(数据集 / 模型管理、在线编程 / 项目管理、数据预处理、训练和预测),说明 AI 业务对存储系统的需求,并介绍 Curve 文件系统采用了哪些技术来满足这些需求,以及在实践过程中遇到的问题与挑战。


演讲提纲:


  1. 背景


○ 介绍 AI 的业务特点(从不同场景出发讲对存储的需求)

○ 介绍 AI 的业务需求


  1. Curve 实践


○ Curve 文件系统简介

○ Curve 文件系统为 AI 业务降本

○ Curve 文件系统为 AI 业务提效


  1. 总结与展望


○ 和 AI 框架的融合:做到自动预热

○ 大数据和 AI 的融合:提供 HDFS 接口,使用 Curve 文件系统即可以用在数据生产收集也可以用于后续处理和训练

○ 推动在更多业务场景的落地


你将获得:


○ 了解 AI 场景对存储的需求

○ 了解 Curve 文件系统在对接 AI 业务中遇到问题与挑战、解决方案与收益


除上述演讲外,QCon 北京还将围绕 FinOps 落地云原生AIGC 浪潮下的研发效能提升业务安全技术面向 AI 的存储从 BI 到 BI+AI,新计算范式下的大数据平台等进行分享。


110+ 名嘉宾、近 30 个精彩专题、8 种交流活动,QCon 北京 2023,相约 9 月!咨询购票请联系 18514549229(微信同手机号)。



2023-08-21 15:252547

评论

发布
暂无评论
发现更多内容

YashanDB数据库在零售行业的转型应用

数据库砖家

YashanDB数据库在数据湖中的角色与功能

数据库砖家

YashanDB数据库在医疗行业的应用实例与优势

数据库砖家

YashanDB数据库在医疗行业数据合规中的关键作用

数据库砖家

YashanDB数据库在游戏行业中的性能优化策略

数据库砖家

制造业碳足迹追踪:开源能源管理系统如何助力企业实现“碳数据可视化”?

开源能源管理系统

开源 开源能源管理系统

YashanDB数据库在金融行业的实际应用探讨

数据库砖家

YashanDB数据库在云环境中的部署与管理技巧

数据库砖家

第一个 Shader 完成!

Miracle

舆情监测中的海外社交媒体监控实战

沃观Wovision

YashanDB数据库在线支持与资源的获取方式

数据库砖家

YashanDB数据库在物联网数据处理中的优势

数据库砖家

YashanDB 可能对社交媒体平台带来影响

数据库砖家

第一个运行起来的 Shader

Miracle

华金证券再次携手非凸科技,共话AI时代数智交易新生态

非凸科技

为什么应该测试无JavaScript的页面体验

qife122

JavaScript 渐进增强

YashanDB数据库在零售行业数据分析的核心优势

数据库砖家

YashanDB数据库在物联网数据管理中的创新应用

数据库砖家

YashanDB是一种新兴的数据库管理系统

数据库砖家

无学历如何成为程序员

码界行者

程序员‘

YashanDB数据库在金融行业的数据安全应用分析

数据库砖家

上下文为核心瓶颈!枫清科技如何攻克企业AI应用跨部门协作难题?

Fabarta

人工智能 AI Agent

别再靠 “关设备” 减碳!EMS 的 “预测性控能”,让企业满产也能达标双碳

开源能源管理系统

开源 开源能源管理系统

YashanDB数据库在能源行业管理平台的应用前景

数据库砖家

谈谈Vibe编程(氛围编程)

周末程序猿

大模型 vibe coding

MyEMS 深度解析:核心功能模块、数据流转逻辑与工业能源优化落地路径

开源能源管理系统

开源 开源能源管理系统

YashanDB数据库在人工智能项目中的应用分析

数据库砖家

YashanDB 零售行业的关键应用

数据库砖家

YashanDB数据库在医疗行业中的应用前景

数据库砖家

YashanDB数据库在云环境中的应用效率探讨

数据库砖家

YashanDB数据库在金融行业中的关键应用与安全保障

数据库砖家

网易资深系统开发工程师陈静力确认出席QCon北京,分享Curve 文件系统在 AI 场景下的实践_AI&大模型_InfoQ精选文章