写点什么

缓存技术在华为公有云环境中的挑战与应用

  • 2019-10-23
  • 本文字数:1329 字

    阅读完需:约 4 分钟

缓存技术在华为公有云环境中的挑战与应用

12 月 1 日,ACMUG & CRUG 2018 技术沙龙全国巡演第十站在西安举办。华为云中间件产品经理 Kevin 在会上带来了《缓存技术在华为公有云环境中的挑战与应用》主题演讲,为大家介绍和分享了华为云分布式缓存服务(Distributed Cache Service,简称 DCS)的应用与挑战。


分享亮点


  • DCS 缓存体系结构和使用模式

  • 使用案例

  • DCS 的挑战与探索


华为云分布式缓存服务 DCS 作为华为云中最受欢迎的服务之一,为用户提供即开即用、安全可靠、弹性扩容、便捷管理等的在线分布式缓存能力。以下是本次主题演讲的主要内容:

DCS 缓存体系结构和使用模式

目前华为云分布式缓存 DCS 提供了 Redis、Memcached 和内存数据网格等多款引擎,供开发者选择。华为云分布式缓存 DCS 除了提供通用缓存场景外,在以下模式上实现了突破:


  • 边缓存

  • HTTP Session 会话与复制

  • 改变数据抓取

  • 只通过分布式缓存写入数据库、处理分布式内存并行计算 Map reduced

  • 类 SQL 查询


最新发布的华为云分布式缓存 DCS2.0 重新定义了缓存架构,为用户提供性能更强劲、服务更可靠的分布式缓存服务,主要特点有:


  • 8 秒创建一个缓存实例

  • 缓存操作 300% faster(无缝 HW、SW/OS 集成)

  • 按需扩展(动态增加新缓存容量)

  • 强大的安全性:多租户隔离;通过缓存溢出、缓存持久化和 alert/notification 的 SLA 保证

引擎和使用案例

案例一

背景:某 APP 业务应用部署在华为公有云上,由于 DB 延迟导致请求峰值对业务造成影响,高达 500000 的并发量使数据库成为瓶颈。


解决方案:在使用华为云分布式缓存 DCS 后,性能和并发提升十倍,大大减轻了数据库的负载压力,加速了应用访问。


案例二

背景:某搜索引擎提供商需要大量收集和分析业务数据(如新闻、社交媒体、博客、聊天室、在线论坛等),业务量呈指数级增长。而在此过程中,由于大量采集数据冗余,流程、建模和分析时间大幅增加,导致业务低效。


解决方案:该搜索引擎商存在大规模数据访问,对数据查询效率要求高。使用华为云分布式缓存 DCS 能够有效提高数据查询效率,降低数据库存储成本。使用华为云分布式缓存 DCS 后,该搜索引擎商节省了近 70%的部署成本,数据流程效率提升了一倍。


DCS 的挑战与探索

总体来说,华为云分布式缓存 DCS 面临的挑战包括:


  • 公有云 IMDG 生态建设

  • 企业云转型(从私有云到混合私有云再到公有云)

  • 跨云提供商迁移

  • 更可靠、可预测、智能、可互操作的智能缓存

  • 硬件优化(FPGA、AEP 平台、缓存卸载等)


华为云分布式缓存 DCS 面临的探索有:


  • 缓存用 Write-through/Write-behind 方式写入

  • 数据变更捕获

  • 智能缓存 OLAP 、缓存流式数据和实时数据分析

  • 将缓存服务从一个云提供商无缝迁移到另一个云提供商

  • 新介质 AEP(non-volatile 内存 NVM 技术)在缓存中的使用


传统应用缺乏外部公共接口,传统数据中心基础设施的独立性较为薄弱,跨云缓存服务提供商的缓存服务和缓存数据的热迁移还不够公开透明等等,以上列举的问题都是华为云分布式缓存 DCS 需要更多地关注和解决的,以便为用户提供更好的服务。


华为云分布式缓存 DCS 会一直在缓存技术领域不断探索和追求,为用户提供高可靠、高性能、企业级的云缓存服务,帮助企业应用快速上云,从容面对数字时代的转型和挑战。


本文转载自公众号中间件小哥(ID:huawei_kevin)。


原文链接:


https://mp.weixin.qq.com/s/0zJdP6YTg8LVVVwfcbQljw


2019-10-23 11:151230

评论

发布
暂无评论
发现更多内容

多商家智慧新零售:微擎开源生态下的全链路商业数字化平台

微擎应用市场

小身材+大功率+真圆头,旗舰机顶灯再升级!金贝HD-2PLUS重磅上市

科技热闻

实时监控、秒级决策:镜舟科技如何重塑融资融券业务数据处理模式

镜舟科技

数据湖 数据处理 StarRocks 金融机构 湖仓一体

光年投票:微擎开源生态下的智能投票与互动营销平台

微擎应用市场

芜湖,又被白嫖喽!

程序员郭顺发

2025年第二届“兴智杯”智能编码创新应用开发挑战赛正式启动

阿里云云效

OrcaMind.ai链上AI操作系统揭秘,一文读懂它凭什么革新行业

股市老人

在线考试系统:微擎开源生态下的全场景智能考试平台

微擎应用市场

Dify实战案例:AI邮件批量发送器!

王磊

ETLCloud中数据脱敏规则的使用技巧

谷云科技RestCloud

数据库 数据处理 ETL 数据脱敏 数据集成

深入研究:速卖通商品列表 API 接口详解

tbapi

速卖通商品列表接口 速卖通商品数据采集 速卖通API

探索 Pencils Swap 的叙事:为 DeFi 的再次爆发蓄力

加密眼界

Cartesia 发布实时 STT 模型 Ink-Whisper;Niantic 与 Snap 合作 AR 眼镜地图系统 丨日报

声网

分布式事务:从基础概念到现代解决方案的全面解析

量贩潮汐·WholesaleTide

分布式

2025 AI玩具产业大会启幕!百度智能云大模型深度赋能,助力打造全球玩具智造创新高地

科技热闻

从人工配置到AI自生成:低代码平台的复杂表单自动化实践(以JNPF为例)

电子尖叫食人鱼

低代码

咻一咻抽奖:微擎开源生态下的互动营销裂变神器

微擎应用市场

玩转 Databend UDF

Databend

Mint Studio 正式上线:下一代 NFT 资产发行平台

NFT Research

NFT NFT\ #Web3

百度沈抖:全栈自主可控,为应用而生

百度Geek说

BOE(京东方)携钙钛矿、新能源产品及解决方案亮相2025 SNEC 科技创新赋能行业绿色发展

爱极客侠

探索OrcaMind.ai打造的链上AI操作系统,开启Web3新时代

BlockChain先知

从OrcaMind.ai看链上AI操作系统,到底是技术噱头还是未来?

石头财经

ArkUI-X在Android上使用Fragment开发指南

龙儿筝

深入研究:速卖通商品详情API接口详解

tbapi

速卖通API接口 速卖通商品详情API接口 速卖通详情数据接口

商品中心—商品可采可补可售的技术文档(二)

不在线第一只蜗牛

Java 数据库

2025年第二届“兴智杯”智能编码创新应用开发挑战赛正式启动

阿里巴巴云原生

上海的朋友来找 RTE 社区交流吧!丨亚马逊云科技中国峰会,6.19-20,上海世博中心

声网

阿里P 8专家爆出:入职阿里必备的598道java面试题,内含算法

程序员高级码农

ArkUI-X构建Android平台AAR及使用

龙儿筝

华为Pura 80系列用户享Petal One三个月悦享套餐,6大会员权益一键领

最新动态

缓存技术在华为公有云环境中的挑战与应用_文化 & 方法_中间件小哥_InfoQ精选文章