写点什么

4 篇论文入选数据库顶会,腾讯云数据库再迎新突破

  • 2024-08-30
    北京
  • 本文字数:1304 字

    阅读完需:约 4 分钟

大小:658.80K时长:03:44
4篇论文入选数据库顶会,腾讯云数据库再迎新突破

日前,InfoQ 获悉,腾讯云数据库 4 篇论文入选国际数据库顶级会议 VLDB,多项优化创新方案突破了数据库领域的性能瓶颈数等多项难题,技术创新能力再获国际权威认可。

 

VLDB(International Conference on Very Large Data Bases)是数据库研究领域历史悠久的国际会议,与 ICDE 和 SIGMOD 并称数据库三大顶级会议,每年为数据库领域提供大量高质量的研究论文和研究成果,具有重要的学术价值和行业引导意义。

 

近些年,随着新兴技术迅猛发展,各行各业产生的数据量呈爆炸式增长分布式、云原生等多种场景数据库应运而生。与此同时,分布式场景也迎来如何权衡性能与一致性等一系列新的挑战。

 

在入选论文——《TDSQL: Tencent Distributed Database System》中,腾讯云分享了设计、开发和优化大规模分布式数据库系统 TDSQL 的经验。在分布式架构上,TDSQL 通过大量的实现和优化,包括内核优化、物理复制的实现与优化、分布式锁的优化等,使得 TDSQL 能在保持一致性的情况下有效处理大量数据和高并发。在去年 3 月的 TPC-C 基准测试中,TDSQL 性能达到每分钟 8.14 亿笔交易(tpmC),打破了世界纪录。

 

在高性能的键值存储引擎中,高性能索引结构往往需要占用过量内存以换取极高的索引性能。针对这一热门研究课题,腾讯云与华中科技大学合作的最新研究成果《FluidKV: Seamlessly Bridging the Gap between Indexing Performance and Memory-Footprint on Ultra-Fast Storage》中提出了一种兼顾高读写性能和低内存占用的索引机制。


这种基于动态多阶段的索引架构 FluidKV,可将索引项从内存占用率高的阶段,快速迁移到内存友好的持久存储阶段,利用高性能存储设备的带宽减轻内存压力。在此基础上,通过匹配 IO 传输粒度,并根据用户负载读写比例优化缓冲等方式,可以让读写性能保持在最高档位。实验结果显示,对比持久索引的相关工作,FluidKV 的读写性能均处于最高一档,同时最多可减少 90%的内存占用。

 


  (腾讯云数据库团队现场分享论文)

 

此外,腾讯云与北京大学、北京交通大学合作的最新研究成果也入选了 2024 年 VLDB 长文,文章《Efficient and Accurate SimRank-based Similarity Joins: Experiments, Analysis, and Improvement》提出了高效且准确的 SimRank 图节点相似度连接算法,实验表明,该算法较已有方法实现了查询效率近一个数量级的提升。

 

随着 CPU、大内存、高速存储设备的发展,让 CPU 更多的用于实际的计算任务是高效利用这些新硬件的关键之一。但目前,整个数据库系统中,存在大量的等待事件,会导致 CPU“卡住”,即让 CPU 处于无效的等待状态,造成 CPU 资源的浪费。

 

在入选论文《The Art of Latency Hiding in Modern Database Engines》中,腾讯云则联合西蒙·弗雷泽大学,针对高性能的 OLTP 处理难题,提出了基于双队列的流水线事务处理机制,可以进一步减少 CPU 的无效等待,让 CPU 充分应用于实际的计算任务中。实验表明,在数据量大于内存、混合负载的场景下,该系统可取得 33 倍的性能提升。

 

作为国内数据库行业先行者,腾讯云已经深耕数据库领域十余年,服务超过 50 万客户,未来,腾讯云将持续深耕实际场景需求,不断探索与攻坚数据库难题,推动数据库领域的学术进步与技术成果转化,助力更多企业实现业务创新与高质量发展。


2024-08-30 10:0410075
用户头像
李冬梅 加V:busulishang4668

发布了 1111 篇内容, 共 721.1 次阅读, 收获喜欢 1253 次。

关注

评论

发布
暂无评论
发现更多内容

位运算符在 JS 中的妙用

浩浩子

如何学习数据结构与算法

C语言与CPP编程

数据结构 算法

刘华:看板那么好,为什么都成了摆设?

刘华Kenneth

架构 敏捷 精益 看板

你真的知道基于区块链的「云计算」是什么吗?

CECBC

云计算

Java 并发基础(一):synchronized 锁同步

看山

Java Java并发 并发编程

智能时代的TCL之舞

脑极体

力扣(LeetCode)刷题,简单+中等题(第26期)

不脱发的程序猿

面试 LeetCode 28天写作 算法面经 3月日更

ARTS-week 4

steve_lee

是时候下载Android11系统源码和内核源码了~

刘望舒

android Android进阶

MySQL主从架构原理

无心

MySQL

Img、net & page新展望:连接感知

云小梦

JavaScript html 网络 用户体验 连接感知

用栈、回溯算法设计迷宫程序

不脱发的程序猿

回溯算法 28天写作 3月日更 迷宫程序

阿里二面,面试官居然把 TCP 三次握手问的这么细致

Java 编程 架构 面试 网络

Redis 作为缓存是如何工作的

escray

redis 学习 极客时间 3月日更 Redis 核心技术与实战

推荐引擎概述

跳蚤

第八章作业—张红珊

zzz

使用 Typescript 的一些注意事项

浩浩子

我对PageRank 算法的理解

跳蚤

2021拼多多(Java岗)面经最新分享

比伯

Java 编程 架构 面试 计算机

框架是教科书,但是思考架构更有价值

吴脑的键客

架构师 知识图谱

深圳应用区块链提升政务服务效能调查

CECBC

电子发票

区块链列入数字经济重点产业 机构预测其大规模应用将加速

CECBC

数字经济

音视频开发经验之路【三】吐血干货,直播首屏耗时400ms以下的优化实践

鱼哥

音视频

在公司九年被裁是谁的问题?

石云升

离职 28天写作 职场经验 3月日更

MySQL 锁

无心

MySQL

shell学习

我是程序员小贱

3月日更

『BATcoder』都2021年了,是时候安装Ubuntu了!

刘望舒

android Android进阶

金三试水Java社招,历经“阿里+字节+bigo”等5家面经

Java架构师迁哥

操作系统的内存管理(中)

鲁米

操作系统 内存管理

一个视频带你编译自己的Android系统!

刘望舒

android Android进阶

加密解密之 crypto-js 知识

浩浩子

4篇论文入选数据库顶会,腾讯云数据库再迎新突破_腾讯_李冬梅_InfoQ精选文章