《HarmonyOS:领航者说》技术公开课来啦,大咖分享、实战解码,不容错过 了解详情
写点什么

亿级数据存储

收录了 亿级数据存储 频道下的 50 篇内容

万亿级日志与行为数据存储查询技术剖析

近些年,大数据背后的价值也开始得到关注和重视,越来越多的企业开始保存和分析数据,希望从中挖掘大数据的价值。大数据产生的根本还是增量数据,单纯的用户数据不足以构成大数据,然而用户的行为或行为相关的日志的数据量,加之随着物联网的发力,产生的增量数据将不可预估,存储和查询增量数据尤为关键。

TiDB + ES:转转业财系统亿级数据存储优化实践

以下文章来源于转转技术 ,作者戴美琪

数据库
TiDB
架构周报| 万亿级日志与行为数据存储查询技术剖析

万亿级日志与行为数据存储查询技术剖析

探索与发现,揭秘百度万亿时序数据存储架构
探索与发现,揭秘百度万亿时序数据存储架构

本文带你走进百度万亿时序数据存储架构,希望能让你有更深的理解。

数据存储量最大提升10倍、最高支持千亿向量规模!腾讯云向量数据库升级多项核心功能
数据存储量最大提升 10 倍、最高支持千亿向量规模!腾讯云向量数据库升级多项核心功能

腾讯云全面升级向量数据库多项核心性能,最高支持千亿级向量规模和500万QPS峰值能力。

MySQL如何实现万亿级数据存储?
MySQL 如何实现万亿级数据存储?

搭建Mycat+Zookeeper+HAProxy+Keepalived+MySQL高可用架构实现MySQL的万亿级数据存储!!

MySQL
分布式
微服务
高可用
mycat
万亿级对象存储的元数据系统架构设计和实践
万亿级对象存储的元数据系统架构设计和实践

百度沧海·存储通过新一代元数据系统的设计和实践,使得对象存储 BOS 可以单桶支持万亿对象数、百万 QPS,并且支撑了原生层级 Namespace 的上线和智能生命周期的升级等

对象存储
文件存储
百度沧海
万亿级对象存储的元数据系统架构设计和实践

百度沧海·存储通过新一代元数据系统的设计和实践,使得对象存储 BOS 可以单桶支持万亿对象数、百万 QPS,并且支撑了原生层级 Namespace 的上线和智能生命周期的升级等。

对象存储
百度沧海
亿级 GPS 数据如何实现高效存储和查询?不同类型数据库选型分析
亿级 GPS 数据如何实现高效存储和查询?不同类型数据库选型分析

选择到一款合适的数据库,对于打造一个适合业务发展的数据架构至关重要。为了找到该问题的最优解,涛思数据解决方案架构师从数据本质出发进行分析,结合具体实践输出本文,给到大家参考。

涛思数据
时序数据库
​TDengine
taosdata
千亿级数据量,毫秒级读写,深度剖析探探LSM Tree存储引擎
千亿级数据量,毫秒级读写,深度剖析探探 LSM Tree 存储引擎

探探是挚文集团旗下一款月活超千万的社交软件,其部分核心业务数据依托于LevelDB进行存储,特别是用户滑动行为所生成的关系链及其各类关系类型的计数系统。该平台能够支持用户间关系的高效搜索与统计功能,单节点即可承载千亿级别的庞大信息量。在如此规模的

分布式架构
存储引擎
回怼篇:我10亿级ES数据迁到MongoDB节省90%成本!
回怼篇:我 10 亿级 ES 数据迁到 MongoDB 节省 90% 成本!

没有万能的数据库,本文最后会总结MongoDB和Es各自的适用场景,以客观立场分析评价MongoDB和Es,拒绝“捧一个,踩一个”。

京东物流基于Doris的亿级数据自助探索应用
京东物流基于 Doris 的亿级数据自助探索应用

京东智慧物流在数据应用方面,主要是基于大数据预测分析技术实现智能化的调度、决策,提升物流效率,最终提升客户的体验。

千亿数据扛不住,三思后还是从MySQL迁走了……
千亿数据扛不住,三思后还是从 MySQL 迁走了……

线上某IOT核心业务集群之前采用MySQL作为主存储数据库,随着业务规模的不断增加,MySQL已无法满足海量数据存储需求,业务面临着容量痛点、成本痛点问题、数据不均衡问题等。

EB 级 HDFS 集群磁带存储资源池的建设实践
EB 级 HDFS 集群磁带存储资源池的建设实践

本文主要介绍HDFS 磁带存储资源池建设的实践,拓展 HDFS 异构存储到磁带存储介质,强化了 HDFS 低成本海量数据存储能力。

美团点评万亿级 KV 存储架构与实践
美团点评万亿级 KV 存储架构与实践

本次分享介绍美团点评的 KV 存储 Cellar 和 Squirrel 架构、服务优化实践以及 KV 存储的技术发展趋势。

QQ音乐PB级ClickHouse实时数据平台架构演进之路
QQ 音乐 PB 级 ClickHouse 实时数据平台架构演进之路

本文基于QQ音乐海量大数据实时分析场景,通过QQ音乐与腾讯云EMR产品深度合作的案例解读,还原一个不一样的大数据云端解决方案。

火山引擎VeDI DataWind 研发负责人徐冰泉确认出席QCon北京,分享BI+AI,撬动千亿级数据的智能洞察实践
火山引擎 VeDI DataWind 研发负责人徐冰泉确认出席 QCon 北京,分享 BI+AI,撬动千亿级数据的智能洞察实践

融合 BI 与 AI,撬动千亿级数据智能洞察的实践经验,探讨大数据分析领域的发展趋势与前景。

数据湖火了,那数据仓库怎么办?
数据湖火了,那数据仓库怎么办?

生物本身就是算法,生命是不断处理数据的过程;意识与智能的分离;拥有大数据积累的外部环境将比我们自己更了解自己;

百度图数据库的技术剖析和应用实践
百度图数据库的技术剖析和应用实践

本次分享介绍图数据库的设计和实践经验。

美团OCTO万亿级数据中心计算引擎技术解析
美团 OCTO 万亿级数据中心计算引擎技术解析

本文介绍 Watt 计算引擎的演进历程及架构设计,以及其全面提升计算能力、吞吐能力、降低运维成本所采用的各项技术方案。。

亿级数据存储专题_资料-InfoQ中文网