hdfs

10年+,阿里沉淀出怎样的搜索引擎?
10 年 +,阿里沉淀出怎样的搜索引擎?

本文以1688主搜为例介绍搜索全链路知识点。

去哪儿Hadoop集群Federation数据拷贝优化
去哪儿 Hadoop 集群 Federation 数据拷贝优化

HDFS Federation 是 Hadoop-0.23.0 中为解决 HDFS 单点限制而提出的 NameNode 水平扩展方案。该方案可以为 ...

巧用Amazon EMR节省数据分析成本
巧用 Amazon EMR 节省数据分析成本

Amazon EMR是云上的数据分析平台,通过Amazon EMR的图形化或命令行接口,用户可以快速搭建和部署基于Amazon...

通过 Amazon EMR 重新配置动态修改集群
通过 Amazon EMR 重新配置动态修改集群

通过重新配置功能,现在可以更改正在运行的 EMR 集群上的配置。

实时计算引擎在贝壳的应用与实践
实时计算引擎在贝壳的应用与实践

本文介绍实时计算引擎在贝壳的应用与实践。

万亿级消息背后: 小米消息队列的实践
万亿级消息背后: 小米消息队列的实践

本文介绍消息中间件在企业 IT 架构中的重要价值在落地小米业务过程中的遇到的问题和实践经验。

服务15亿+游戏用户数据的腾讯iData分析中心进化之路:计算引擎基础能力构建
服务 15 亿 + 游戏用户数据的腾讯 iData 分析中心进化之路:计算引擎基础能力构建

是国内领先的智能化数据服务平台,致力于为游戏提供一站式数据分析,上线至今覆盖了567+款业务,涵盖15亿...

HDFS Federation 在美团点评的应用与改进

HDFS Federation为HDFS系统提供了NameNode横向扩容能力。然而作为一个已实现多年的解决方案,真正应用到已...

HDFS 集中式的缓存管理原理与代码剖析

Hadoop 2.3.0已经发布了,其中最大的亮点就是集中式的缓存管理(HDFS centralized cache management)。...