写点什么

arrow

收录了 arrow 频道下的 50 篇内容

Apache Doris 支持 Arrow Flight SQL 协议,数据传输效率实现百倍飞跃
Apache Doris 支持 Arrow Flight SQL 协议,数据传输效率实现百倍飞跃

随着数据湖分析等场景的兴起,对数据读取和传输速度提出更高的要求。Apache Doris 2.1 版本能够大幅提升数据传输效能。

Apache Arrow和Java:大数据传输快如闪电
Apache Arrow 和 Java:大数据传输快如闪电

Apache Arrow提出了一种跨语言、跨平台、内存中的列式数据格式,设计目标是免去数据序列化的需要,并减少复制操作的开销。

数据传输效率实现百倍飞跃,Apache Doris现已支持 Arrow Flight SQL 协议
数据传输效率实现百倍飞跃,Apache Doris 现已支持 Arrow Flight SQL 协议

为提供更高效的数据传输方案,Apache Doris 在 2.1 版本中基于 Arrow Flight SQL 协议实现了高速数据传输链路,使得数据传输性能实现百倍飞跃。

Apache Arrow Flight:快速数据传输框架
Apache Arrow Flight:快速数据传输框架

这是一个新的通用客户端服务器框架,用于简化大型数据集通过网络接口的高性能传输。

CI/CD 流水线创建方法:Monad、Arrow 还是 Dart ?
CI/CD 流水线创建方法:Monad、Arrow 还是 Dart ?

本文将用三种方法来创建 CI/CD 流水线。Monad 不能对流水线进行静态分析,Arrow 语法很难用,我称之为 Dart(不知道它是否已经有名字了)的一种轻量级的 Arrow 方法可以像 Arrow 一样进行静态分析,但语法比 Monad 更简单。

Apache Arrow:一种适合异构大数据系统的内存列存数据格式标准
Apache Arrow:一种适合异构大数据系统的内存列存数据格式标准

让数据在异构大数据系统间移动、处理地更快

聊聊 Apache Arrow

Apache Arrow是一种基于内存的列式数据结构,正向上面这张图的箭头,它的出现就是为了解决系统到系统之间的数据传输问题,2016年2月Arrow被提升为Apache的顶层项目。

顶级项目Apache Arrow被业界大量采用,Apache软件基金会骄傲总结其发展潜力
顶级项目 Apache Arrow 被业界大量采用,Apache 软件基金会骄傲总结其发展潜力

在Arrow成为顶级项目时,我们预测世界上大多数数据将在未来10年中通过Arrow进行处理。仅仅过了3年,我们就看到Arrow在各种分析、机器学习和人工智能工作负载中出现了大量的业界采用,并实现了价值增长。

Julien Le Dem 对使用 Apache Arrow 进行面向列的数据处理的未来的看法

Apache Arrow项目的项目管理委员会(PMC)主席Julien Le Dem在Data Eng Conf NY上对面向列的数据处理的未来作了介绍。Apache Arrow是在内存中执行列式计算的开源标准。InfoQ采访了Le Dem,以了解Arrow和Parquet的区别。

列式数据库和向量化

在这篇文章中,Siddharth Teotia讨论了列式数据库的优点,并介绍了Apache Arrow的向量化处理解决方案,以及基于Arrow的Dremio数据库中查询的详细处理。

深入浅出 ES6(七):箭头函数 Arrow Functions

ECMAScript 6已经正式发布了,作为它最重要的方言,Javascript也即将迎来语法上的重大变革,InfoQ特开设“深入浅出ES6”专栏,来看一下ES6将给我们带来哪些新内容。本专栏文章来自Mozilla Web开发者博客,由作者授权翻译并发布。

2021年 Rust 行业调研报告
2021 年 Rust 行业调研报告

截止到 2021年,Rust 连续五年成为 StackOverflow 语言榜上最受欢迎的语言。

CnosDB 2.0 Arrow Flight SQL使用指北
CnosDB 2.0 Arrow Flight SQL 使用指北

易用高效,数据访问不再难!Arrow Flight SQL让CnosDB 2.0 十亿行数据查询秒级响应成为可能!

开源
时序数据库
CnosDB
Arrow Flight SQL
开放式湖仓是湖仓一体架构的最终归宿
开放式湖仓是湖仓一体架构的最终归宿

本文回顾和分析了数据湖仓的历史和大数据平台的演进趋势,提出了基于增量计算的一体化趋势,以及该架构必然需要一个开放式的增量存储支撑。

Mojo 正式发布! Rust 能否与之匹敌?
Mojo 正式发布! Rust 能否与之匹敌?

编程语言是推动时代齿轮的抓手。

比 JDK 最高快 170 倍,蚂蚁集团开源高性能多语言序列化框架 Fury
比 JDK 最高快 170 倍,蚂蚁集团开源高性能多语言序列化框架 Fury

我们通过一套高度优化的序列化基础原语,结合 JIT 动态编译和 Zero-Copy 等技术,同时满足了性能、功能和易用性的需求,实现了任意对象自动跨语言序列化,并提供极致的性能。

Apache Spark 3.0 预览版正式发布,多项重大功能发布
Apache Spark 3.0 预览版正式发布,多项重大功能发布

Apache Spark 3.0 增加了很多令人兴奋的新特性

ARROW阿罗AOW币APP系统软件开发
ARROW 阿罗 AOW 币 APP 系统软件开发

  AOW七大亮点,开发搭建看我头像

系统开发
苹果开源一个可提升Apache Spark向量处理速度的插件
苹果开源一个可提升 Apache Spark 向量处理速度的插件

苹果公司发布了一个开源插件,可以帮助Apache Spark更有效地执行向量搜索。

各种类型的 Kanban 介绍

本文论述了五种创新性的Kanban。

arrow专题_资料-InfoQ中文网