实时计算

关注
收录了实时计算频道下的 2380 篇内容
关注实时计算技术的发展趋势和一线技术实践
  • 全部
  • 文章
  • 视频
  • 话题
  • 电子书
通往 AGI 之路,数据系统还需挑战哪些物理极限?
通往 AGI 之路,数据系统还需挑战哪些物理极限?

分布式 Data Warebase 是性能、正确性、实时性这三个业务核心需求的必然推论,它不是一个发明,而是一个发现。

数据平台竞技场 2024:AI 或成为必杀技,但面临三个致命挑战
数据平台竞技场 2024:AI 或成为必杀技,但面临三个致命挑战

以 Hadoop 为基础的大数据体系架构已逐步陈旧,新一代的分析平台以及更发挥 AI 能力的数据平台架构仍有非常多的疑问还没有得到解答。

苹果开源一个可提升Apache Spark向量处理速度的插件
苹果开源一个可提升 Apache Spark 向量处理速度的插件

苹果公司发布了一个开源插件,可以帮助 Apache Spark 更有效地执行向量搜索。

Flink十周年专访莫问:存算分离2.0架构的探索与展望
Flink 十周年专访莫问:存算分离 2.0 架构的探索与展望

Flink 的进展和未来规划

Apache Pinot 1.0发布,提供实时的分布式OLAP数据存储
Apache Pinot 1.0 发布,提供实时的分布式 OLAP 数据存储

Apache Pinot 是一个使用 Java 编写的开源列式分布式数据存储系统。

作业帮实时计算平台高可用实践
作业帮实时计算平台高可用实践

业务对实时计算的需求越来越多,对实时任务的稳定性要求也越来越高。

作业帮基于 DolphinScheduler 的数据开发平台实践
作业帮基于 DolphinScheduler 的数据开发平台实践

本文分享了作业帮对数据开发平台的一些思考。

民营银行生存法则“唯快不破”,华瑞银行风险特征计算平台如何做到实时响应
民营银行生存法则“唯快不破”,华瑞银行风险特征计算平台如何做到实时响应

“下一个要攻破的问题就一个字——快。”

四次迭代,视源股份(CVTE)大规模实时流计算应用历程
四次迭代,视源股份(CVTE)大规模实时流计算应用历程

流计算技术探索中根据应用场景和需求变化,技术也迭代了四次,最终期望在技术演进走在业务前面,通过技术创新改变业务。

HubSpot 使用 Apache Kafka 泳道实现工作流操作的实时处理
HubSpot 使用 Apache Kafka 泳道实现工作流操作的实时处理

HubSpot 采用在多个 Kafka 主题(称为泳道)上为同一生产者路由消息的方式,避免了消费者群组滞后的积压,并且能够优先处理实时流量。通过自动和手动相结合的方式探测流量峰值,该公司能够确保大多数消费者的工作流能够在无延迟的情况下执行。

上云还是下云:章文嵩博士解读真正的云原生 Kafka 十倍降本方案!
上云还是下云:章文嵩博士解读真正的云原生 Kafka 十倍降本方案!

本文从技术架构的角度,来揭秘 AutoMQ 为 Kafka 量身打造的云原生十倍降本方案。

ClickHouse彪悍发言:云数仓死贵死贵的,Snowflake这种就不应该成为当前主流!
ClickHouse 彪悍发言:云数仓死贵死贵的,Snowflake 这种就不应该成为当前主流!

ClickHouse 版本的“云数据库是不是杀猪盘”?

上海华瑞银行风控数据团队负责人丁清华确认出席 FCon,分享上海华瑞银行风险特征计算平台演进路线
上海华瑞银行风控数据团队负责人丁清华确认出席 FCon,分享上海华瑞银行风险特征计算平台演进路线

随着大数据计算技术的成熟,上海华瑞银行建设了风险特征计算平台,晚上了平台功能,将产品打造成全行的特征计算平台,并将功能同风险策略、模型等日常场景紧密结合。

是时候基于云重新设计 Kafka 了!AutoMQ 如何实现 Kafka 十倍的降本增效
是时候基于云重新设计 Kafka 了!AutoMQ 如何实现 Kafka 十倍的降本增效

AutoMQ 研发团队积累了十多年的消息队列生产运维经验。

兴业银行大数据基础平台负责人刘家闰确认出席FCon,分享兴业银行实时数据服务实践
兴业银行大数据基础平台负责人刘家闰确认出席 FCon,分享兴业银行实时数据服务实践

兴业银行实时数据服务技术不断发展,离线计算和实时计算如何整合、批量数据和流式数据如何作为一个整体提供服务,成为一个重要课题。

存算分离实践:构建轻量、云中立的大数据平台
存算分离实践:构建轻量、云中立的大数据平台

值得一提的是,多点团队利用 JuiceFS 社区版实现了与 Ranger 组件进行权限的对接。

LinkedIn开源Iris消息处理器,速度比旧系统快86.6倍
LinkedIn 开源 Iris 消息处理器,速度比旧系统快 86.6 倍

LinkedIn 开源 Iris 消息处理器,相比之前的处理器,在平均负载下速度快 4.6 倍,在高负载下快 86.6 倍。

中邮消费金融李远鑫:如何用数字化搞定获客成本和用户运营难题?
中邮消费金融李远鑫:如何用数字化搞定获客成本和用户运营难题?

消费金融公司的整体数字化进程比其它金融机构要快得多。

信也科技副总裁陈磊:数据应用与数据合规如何兼顾?
信也科技副总裁陈磊:数据应用与数据合规如何兼顾?

如何处理好金融数智化过程中的数据「养料」?

中国工商银行大数据和人工智能实验室 / 部门经理袁一确认出席 FCon ,分享工商银行大数据平台助力全行数字化转型之路
中国工商银行大数据和人工智能实验室 / 部门经理袁一确认出席 FCon ,分享工商银行大数据平台助力全行数字化转型之路

工商银行大数据平台在近几年数字化转型过程中,对大数据平台的使用越来越重。

FCon联席主席吴震操:金融数据治理既是技术问题也是管理问题
FCon 联席主席吴震操:金融数据治理既是技术问题也是管理问题

金融行业数字化转型的挑战主要表现在业务复杂、数据异构,强监管,和业务传统带来的惯性。

用 Rust 编写核心组件!独家揭露阿里云开源 GraphScope 如何成为全球最快图计算引擎
用 Rust 编写核心组件!独家揭露阿里云开源 GraphScope 如何成为全球最快图计算引擎

技术详解阿里云开源图计算引擎 GraphScope 如何打破世界纪录

联想戴炜:以三种交付方式全面支持三类算力场景的混合计算需求
联想戴炜:以三种交付方式全面支持三类算力场景的混合计算需求

力赋高质量发展”为主题的 2023 中国算力(基础设施)大会在银川召开。作为我国算力领域、数字经济方面的标志性大会,会议聚焦算力前沿技术领域,展示算力融合应用成果,推动算力产业加速发展。

字节跳动的多云云原生实践之路
字节跳动的多云云原生实践之路

只有构建好适合自身的分布式云架构,才能真正做到“用好云”。

汇丰科技:汇丰数据科学家平台的探索与实践
汇丰科技:汇丰数据科学家平台的探索与实践

作为全球规模最大的银行和金融服务机构之一,汇丰始终致力于实施国际化策略,为客户提供国际化的机遇和视野。

Flink社区风波:比Flink快十倍的技术真存在吗?
Flink 社区风波:比 Flink 快十倍的技术真存在吗?

阿里 Flink 团队成员质疑创业公司数据库未能达到比 Flink 快 10 倍的性能提升,RisingWave 回应

Hadoop 上云: 存算分离架构设计与迁移实践
Hadoop 上云: 存算分离架构设计与迁移实践

介绍了 Hadoop 上云的架构设计、选型的思考、组件评估以及数据迁移的整个过程。

蚂蚁链 Web3 技术攻坚再进一步:推出基于零知识证明的可信计算架构
蚂蚁链 Web3 技术攻坚再进一步:推出基于零知识证明的可信计算架构

蚂蚁链发布零知识证明技术架构,可满足数据“隐私保护”、“可验证”双要求

    IDEA 研究院预训练大模型的 AI 系统实战
    IDEA 研究院预训练大模型的 AI 系统实战

    陈崇沛 | IDEA研究院 AI系统架构师

    立即下载
    QCon 内容策划思路与参会指南

    邓艳琴(Clara) | 极客邦科技 会议主编

    立即下载
    大规模微服务破局之道:合并编译

    尹旭然 | 字节跳动 后端研发工程师

    立即下载