写点什么

从 0 到 1 构建企业大数据体系

  • 2019-09-03
  • 本文字数:694 字

    阅读完需:约 2 分钟

从0到1构建企业大数据体系

QCon上海2018大会上,谢巍盛讲师做了《从 0 到 1 构建企业大数据体系》主题演讲,主要内容如下。


演讲简介


经过几年的迅猛发展,甜橙金融注册用户突破 5 亿,月均活跃 3000 多万用户,年交易额超 1, 700 亿。旗下拥有翼支付、红包套餐、甜橙理财、橙分期、甜橙保险、甜橙国际、甜橙信用等业务。业务的增长带来了海量的数据,也随即为大数据平台带来了严峻的挑战。


甜橙金融大数据经历了从 TD 到 Spark 的迁移;自助 BI 分析平台开发建设,高效支撑业务部门数据提取,数据下发及长短时,交互式查询需求;数据科学平台研发,真正做到“平民化”机器学习,以最低门槛赋能业务人员进行业务模型开发与应用;将流计算应用于诸如实时业务监控,实时交易风控监测等场景并通过优化提升 10 倍性能,利用复杂网络进行精准营销及团体反欺诈等。此次分享将聚焦我们在平台建设规划,架构选型及实践中碰到的问题并探讨诸如集群规划建设,作业调度优化,权限中心建设,标签体系构建及 AI 算法模型落地等方面的问题。

听众受益

传统互联网企业如何进行企业大数据体系建设,包括:


  1. 数据治理及数据应用;

  2. 企业大数据平台建设与应用,包括:自助 BI 分析平台、数据科学平台建设、流计算、复杂网络平台等;

  3. AI 应用中的案例分享并探讨 AI 赋能业务中最大的阻力是什么。


讲师介绍


谢巍盛


甜橙金融 大数据总监


曾任 Intel 大数据高级架构师,负责 Hadoop/Spark 生态开源工作,专注于分布式计算、机器学习模型与优化算法等领域,曾负责语音识别、图形图像处理、分布式机器学习算法研发及 AI 应用系统等项目。目前负责甜橙金融大数据和 AI 体系建设。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-09-03 15:092257

评论

发布
暂无评论
发现更多内容

新型生成式 AI 助手 Amazon Q(预览版)上线

亚马逊云科技 (Amazon Web Services)

人工智能 生成式人工智能

专科学历被裁,我是如何逆天改命的?

霍格沃兹测试开发学社

2023 OpenHarmony年度运营报告

OpenHarmony开发者

OpenHarmony

IBM Storage Ceph:现代数据湖仓的理想技术底座

财见

Ray on ACK 实践探索之旅 - RayCluster 篇

阿里巴巴云原生

阿里云 云原生 ray

关于「日志采样」的一些思考及实践

京东科技开发者

大前端CPU优化技术--NEON技术

江湖修行

性能优化 大前端 arm架构 异构计算

TDengine 签约杭州云润,助力某大型水表企业时序数据处理

TDengine

tdengine 时序数据库

WebSocket 教程:实现二进制数据传输的详细指南

Apifox

前端 后端 websocket 实时通信 二进制数据

低代码平台如何快速开发应用?

互联网工科生

低代码开发 JNPF

云电脑超详细技术讲解

天翼云开发者社区

云计算 云电脑

云MySQL 主节点故障

腾讯云混沌演练平台

混沌工程 MySQL主节点故障

【鸿蒙千帆起】高德地图携手HarmonyOS NEXT,开启智能出行新篇章

HarmonyOS开发者

HarmonyOS

Wireshark中的TCP协议包分析

小齐写代码

代码可控是什么意思?有哪些优势?

行云管家

信创 国产化 代码可控

云服务器是干什么的?其工作原理及优势解析

天翼云开发者社区

云计算 云服务器

重构商业生态:支付宝小程序云与AI融合的无限可能

TRaaS

小程序 支付宝小程序 AI 小程序云

职场逆袭:被裁成为薪资翻倍的契机

测试人

软件测试

跨语言高性能 RPC 框架 Focus 发布 V1.2.0

dinstone

RPC框架

发布、部署,傻傻分不清楚?从概念到实际场景,再到工具应用,一篇文章让你彻底搞清楚

EquatorCoco

Java 大数据 前端 部署

演讲回顾:如何为大规模研发团队加速CI构建,实现高效流水线

龙智—DevSecOps解决方案

DevSecOps Atlassian

从0到1构建企业大数据体系_QCon_谢巍盛_InfoQ精选文章