红帽白皮书新鲜出炉!点击获取,让你的云战略更胜一筹! 了解详情
写点什么

大数据与机器学习周报 第 18 期:Apache Spark 2.0 正式版发布下载

  • 2016-08-01
  • 本文字数:1237 字

    阅读完需:约 4 分钟

业界新闻

  1. 《Apache Spark 2.0 正式版发布下载》:两个月前,Databricks 发布了 Apache Spark 2.0 的技术预览版,如下表所见,目前我们有 10% 的集群都在使用这个版本,根据客户使用新版的经验及反馈意见,新版得以发布,Databricks 很开心能成为 Spark 2.0 的首个商业供应商
  2. 《甲骨文宣布 93 亿美元收购 ERP 云服务商 NetSuite》:甲骨文对外宣布,已与云软件服务提供商 NetSuite 签订了最终协议。根据协议,甲骨文将以每股 109 美元现金收购 NetSuite,总额约为 93 亿美元。该交易预计将在今年完成

技术干货

  1. 《优酷蓝鲸近千节点的 Redis 集群运维经验总结》:Redis 是时下比较流行的 Nosql 技术。在优酷我们使用 Redis Cluster 构建了一套内存存储系统,项目代号蓝鲸。到目前为止集群有 700+ 节点,即将达到作者推荐的最大集群规模 1000 节点。集群从 Redis Cluster 发布不久就开始运行,到现在已经将近两年时间。在运维集群过程中遇到了很多问题,记录下来希望对他人有所帮助
  2. 《从小数据分析到大数据平台,这十几年来大数据开源技术是如何演进的?》:在 QCon 2016 北京站上,Druid 开源项目的负责人,同时也是一家位于旧金山的技术公司共同创始人的 Fangjin Yang 杨仿今老师分享了题为 《Evolution of Open Source Data Infrastructure》的主题演讲,在演讲里杨老师详细的介绍了开源大数据的过去,现在的形态以及未来几年发展的趋势和方向
  3. 《MongoDB 在 58 同城百亿量级数据下的应用实践》:58 同城作为中国最大的生活服务平台,涵盖了房产、招聘、二手、二手车、黄页等核心业务。58 同城发展之初,大规模使用关系型数据库(SQL Server、MySQL 等),随着业务扩展速度增加,数据量和并发量演变的越来越有挑战,此阶段 58 的数据存储架构也需要相应的调整以更好的满足业务快速发展的需求
  4. 为什么 Uber 工程师将 Postgres 数据库换成 MySQL?:早期的 Uber 架构是由 Python 编写的,使用的是 Postgres 数据库存储。从那时起,Uber 的架构就一直在变化,变成微服务模型和新的数据平台。具体的说,很多我们以前使用 Postgres 的地方现在改用 Schemaless,这是 Uber 基于 MySQL 构建的一个数据库分片层

深度观点

  1. 《易观 CTO 郭炜:从 0 到 N 建立高性价比的大数据平台》:其实,每一个大数据平台都不是凭空而起的,每个企业刚刚开始数据分析的时候,也不是上来就是一个大数据开源平台 Hadoop、Spark 这样一个存储的。今天分享的内容,其实是根据企业发展的不同阶段,针对业务的需求来选择不同的大数据架构,配置不同规模的数据处理人员,根据企业不同的时间点,帮助企业从 0 到 N,建立高性价比的大数据平台
  2. 《谷歌大脑与 Open AI 合著论文:机器视觉的一个致命缺陷》:计算机视觉很厉害,但是,只要稍加修改,比如使用美图软件加一个滤镜,计算机视觉就错误频出。MIT 报道把这一缺陷称为计算机视觉的“阿喀琉斯之踵”,认为这是目前视觉领域的一个致命缺陷。如果计算机视觉要得到应用,比如用人脸识别侦察罪犯,但却连“美图秀秀”都搞不定的话,那确实是一个比较严重的问题

公众号推荐:

2024 年 1 月,InfoQ 研究中心重磅发布《大语言模型综合能力测评报告 2024》,揭示了 10 个大模型在语义理解、文学创作、知识问答等领域的卓越表现。ChatGPT-4、文心一言等领先模型在编程、逻辑推理等方面展现出惊人的进步,预示着大模型将在 2024 年迎来更广泛的应用和创新。关注公众号「AI 前线」,回复「大模型报告」免费获取电子版研究报告。

AI 前线公众号
2016-08-01 19:001911
用户头像
丁涛 越努力,越幸运

发布了 35 篇内容, 共 91032 次阅读, 收获喜欢 3 次。

关注

评论

发布
暂无评论
发现更多内容

5 分钟,快速入门 Python JWT 接口认证

星安果

Python JWT

使用PyTorch构建神经网络模型进行手写识别

Shirakawa

神经网络 机器学习 深度学习 PyTorch 手写识别

架构实战营模块四作业

maybe

getInteger还是getIntValue,这是一个问题

FunTester

Java json Groovy

这是一次鸡肋的代码审计

网络安全学海

网络安全 信息安全 计算机 渗透测试 安全漏洞

一周信创舆情观察(7.26~8.1)

统小信uos

摘下手机赛场的夏季“金牌”,荣耀的“飞人之路”

脑极体

专访融云 CTO 任杰:构建通信云全能力

融云 RongCloud

从关门“振动”说起,在这部剧本杀综艺里,爱奇艺隐藏了多少技术“小心机”

爱奇艺技术产品团队

综艺节目 互动视频技术 爱奇艺

强推!华为内部都在用的783页大数据处理系统:Hadoop源代码pdf

Java 编程 架构 面试 架构师

人在年轻的时候,最核心的能力是什么?

非著名程序员

认知提升 个人提升 提升自我 8月日更

资深大牛带你了解源码!最新Android面试题整理

欢喜学安卓

android 程序员 面试 移动开发

现有市值管理机器人|交Y机器人系统源码搭建

Geek_23f0c3

做市机器人 去中心化市值管理机器人

云原生时代,腾讯如何做好容器安全体系建设?

腾讯安全云鼎实验室

腾讯云 容器

一个算法“拿下”两个榜单!爱奇艺ICCV 2021论文提出人手三维重建新方法

爱奇艺技术产品团队

vr 论文 ICCV2021 高精度三维重建

FastApi-06-请求体-3

Python研究所

FastApi 8月日更

阿里顶级大佬整理出十六个专题的Java面试指南,金九银十不用愁!

Java 编程 架构 面试 架构师

趁着课余时间学点Python(五)用课余时间提升自己关于高级数据类型的知识

ベ布小禅

8月日更

架构实战营毕业设计

Saber

架构实战营

Github首次开放,一天遭狂转 50w 次!阿里内部不外传的 100 万字 Java 面试手册!

Java 程序员 架构 面试 计算机

字节跳动Android面试:2021Android大厂面试知识分享

欢喜学安卓

android 程序员 面试 移动开发

拍乐云创始人赵加雨:沉浸式音视频加持数智化未来世界

拍乐云Pano

中台的前世今生

涛哥 数字产品和业务架构

企业架构 中台架构 中台的由来

贝壳找房基于StarRocks构建全新统一的极速OLAP平台实践

StarRocks

数据库 数据分析 OLAP StarRocks

维护数据隐私和增强竞争优势的秘密

九河云安全

101道经典JavaScript面试题总结(附答案,建议收藏)

前端依依

面试 大前端 JavaScrip

PostgreSQL正强势回归!

数据库 大数据 时序数据库 tsdb 数据智能

如何洞察出推荐的关键时刻

石云升

推荐 用户体验 体验设计 8月日更

Java操作Office:POI之word生成

程序员架构进阶

Java Apache POI 技术应用 8月日更 代码实战

使用 MVC 架构构建 Flask CRUD 应用程序

DisonTangor

Python flask

外包三年给整废了,备战两月终拿到4家大厂offer,阿里P6+这回稳了

Java架构师迁哥

大数据与机器学习周报 第18期:Apache Spark 2.0正式版发布下载_大数据_丁涛_InfoQ精选文章