NVIDIA 初创加速计划,免费加速您的创业启动 了解详情
写点什么

系列免费线上公开课:大数据和人工智能如何助力信息安全?

  • 2017-10-29
  • 本文字数:3581 字

    阅读完需:约 12 分钟

中国信息安全市场中,瀚思科技是一家跨界于大数据和信息安全的公司。

瀚思科技技术介绍

瀚思科技通过安全智能分析和内部威胁防护切入下一代的安全市场,让安全智能可见、可知、可控。他们相信未来是安全是智能的,通过大数据的分析来提供用户安全智能的能力是未来的核心能力。瀚思通过大数据平台、机器学习与人工智能,结合具体业务和安全场景,来自主判断是否有恶意行为行为发生。

瀚思团队成员 2014 年便开始用机器学习做病毒分类引擎,是最早将人工智能和信息安全结合的团队之一。是中国第一家大数据安全企业,也是网络安全全球 500 强。

大数据和人工智能如何助力信息安全?

整个企业安全市场从第一款杀毒软件到现在时间并不长,大概从 1987 年开始,我们有了第一款杀毒软件。两年之后有了第一个蠕虫。到 1992 年我们才有第一款商业防火墙。基本上这个时期的信息安全是一个被动的应对姿态,有新的安全威胁基本上要过一段时间后才会推出相应的产品。一直到 2010 年之前,安全防御技术相对来讲都是很固定的。2010 年被称为是 APT 元年,防御理念变为分析,而不是单纯检测、非实时、用户参与。

安全领域很早就开始使用大数据分析,比如说 2004 年左右做垃圾邮件处理数据量为一天上百万封。但受技术限制只能处理比较单一的数据,比如做垃圾邮件处理和病毒样本处理分别需要两个系统,基本上不会用通用的方案。

随着 Hadoop 的方案比较成熟,一直到最近更好的 Spark 的方案成熟之后,才有了比较强的各种数据多样性数据的方案。包括用 Spark 做 BI 类型的分析,用算法做多样性数据的整合,从里面抽出比较重要的威胁情报。在企业内部部署的数据可以做攻击链分析,这些都是由于大数据可以让我们做更复杂的多样性数据分析的典型例子。

真正对企业安全会造成比较大的改变的,是人工智能。从 2010 年左右开始,我们开始使用卷积神经网络,可以用深度学习做病毒样本的分类。这个方案红到什么程度呢?基本上所有的硅谷创业公司只要是安全的都会说他用人工智能。另外一些领域里面,比如行为分析里面,可以用无监督学习算法或者一些统计类的算法,比如大家听得多的用户行为分析或者反欺诈,里面都会用统计类的算法。

所有这些新的一些技术能导致更快的开发出更复杂的一些产品,有个明显趋势就是很多的产品被综合了。这个时候就冒出了新安全产品,如威胁情报和大数据安全分析。

瀚思科技大数据安全分析产品框架

瀚思科技具有四条产品线。第一个是大数据安全分析平台 HanSight Enterprise,是最核心的产品,基于大数据、机器学习和行为识别技术,真正实现针对安全大数据的有效存储与实时分析。其余三块都是以这个分析平台为核心扩展出来。包括 HanSight UBA(瀚思用户行为分析系统)、HanSight NTA(瀚思网络流量分析系统) 和 HanSight TI(瀚思安全威胁情报)。

实际上这几个产品线与安全分析平台,都是互相关联、互为加强和补充的。威胁情报可以帮助把网络行为、用户行为关联串起来,安全分析中心把所有的日志汇总,反过来又为用户行为分析提供数据。

线上技术分享预告

了解了瀚思技术之后,我们正式宣布:11 月,AI 前线联合瀚思科技,将给大家带来四场技术干货分享!每周一次,周四晚八点半,在 AI 前线社群中进行。

话题 1:企业如何整合复杂技术打造分析平台

分享主题:随着企业安全边界的扩大化模糊化、各类威胁新出速度越来越快、影响越来越广,视企业安全边界为静态、仍然依赖各种特征码技术的传统安全思路早已落后,无法实际解决安全问题。必须通过各种创新,整合大数据、人工智能、可视化等领域的最新技术进展,安全产品才能解决目前和将来的企业安全难题。

但如何选择并整合各种技术是复杂系统工程,比常规企业安全软件开发需要考虑更多因素。本次分享中对大数据、人工智能、可视化的最新进展和应用案例做个总结,重点讨论大数据平台云部署运维、交互批处理与实时流处理的关系、有监督学习解决的安全问题和大数据可视化这四个细分领域。

演讲人:万晓川先生现任瀚思科技首席科学家,负责瀚思核心技术架构与安全前沿研究。万先生是核心安全算法、APT 沙箱、异常检测(Anomaly Detection)和用户行为分析(User Behavior Analysis)的世界级专家,拥有 10 项安全行业美国专利并长期积极倡导将机器学习应用于信息安全。

作为瀚思科技首席科学家,万晓川主要负责瀚思核心技术架构与安全前沿研究,并倡导和研究将机器学习应用于信息安全。

在加盟瀚思之前,万先生于 2004 加入全球最知名的安全公司 - 趋势科技(Trendmicro),持续专注基于机器学习的前瞻性安全产品研发工作,包括病毒样本自动分类、基于指令翻译的超小型沙箱、网络流扫描设备,同时还设计了趋势科技的整个病毒分析后台架构。

2006 年万晓川先生在全球范围内首度将机器学习应用于病毒自动分析系统,在 0.1% 误报率时可以侦测 71% 的未知病毒,这项技术保证了趋势科技的杀毒能力持续排名世界前三。2007 年万先生再次成功将机器学习应用在垃圾邮件识别,并取得 96% 以上的全球第一识别率,战胜了思科花 8.3 亿美元收购的 IronPort。

自 2010 年起,万晓川先生以高级架构师和项目总监身份主导设计并开发了网页安全模拟分析引擎和 APT 防御产品线的沙箱,并在 2014 年全球权威的 NSS lab 评测中击败了主要竞争对手 FireEye,获得 APT 检测率世界第一。万晓川先生曾是趋势科技中国研发中心技术级别最高的核心技术人员,也曾是趋势科技专利委员会中国区主席。

万晓川先生毕业于东南大学少年班。

欢迎安全、大数据、AI 领域的小伙伴加盟瀚思科技参与前沿技术研发(自荐邮箱 hr@hansight.com)

话题 2 :基于 AWS 构建高可用性的大数据安全分析平台

分享主题:面向企业的 SaaS 服务是一个高速增长的领域,近年来各种初创公司和融资事件层出不穷。各类公有云平台也让创业公司更加容易的推出自家的 SaaS 服务。这里我们将要介绍如何在 AWS 上快速构建起基于 SaaS 的大数据安全解决方案,如何基于 AWS 的基础设施构建高可用性以及高可扩展性的系统。最终,通过公有云,通过 SaaS 的方式,交付安全价值给客户。

演讲人:汪磊,瀚思科技研发总监,12 年企业级安全产品开发经验,擅长大数据技术架构以及大规模 SaaS 服务架构,拥有两项美国专利,目前带领团队负责瀚思产品研发工作,曾任趋势科技资深项目经理、途牛旅游网研发总监职务,曾带领团队在 AWS 平台构建 SaaS 安全网关,直接与美国 Zscaler 竞争。

毕业于华中科技大学,获得软件理论硕士学位

话题 3: 基于深度学习的二进制恶意样本检测

分享主题:全球正在经历一场由科技驱动的数字化转型,传统技术已经不能适应病毒数量飞速增长的发展态势。而基于沙箱的检测方案无法满足 APT 攻击的检测需求,也受到多种反沙箱技术的干扰。在充分考察过各种技术方案的优劣后,瀚思科技开发出了基于深度学习的二进制病毒样本检测技术,可以做到沙箱同等水平的 99% 的检测准确率,而误报率低于 1/1000。基于深度学习的病毒检测技术无需沙箱环境,直接将样本文件转换为二维图片,进而应用改造后的卷积神经网络 Inception V4 进行训练和检测。极大的简化了病毒检测流程,速度更是远超沙箱技术,可以做到日均百万样本的检测量。由于深度学习是自动抽取数千万样本的海量特征,使得我们的深度学习模型具有极强的通用性,即使数月不更新,也能做到大于 90% 的检测率。

主讲人:吴睿 ,瀚思科技高级算法专家,用户行为分析专家毕业于 University of Missouri –Columbia 计算机系

精通领域:异常检测算法,内部威胁检测,深度学习

话题 4 基于 Flink 流处理的动态实时超大规模用户行为分析

分享主题:传统的用户行为分析系统通常以离线批处理模式根据既定规则对用户数据进行分析。规则相对简单,且更新规则需要重启系统。而在安全领域,许多安全场景要求能够 7/24 小时实时监测威胁,作出报警。因此我们需要一个高吞吐量的实时计算框架来满足对实时性的需求。在这里我们将介绍网络安全中基于流式计算框架 Flink 并搭载机器学习算法的超大规模用户行为分析系统(UBA)的实践经验。看瀚思科技如何利用 Flink 的高效流式处理框架,承载 UBA 核心计算任务,并融合批处理和流处理模式,如何定义完备易用的场景规则语法,并利用 Flink 对复杂事件处理(CEP)的原生支持,实现规则的动态更新的实战经验。

主讲人 :吴昊,瀚思科技高级软件架构师,毕业于 University of Waterloo 计算机系

精通领域:大数据处理,大型流式处理系统架构设计

关于 AI 前线社群公开课

AI 前线社群公开课 是 InfoQ2016 年发起的品牌活动。

旨在利用 InfoQ 人工智能行业自身影响力,集合产业界优秀技术工作者、一线专家,为技术从业者传道授业解惑,打造最专业的线上技术分享与互动社群。

授课模式为:图文直播 45 分钟 + 答疑互动 15 分钟,每周一次。

想听听技术干货?想在线上与大师面对面?加入我们的社群吧!

加群方式

对线上分享感兴趣?想具体了解并申请讲师?回复“讲师“查看 ppt 说明。

2017-10-29 19:001512
用户头像
Tina InfoQ高级编辑

发布了 1267 篇内容, 共 835.5 次阅读, 收获喜欢 3532 次。

关注

评论

发布
暂无评论
发现更多内容

行业资讯 | Android WebView 致安卓应用闪退,mPaaS 助你规避这波 Bug

蚂蚁集团移动开发平台 mPaaS

android webview mPaaS 离线包 UC内核

Flink VS Spark

五分钟学大数据

flink spark 3月日更

阿里P9在Github上分享的Java面试突击手册,凭借它,我拿下了阿里P7的offer!

Java架构之路

Java 程序员 架构 面试 编程语言

从无到有实现音视频通讯

anyRTC开发者

ios android 音视频 WebRTC RTC

全文检索工具包Lucene入门教程

AlbertYang

lucene

Hystrix 实战经验分享

vivo互联网技术

Java 服务器 熔断 Hystrix

搭建博客可能会用到的 Git 命令|学习笔记

彭宏豪95

学习 极客时间 笔记

字节金三银四Java面试题库被泄露,GitHub连夜被下架

Java架构师迁哥

身份认证之多因素身份认证(MFA)

龙归科技

第三方登录 统一身份认证

我在阿里实习做开源

阿里巴巴云原生

阿里巴巴 云原生 dubbo 个人提升 中间件

Go Storage存储包封装

非晓为骁

storage Go 语言

面试字节跳动定级2-2,拿32*16offer,P8大佬的面试教程给了我春天!

Java架构之路

Java 程序员 架构 面试 编程语言

什么样的技术能进入一线大厂?这份阿里、百度、腾讯等 20家Java岗招聘要求梳理报告,会给你答案;

Java架构之路

Java 程序员 架构 面试 编程语言

zookeeper的watch机制

大数据技术指南

大数据 zookeeper 3月日更

vue+typescript实现组件封装之button篇

小小

typescript Vue

C 语言性能优化:循环条件i<=n与i!=0的性能差异

1

活动 | Apache Pulsar Meetup 欢迎报名

有道技术团队

活动

Flink 执行引擎:流批一体的融合之路

Apache Flink

flink

百度直播消息服务架构实践

百度Geek说

手机 直播 移动端

Go Mysql Driver 集成 Seata-Golang 解决分布式事务问题

阿里巴巴云原生

Java 微服务 云原生 seata Go 语言

有道技术岗大揭秘!这么幸福的生活,真的是熬夜掉发Top1的职业吗?

有道技术团队

招聘

使用组件的细节点

小小

报名倒计时 | 有道技术沙龙,聊聊明星语音背后的故事

有道技术团队

活动

一周信创舆情观察(3.15~3.21)

统小信uos

Docker 教程(1)---Docker简介与安装

AlbertYang

Docker

大咖云集!阿里达摩院领航大数据 + AI向量检索专场Meetup回顾(内含讲师PPT领取)

Proxima 技术社区

人工智能 大数据 阿里巴巴 搜索 向量检索

NodeJS基础入门教程(1)-一文让你快速了解什么是NodeJS

AlbertYang

nodejs

实习就参与“服务过亿用户的项目”,是什么体验?

阿里巴巴云原生

开发者 云原生 调度 应用服务中间件 Go 语言

UDTS上线数据集成服务,汇聚多源数据帮助企业高效分析决策

UCloud技术

数据传输 数据集成

APICloud多端开发 | 在线教育App模板源码讲解

YonBuilder低代码开发平台

软件开发 在线教育 移动开发 APP开发 APICloud

「 视频云大赛 — 大咖驾到 」驱动下一代技术浪潮,我们更专注价值落地

阿里云视频云

阿里云 音视频 视频处理

系列免费线上公开课:大数据和人工智能如何助力信息安全?_大数据_Tina_InfoQ精选文章