最新发布《数智时代的AI人才粮仓模型解读白皮书(2024版)》,立即领取! 了解详情
写点什么

腾讯基于 Proxy 的代码执行监听上报实践

  • 2020-03-05
  • 本文字数:3341 字

    阅读完需:约 11 分钟

腾讯基于 Proxy 的代码执行监听上报实践

随着移动设备的普及,兼容性和性能测试正在逐渐成为前端测试面临的两大挑战,再加上前端代码主要运行在客户设备上的特性,各种安全性挑战又层出不穷,我们该如何应对和解决?腾讯高级 Web 前端工程师樊东东在 GMTC 全球大前端技术大会(深圳站)2019 分享了 《基于 Proxy 的代码执行监听上报》,介绍了前端 SDK 基于 ES6 Proxy 的深度日志收集以及腾讯小程序前端测试案例。


本文根据演讲内容整理而成。


后端有全链路监控,能分析出模块之间的调用情况,前端一般日志打点、收集、上报,都是面条式的日志。在前端 SDK 的执行过程中能否收集更多更全面的信息?如 API 及回调函数的附属关系,API 和 API 间的上下文关系等。

一、需求背景

1. 打日志繁琐

日志是程序监控问题排查的重要手段。


如下是一段 SDK 实现和使用的例子:



作为 SDK 提供方,想要监控 SDK 运行情况,需要在各个 API 实现中打日志。


SDK 使用方使用 SDK 的时候需要在使用前后打日志。


能否统一处理 SDK 调用日志,让代码更少,日志更规范?

2. 线性日志可读性差

如下是上一段代码的调用日志。



这种日志线性无关联,只能体现时序。在排查问题时候分析这种面条式日志十分痛苦。


对于 API 的回调中有其他 API 调用这种 API 间依赖的关系,在日志中很难体现。


能否将日志进行可视化展示,且能体现日志间的上下文。



这种日志能帮助我们在不知道源码的情况下回溯 SDK 的调用过程,帮助重现和分析问题。

3. 属性监听

一般情况下,我们只对方法调用打日志,但在 QQ 小程序中一些组件(如 Video,对应的客户端组件)属性变化对应着客户端接口的调用。


这种对象属性的变化也想要追踪。

4. 目标

总结下,想在不改变 SDK 代码的情况下做到:


(1)统一上报入口;

(2)属性 get、set 上报;

(3)日志能体现上下文关系。

二、解决方案

defineProperty 和 Proxy 都能修改对象默认行为,进而进行监听。

1.defineProperty

defineProperty 是修改对象属性,如下是监听对象方法调用的例子:



defineProperty 有如下缺点:


(1)只能监听已有属性,无法追踪新增属性;

(2)需要深层遍历对象属性监听;

(3)原型的属性需要单独监听。


实现起来复杂,开发者对 SDK 的扩展无法监听到。

2.Proxy

(1)定义


Proxy 是 ES6 新增语法。在目标对象前架设一层拦截,可以对外界的所有访问进行过滤和改写。


(2) 功效


这是一段 Proxy 的例子:



利用 Proxy 可以:


  • 监听属性 get、set;

  • 结合函数包装监听方法调用。


这样能在不修改源码的情况下做到:


  • 统一监听入口;

  • SDK 使用者也能使用。

3. 问题

Proxy 是在原对象的基础上创建新的 Proxy 对象。需要考虑下面两个问题:


  • 能否替代原对象;

  • Proxy 性能。


(1) 原型比较



这段代码中有一个 Test 类,创建一个 Test 对象,对象上再创建 Proxy 对象。比较他们的原型和类型。


可以看到 Proxy 对象同原对象原型一致、类型一致。


(2) 属性比较



这段代码 Test 类中有属性 name,创建的对象新增属性 age 和方法 api2,对象上再创建 Proxy 对象。比较他们的属性。


可以看到 Proxy 对象和原对象属性相同


(3)代理 DOM 对象



在 Chrome 浏览器中,在 DOM 对象上创建 Proxy 对象,修改属性、调用方法会报错。


对于这种问题,可以用一个空对象做中转,如下所示:



  • 在空对象上创建 Proxy 对象;

  • 属性 get 取原 DOM 对象属性;

  • 属性 set 设置原 DOM 对象属性;

  • Proxy 对象的原型设为原 DOM 对象原型。


避免直接对 DOM 对象进行代理造成的使用报错的问题。


(4)总结


Proxy 对象和原对象有同样的原型、同样的属性,可以认为在使用上等同于原对象。

4. 性能

(1)运行性能


如下是原对象、Proxy 对象和 defineProperty 修改对象的属性 get、set 和方法调用的耗时对比。



从结果中看到,Proxy 对象的性能最低。算下来一次耗时不到 1 微秒。


不是高频调用,性能影响可以忽略。


起先大家也认为 Promise 性能低,但因为好用,Promise 还是流行起来了。


(2)上报性能


在实践过程中,对性能影响最大的是上报。比如小游戏中绘图 API 的高频调用,极大影响上报性能。


需要控制上报频率,方案如下:


  • 缓存一定数目再上报;

  • 黑名单内 API 不做上报;

  • 同一个 API 限制一定时间内上报次数;

  • 同一属性 get、set,同值只报一次。

三、API 上下文

如下是一段 API 回调中调其他 API 的例子:



想要在日志中体现代码上下文关系,需要关联如下关系:


  • API 调用;

  • API 回调函数;

  • 回调参数(API 结果)使用;

  • 回调中其他 API 调用。


然后通过根 API 将整个上下文关联起来。


下面我们来看下如何一步步对他们进行关联。

1. 关联 API

和其回调函数 API 和回调函数都是函数,可以在 Proxy 的属性访问时对他们进行函数包装。


对 API 进行包装:



API 的包装函数运行时可获得回调函数,对回调函数进行包装,将 API 对应的 ID 传递过去。



回调函数的包装函数运行时就能知道其属于哪个 API。


(1)踩到的坑


包装函数碰到下面两个问题:


  • 构造函数;

  • 事件监听。


构造函数


对象的方法可能会被当做构造函数使用。要能在方法的包装函数运行时知道其是被当做方法使用还是被当做构造函数使用。


如下图:



可以在包装函数中判断 this 的原型是否等同于包装函数的原型。


事件监听


取消事件监听的回调函数必须和事件监听的回调函数是同一个,才能取消成功。对函数进行包装会返回新的函数,导致取消事件监听无效。


可以对函数的包装函数进行缓存。避免事件监听与取消监听函数不一致的情况。


2. 关联回调函数和参数

回调函数的包装函数运行时生成对应 id,其参数如果是对象,则继续进行代理。参数的 Proxy 对象在使用时就能知道其从属于哪个回调函数。


3. 关联回调函数和其中 API

回调函数和 API 都是函数,关联回调函数和其中 API 本质上是要在函数运行时知道其外层函数。


(1)calleecaller 如下图所示:



  • 利用 callee 可以知道当前执行函数;

  • 利用 caller 可以知道当前执行函数外层函数;

  • 这样就能关联回调函数和其中的 API。


但在严格语法中 callee、caller 被禁止。


(2)栈


可以利用入栈出栈来模拟函数执行开始、执行完毕。



  • 回调函数的包装函数运行时生成 ID;

  • 回调函数 ID 执行前入栈,执行后出栈;

  • 内层函数运行时可通过栈尾 ID 知道外层函数。


如此可关联回调函数和其中的其他 API。


(3)setTimeout


setTimeout 将回调和其中其他 API 断开来了。setTimeout 中其他 API 可以认为是新开一个 trace。


如果想把 API 回调函数、回调函数中 setTimeout、setTimeout 回调函数、setTimeout 回调函数中其他 API 关联起来,可以把 setTimeout 当做 API 来处理。

四、可视化展示

zipkin 是一个开源的分布式链路追踪系统。可以用来做日志关联和可视化展示。


如图是 zipkin 所需要的日志数据结构:



只要有 traceId、ID 和 parentId 三个字段就能做日志关联并展示。


如图是前后端调用链路示意图:



后端的全链路是一个模块调另一个模块,前面的请求发送是后面请求接收的 parentId


前端的上下文是一个 API 的回调中有其他 API。API 调用可以看做回调的 parentId,回调可以看做其中其他 API 的 parentId。


根 API 的调用可以看做 traceId


这样就与 zipkin 所需要的数据结构对应起来了。


如图是 SDK 调用代码和对应的可视化界面



可以看到 API、回调和可视化界面中的日志一一对应。


这样在没有源码的情况下能通过上下文日志回溯调用过程,帮助复现和分析问题。

五、其他场景

Proxy 监听 SDK 的方法调用,能收集方法输入、输出。可用于单元测试,比对代码修改前后的日志,验证代码修改是否影响其他 API。


收集外网用户真实使用信息,补充测试案例。


统计 API 的调用次数。

六、总结

  1. Proxy 能追踪属性变化和方法调用;

  2. 日志能集中上报,SDK 使用者也能使用;

  3. 通过函数包装关联 API 和回调函数;

  4. 利用栈能关联回调函数和回调函数中其他 API;

  5. 日志从线性变为有关联关系的上下文;

  6. 借助全链路系统能可视化展示上下文,回溯调用过程。


作者介绍


樊东东,腾讯高级 Web 前端工程师,2014 年进入腾讯,先后经历过移动办公、泛娱乐产品、QQ 小程序的 Web 开发工作,有大量运营平台、H5、Node 等相关的开发经验;现负责 QQ 小程序开发者工具、小程序相关工具链、QQ 相关基础运营平台等开发工作。他善于在平凡的代码中找到不一样的玩法。


活动推荐


技术永不止步,精彩永不落幕,GMTC 全球大前端技术大会(北京站)2020 将于 6 月 05-08 日再次与大家见面,聚焦前沿技术及实践经验,强势输出更多大前端 & 移动开发领域的技术趋势与实践案例!


2020-03-05 17:421914

评论

发布
暂无评论
发现更多内容

支持M1的苹果电脑视频下载器-Downie 4 Mac中文版

Rose

Mac 视频下载工具 Downie 4许可证 Downie 4中文版 Downie mac破解版

华为教育中心:奇趣“童”行庆六一 多彩儿童应用助成长

科技热闻

在软件定义汽车的时代,低代码究竟给车企数字化转型带来了什么?

优秀

低代码 车企 车企数字化

百度倾力出品|《神经网络机器翻译技术及产业应用》正式上线

飞桨PaddlePaddle

人工智能 深度学习 百度飞桨

世界500强开滦集团的财务共享建设路径

用友BIP

财务共享

挖掘算力产业的创新力量和新型机遇|2023开放原子全球开源峰会先进计算分论坛即将启幕

开放原子开源基金会

开源 算力 先进计算

智能出行 驱动未来|2023开放原子全球开源峰会CARSMOS开源智能出行生态年会即将启幕

开放原子开源基金会

开源 智能出行 CARSMOS

重新思考流处理与流数据库

吴英骏

开源 云原生 流处理 ​Rust 实时数据库

abaqus有限元仿真常见问题(一):数值仿真在产品研发中的作用

思茂信息

CAE abaqus abaqus软件 abaqus有限元仿真

乘云而上,山西软件行业CXO思享会在晋起航

说山水

Java 高效处理千万级数据:技巧与最佳实践

xfgg

Java 大数据

技术的交流 思想的碰撞|2023开放原子全球开源峰会TOC面对面分论坛即将启幕

开放原子开源基金会

开源 社区 TOC

秒验 iOS端集成指南

MobTech袤博科技

Mac电脑ps ai beta安装教程及ai绘图如何使用

魔仙苹果mac堡

ps AI绘图 ps ai beta Firefly AI使用教程

WaveMetrics Igor Pro 9 for Mac(科学计算和数据分析软件)

魔仙苹果mac堡

苹果软件资源站 mac科学计算软件 WaveMetrics Igor Pro 9 Igor Pro 9破解

客服都要下岗了? 当ChatGPT遇见私有数据,秒变AI智能客服!

WorkPlus

解锁软件工程新角色——平台工程师

SEAL安全

DevOps 平台工程 平台工程师

植物大战僵尸mac版下载

Rose

植物大战僵尸 mac 植物大战僵尸中文版 植物大战僵尸下载 mac塔防游戏

mac电脑如何远程控制win?微软远程桌面连接工具来帮你!

Rose

Mac远程控制软件 mac电脑如何远程控制win microsoft remote desktop 微软远程桌面连接工具

AI2023下载 Illustrator mac版 2023 年 4 月版(版本 27.5)的新增功能

魔仙苹果mac堡

AI2023下载 Adobe Illustrator2023 AI2023完美解锁版

led显示屏保养技巧

Dylan

故障 LED显示屏 设备日常保养

一文回顾 Boundless Hackathon at Stanford 首期 Workshop

鳄鱼视界

如何在大学校园内合作运营共享电单车

共享电单车厂家

校内共享电单车 共享电动车投放 共享电单车合作 共享电单车厂家

提升您的 MQTT 云服务:深入探索 BYOC

EMQ映云科技

物联网 云服务 mqtt

开源创新 协同融合|2023开放原子全球开源峰会开源协作平台分论坛即将启幕

开放原子开源基金会

开源 开源协作

Scrum敏捷项目管理真实案例

顿顿顿

Scrum 敏捷开发 敏捷开发管理 敏捷项目管理 scrum工具

对应用数据开发还有疑惑?看这篇就够了!数据存储、管理,通通掌握!

HarmonyOS开发者

HarmonyOS

FC红白机游戏600合集 for mac(小霸王游戏) 单机离线版

Rose

Mac游戏下载 FC 红白机游戏 任天堂游戏下载 小霸王游戏

软件测试/测试开发丨接口测试学习笔记

测试人

程序员 软件测试 自动化测试 测试开发

一文回顾 Boundless Hackathon at Stanford 首期 Workshop

西柚子

CodeWhisperer 初体验

天黑黑

AI 亚马逊云 CodeWhisperer

腾讯基于 Proxy 的代码执行监听上报实践_GMTC_樊东东_InfoQ精选文章