前端监控包括行为监控、异常监控、性能监控等,本文主要讨论异常监控。对于【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。前端而言,和后端处于同一个监控系统中,前原创内容,盗版必究。未经授权,禁止复制转载。端有自己的监控方案,后端也有自己等监控方【原创不易,请尊重版权】本文版权归作者所有,未经授权不得转载。案,但两者并不分离,因为一个用户在操作应原创内容,盗版必究。【本文首发于唐霜的博客】用过程中如果出现异常,有可能是前端引起,转载请注明出处:www.tangshuang.net本文版权归作者所有,未经授权不得转载。也有可能是后端引起,需要有一个机制,将前【作者:唐霜】【未经授权禁止转载】后端串联起来,使监控本身统一于监控系统。【未经授权禁止转载】【原创不易,请尊重版权】因此,即使只讨论前端异常监控,其实也不能【版权所有】唐霜 www.tangshuang.net【转载请注明来源】严格区分前后端界限,而要根据实际系统的设【访问 www.tangshuang.net 获取更多精彩内容】本文作者:唐霜,转载请注明出处。计,在最终的报表中体现出监控对开发和业务【本文首发于唐霜的博客】【版权所有】唐霜 www.tangshuang.net的帮助。
本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。【版权所有】唐霜 www.tangshuang.net本文版权归作者所有,未经授权不得转载。一般而言,一个监控系统,大致可以分为四个未经授权,禁止复制转载。【版权所有,侵权必究】阶段:日志采集、日志存储、统计与分析、报【原创内容,转载请注明出处】【转载请注明来源】告和警告。
【转载请注明来源】著作权归作者所有,禁止商业用途转载。本文作者:唐霜,转载请注明出处。
采集阶段:收集异常日志,先在本地做一定的【版权所有,侵权必究】【未经授权禁止转载】处理,采取一定的方案上报到服务器。
本文作者:唐霜,转载请注明出处。未经授权,禁止复制转载。存储阶段:后端接收前端上报的异常日志,经未经授权,禁止复制转载。未经授权,禁止复制转载。过一定处理,按照一定的存储方案存储。
【原创内容,转载请注明出处】著作权归作者所有,禁止商业用途转载。【版权所有,侵权必究】分析阶段:分为机器自动分析和人工分析。机【原创不易,请尊重版权】未经授权,禁止复制转载。器自动分析,通过预设的条件和算法,对存储本文版权归作者所有,未经授权不得转载。【关注微信公众号:wwwtangshuangnet】的日志信息进行统计和筛选,发现问题,触发【关注微信公众号:wwwtangshuangnet】本文作者:唐霜,转载请注明出处。报警。人工分析,通过提供一个可视化的数据【本文受版权保护】【关注微信公众号:wwwtangshuangnet】面板,让系统用户可以看到具体的日志数据,【本文受版权保护】【关注微信公众号:wwwtangshuangnet】根据信息,发现异常问题根源。
【转载请注明来源】本文作者:唐霜,转载请注明出处。著作权归作者所有,禁止商业用途转载。【关注微信公众号:wwwtangshuangnet】报警阶段:分为告警和预警。告警按照一定的【作者:唐霜】原创内容,盗版必究。级别自动报警,通过设定的渠道,按照一定的【转载请注明来源】本文作者:唐霜,转载请注明出处。触发规则进行。预警则在异常发生前,提前预本文版权归作者所有,未经授权不得转载。著作权归作者所有,禁止商业用途转载。判,给出警告。
本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。1 前端异常
前端异常是指在用户使用Web应用时无法快【作者:唐霜】未经授权,禁止复制转载。速得到符合预期结果的情况,不同的异常带来【版权所有】唐霜 www.tangshuang.net【本文首发于唐霜的博客】的后果程度不同,轻则引起用户使用不悦,重著作权归作者所有,禁止商业用途转载。著作权归作者所有,禁止商业用途转载。则导致产品无法使用,使用户丧失对产品的认【关注微信公众号:wwwtangshuangnet】本文作者:唐霜,转载请注明出处。可。
未经授权,禁止复制转载。【本文受版权保护】未经授权,禁止复制转载。【作者:唐霜】1.1 前端异常分类
根据异常代码的后果的程度,对前端异常的表转载请注明出处:www.tangshuang.net【原创不易,请尊重版权】现分为如下几类
著作权归作者所有,禁止商业用途转载。著作权归作者所有,禁止商业用途转载。本文作者:唐霜,转载请注明出处。原创内容,盗版必究。
a. 出错
未经授权,禁止复制转载。转载请注明出处:www.tangshuang.net界面呈现的内容与用户预期的内容不符,例如转载请注明出处:www.tangshuang.net【版权所有,侵权必究】点击进入非目标界面,数据不准确,出现的错本文作者:唐霜,转载请注明出处。【版权所有】唐霜 www.tangshuang.net误提示不可理解,界面错位,提交后跳转到错【作者:唐霜】转载请注明出处:www.tangshuang.net误界面等情况。这类异常出现时,虽然产品本本文作者:唐霜,转载请注明出处。【原创内容,转载请注明出处】身功能还能正常使用,但用户无法达成自己目【作者:唐霜】本文作者:唐霜,转载请注明出处。标。
【原创内容,转载请注明出处】本文版权归作者所有,未经授权不得转载。本文版权归作者所有,未经授权不得转载。【转载请注明来源】b. 呆滞
未经授权,禁止复制转载。【原创内容,转载请注明出处】界面出现操作后没有反应的现象,例如点击按【转载请注明来源】【本文首发于唐霜的博客】钮无法提交,提示成功后无法继续操作。这类【本文首发于唐霜的博客】原创内容,盗版必究。异常出现时,产品已经存在界面级局部不可用本文版权归作者所有,未经授权不得转载。原创内容,盗版必究。现象。
未经授权,禁止复制转载。【原创不易,请尊重版权】【转载请注明来源】c. 损坏
转载请注明出处:www.tangshuang.net【转载请注明来源】原创内容,盗版必究。未经授权,禁止复制转载。界面出现无法实现操作目的的现象,例如点击本文版权归作者所有,未经授权不得转载。【作者:唐霜】无法进入目标界面,点击无法查看详情内容等本文作者:唐霜,转载请注明出处。本文作者:唐霜,转载请注明出处。。这类异常出现时,应用部分功能无法被正常本文版权归作者所有,未经授权不得转载。【原创内容,转载请注明出处】使用。
转载请注明出处:www.tangshuang.net【版权所有,侵权必究】未经授权,禁止复制转载。d. 假死
【原创不易,请尊重版权】本文版权归作者所有,未经授权不得转载。界面出现卡顿,无法对任何功能进行使用的现【关注微信公众号:wwwtangshuangnet】【转载请注明来源】象。例如用户无法登陆导致无法使用应用内功【作者:唐霜】未经授权,禁止复制转载。能,由于某个遮罩层阻挡且不可关闭导致无法著作权归作者所有,禁止商业用途转载。【访问 www.tangshuang.net 获取更多精彩内容】进行任何后续操作。这类异常出现时,用户很【原创不易,请尊重版权】【作者:唐霜】可能杀死应用。
转载请注明出处:www.tangshuang.net【访问 www.tangshuang.net 获取更多精彩内容】e. 崩溃
【转载请注明来源】【关注微信公众号:wwwtangshuangnet】著作权归作者所有,禁止商业用途转载。应用出现经常性自动退出或无法操作的现象。【作者:唐霜】【转载请注明来源】例如间歇性crash,网页无法正常加载或【本文首发于唐霜的博客】【原创不易,请尊重版权】加载后无法进行任何操作。这类异常持续出现【作者:唐霜】原创内容,盗版必究。,将直接导致用户流失,影响产品生命力。
【原创内容,转载请注明出处】【访问 www.tangshuang.net 获取更多精彩内容】1.2 异常错误原因分类
前端产生异常的原因主要分5类:
【本文受版权保护】【转载请注明来源】| 原因 | 案例 | 频率 |
| 逻辑错误 | 1) 业务逻辑判断条件错误 2) 事件绑定顺序错误 3) 调用栈时序错误 4) 错误的操作js对象 |
经常 |
| 数据类型错误 | 1) 将null视作对象读取property 2) 将undefined视作数组进行遍历 3) 将字符串形式的数字直接用于加运算 4) 函数参数未传 |
经常 |
| 语法句法错误 | 较少 | |
| 网络错误 | 1) 慢 2) 服务端未返回数据但仍200,前端按正常进行数据遍历 3) 提交数据时网络中断 4) 服务端500错误时前端未做任何错误处理 |
偶尔 |
| 系统错误 | 1) 内存不够用 2) 磁盘塞满 3) 壳不支持API 4) 不兼容 |
较少 |
2 异常采集
2.1 采集内容
当异常出现的时候,我们需要知道异常的具体本文作者:唐霜,转载请注明出处。原创内容,盗版必究。信息,根据异常的具体信息来决定采用什么样转载请注明出处:www.tangshuang.net【未经授权禁止转载】的解决方案。在采集异常信息时,可以遵循4著作权归作者所有,禁止商业用途转载。【原创不易,请尊重版权】W原则:
【原创不易,请尊重版权】【访问 www.tangshuang.net 获取更多精彩内容】【版权所有】唐霜 www.tangshuang.net【原创内容,转载请注明出处】WHO did WHAT and get WHICH exception in WHICH environment?
转载请注明出处:www.tangshuang.net【本文首发于唐霜的博客】【未经授权禁止转载】a. 用户信息
转载请注明出处:www.tangshuang.net本文版权归作者所有,未经授权不得转载。未经授权,禁止复制转载。出现异常时该用户的信息,例如该用户在当前【版权所有】唐霜 www.tangshuang.net【关注微信公众号:wwwtangshuangnet】时刻的状态、权限等,以及需要区分用户可多【转载请注明来源】转载请注明出处:www.tangshuang.net终端登录时,异常对应的是哪一个终端。
【作者:唐霜】原创内容,盗版必究。b. 行为信息
【版权所有,侵权必究】本文版权归作者所有,未经授权不得转载。【版权所有】唐霜 www.tangshuang.net【转载请注明来源】用户进行什么操作时产生了异常:所在的界面【作者:唐霜】【本文受版权保护】路径;执行了什么操作;操作时使用了哪些数【本文首发于唐霜的博客】著作权归作者所有,禁止商业用途转载。据;当时的API吐了什么数据给客户端;如【原创内容,转载请注明出处】【原创不易,请尊重版权】果是提交操作,提交了什么数据;上一个路径未经授权,禁止复制转载。转载请注明出处:www.tangshuang.net;上一个行为日志记录ID等。
【本文首发于唐霜的博客】【关注微信公众号:wwwtangshuangnet】转载请注明出处:www.tangshuang.netc. 异常信息
【作者:唐霜】著作权归作者所有,禁止商业用途转载。未经授权,禁止复制转载。产生异常的代码信息:用户操作的DOM元素未经授权,禁止复制转载。【版权所有】唐霜 www.tangshuang.net节点;异常级别;异常类型;异常描述;代码本文作者:唐霜,转载请注明出处。【版权所有,侵权必究】stack信息等。
【原创不易,请尊重版权】【访问 www.tangshuang.net 获取更多精彩内容】d. 环境信息
转载请注明出处:www.tangshuang.net【作者:唐霜】【原创不易,请尊重版权】网络环境;设备型号和标识码;操作系统版本原创内容,盗版必究。本文作者:唐霜,转载请注明出处。;客户端版本;API接口版本等。
本文作者:唐霜,转载请注明出处。著作权归作者所有,禁止商业用途转载。【作者:唐霜】| 字段 | 类型 | 解释 |
| requestId | String | 一个界面产生一个requestId |
| traceId | String | 一个阶段产生一个traceId,用于追踪和一个异常相关的所有日志记录 |
| hash | String | 这条log的唯一标识码,相当于logId,但它是根据当前日志记录的具体内容而生成的 |
| time | Number | 当前日志产生的时间(保存时刻) |
| userId | String | |
| userStatus | Number | 当时,用户状态信息(是否可用/禁用) |
| userRoles | Array | 当时,前用户的角色列表 |
| userGroups | Array | 当时,用户当前所在组,组别权限可能影响结果 |
| userLicenses | Array | 当时,许可证,可能过期 |
| path | String | 所在路径,URL |
| action | String | 进行了什么操作 |
| referer | String | 上一个路径,来源URL |
| prevAction | String | 上一个操作 |
| data | Object | 当前界面的state、data |
| dataSources | Array<Object> | 上游api给了什么数据 |
| dataSend | Object | 提交了什么数据 |
| targetElement | HTMLElement | 用户操作的DOM元素 |
| targetDOMPath | Array<HTMLElement> | 该DOM元素的节点路径 |
| targetCSS | Object | 该元素的自定义样式表 |
| targetAttrs | Object | 该元素当前的属性及值 |
| errorType | String | 错误类型 |
| errorLevel | String | 异常级别 |
| errorStack | String | 错误stack信息 |
| errorFilename | String | 出错文件 |
| errorLineNo | Number | 出错行 |
| errorColNo | Number | 出错列位置 |
| errorMessage | String | 错误描述(开发者定义) |
| errorTimeStamp | Number | 时间戳 |
| eventType | String | 事件类型 |
| pageX | Number | 事件x轴坐标 |
| pageY | Number | 事件y轴坐标 |
| screenX | Number | 事件x轴坐标 |
| screenY | Number | 事件y轴坐标 |
| pageW | Number | 页面宽度 |
| pageH | Number | 页面高度 |
| screenW | Number | 屏幕宽度 |
| screenH | Number | 屏幕高度 |
| eventKey | String | 触发事件的键 |
| network | String | 网络环境描述 |
| userAgent | String | 客户端描述 |
| device | String | 设备描述 |
| system | String | 操作系统描述 |
| appVersion | String | 应用版本 |
| apiVersion | String | 接口版本 |
这是一份非常庞大的日志字段表,它几乎囊括【关注微信公众号:wwwtangshuangnet】本文版权归作者所有,未经授权不得转载。了一个异常发生时,能够对异常周遭环境进行未经授权,禁止复制转载。原创内容,盗版必究。详细描述的所有信息。不同情况下,这些字段【本文首发于唐霜的博客】【本文首发于唐霜的博客】并不一定都会收集,由于我们会采用文档数据原创内容,盗版必究。原创内容,盗版必究。库存储日志,因此,并不影响它的实际存储结转载请注明出处:www.tangshuang.net【作者:唐霜】果。
【版权所有,侵权必究】【关注微信公众号:wwwtangshuangnet】2.2 异常捕获
前端捕获异常分为全局捕获和单点捕获。全局【本文首发于唐霜的博客】【访问 www.tangshuang.net 获取更多精彩内容】捕获代码集中,易于管理;单点捕获作为补充未经授权,禁止复制转载。【本文受版权保护】,对某些特殊情况进行捕获,但分散,不利于原创内容,盗版必究。【版权所有,侵权必究】管理。
【原创不易,请尊重版权】著作权归作者所有,禁止商业用途转载。a、全局捕获
【转载请注明来源】著作权归作者所有,禁止商业用途转载。通过全局的接口,将捕获代码集中写在一个地著作权归作者所有,禁止商业用途转载。【本文受版权保护】方,可以利用的接口有:
【原创不易,请尊重版权】【关注微信公众号:wwwtangshuangnet】【转载请注明来源】- window.addEventListe【访问 www.tangshuang.net 获取更多精彩内容】【关注微信公众号:wwwtangshuangnet】ner(‘error’) / windo【转载请注明来源】本文作者:唐霜,转载请注明出处。w.addEventListener(“【转载请注明来源】【原创内容,转载请注明出处】unhandledrejection”)转载请注明出处:www.tangshuang.net【本文受版权保护】 / document.addEvent原创内容,盗版必究。【访问 www.tangshuang.net 获取更多精彩内容】Listener(‘click’) 等 【关注微信公众号:wwwtangshuangnet】【未经授权禁止转载】著作权归作者所有,禁止商业用途转载。
- 框架级别的全局监听,例如aixos中使用【原创内容,转载请注明出处】【访问 www.tangshuang.net 获取更多精彩内容】interceptor进行拦截,vue、著作权归作者所有,禁止商业用途转载。转载请注明出处:www.tangshuang.netreact都有自己的错误采集接口 本文作者:唐霜,转载请注明出处。著作权归作者所有,禁止商业用途转载。
- 通过对全局函数进行封装包裹,实现在在调用【版权所有,侵权必究】著作权归作者所有,禁止商业用途转载。该函数时自动捕获异常 【原创不易,请尊重版权】本文作者:唐霜,转载请注明出处。【版权所有】唐霜 www.tangshuang.net
- 对实例方法重写(Patch),在原有功能【未经授权禁止转载】【原创不易,请尊重版权】基础上包裹一层,例如对console.e【作者:唐霜】本文作者:唐霜,转载请注明出处。rror进行重写,在使用方法不变的情况下未经授权,禁止复制转载。著作权归作者所有,禁止商业用途转载。也可以异常捕获 原创内容,盗版必究。【转载请注明来源】
b、单点捕获
本文作者:唐霜,转载请注明出处。本文作者:唐霜,转载请注明出处。原创内容,盗版必究。【原创不易,请尊重版权】在业务代码中对单个代码块进行包裹,或在逻本文版权归作者所有,未经授权不得转载。原创内容,盗版必究。辑流程中打点,实现有针对性的异常捕获:
【关注微信公众号:wwwtangshuangnet】【原创不易,请尊重版权】- try…catch 本文版权归作者所有,未经授权不得转载。【本文受版权保护】【版权所有,侵权必究】
- 专门写一个函数来收集异常信息,在异常发生【版权所有】唐霜 www.tangshuang.net未经授权,禁止复制转载。时,调用该函数 【未经授权禁止转载】转载请注明出处:www.tangshuang.net【转载请注明来源】
- 专门写一个函数来包裹其他函数,得到一个新【原创不易,请尊重版权】本文版权归作者所有,未经授权不得转载。函数,该新函数运行结果和原函数一模一样,原创内容,盗版必究。转载请注明出处:www.tangshuang.net只是在发生异常时可以捕获异常 本文作者:唐霜,转载请注明出处。【访问 www.tangshuang.net 获取更多精彩内容】【本文首发于唐霜的博客】【本文首发于唐霜的博客】
2.3 跨域脚本异常
由于浏览器安全策略限制,跨域脚本报错时,【未经授权禁止转载】本文作者:唐霜,转载请注明出处。无法直接获取错误的详细信息,只能得到一个【版权所有】唐霜 www.tangshuang.net【访问 www.tangshuang.net 获取更多精彩内容】Script Error。例如,我们会引原创内容,盗版必究。【版权所有】唐霜 www.tangshuang.net入第三方依赖,或者将自己的脚本放在CDN【原创不易,请尊重版权】【版权所有,侵权必究】时。
【本文受版权保护】【作者:唐霜】解决Script Error的方法:
著作权归作者所有,禁止商业用途转载。【未经授权禁止转载】【未经授权禁止转载】本文版权归作者所有,未经授权不得转载。方案一:
【原创不易,请尊重版权】原创内容,盗版必究。- 将js内联到HTML中 【转载请注明来源】【本文首发于唐霜的博客】
- 将js文件与HTML放在同域下 著作权归作者所有,禁止商业用途转载。转载请注明出处:www.tangshuang.net原创内容,盗版必究。【本文首发于唐霜的博客】
方案二:
【未经授权禁止转载】本文版权归作者所有,未经授权不得转载。【原创内容,转载请注明出处】【原创内容,转载请注明出处】- 为页面上script标签添加crosso未经授权,禁止复制转载。转载请注明出处:www.tangshuang.netrigin属性 【版权所有,侵权必究】【原创不易,请尊重版权】本文版权归作者所有,未经授权不得转载。
- 被引入脚本所在服务端响应头中,增加 Ac【版权所有,侵权必究】【未经授权禁止转载】cess-Control-Allow-O【原创不易,请尊重版权】未经授权,禁止复制转载。rigin 来支持跨域资源共享 【关注微信公众号:wwwtangshuangnet】本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。【未经授权禁止转载】
2.4 异常录制
对于一个异常,仅仅拥有该异常的信息还不足【关注微信公众号:wwwtangshuangnet】【本文首发于唐霜的博客】以完全抓住问题的本质,因为异常发生的位置本文版权归作者所有,未经授权不得转载。转载请注明出处:www.tangshuang.net,并不一定是异常根源所在的位置。我们需要【未经授权禁止转载】本文作者:唐霜,转载请注明出处。对异常现场进行还原,才能复原问题全貌,甚未经授权,禁止复制转载。本文作者:唐霜,转载请注明出处。至避免类似问题在其他界面中发生。这里需要未经授权,禁止复制转载。未经授权,禁止复制转载。引进一个概念,就是“异常录制”。录制通过【未经授权禁止转载】转载请注明出处:www.tangshuang.net“时间”“空间”两个维度记录异常发生前到未经授权,禁止复制转载。【原创不易,请尊重版权】发生的整个过程,对于找到异常根源更有帮助本文作者:唐霜,转载请注明出处。著作权归作者所有,禁止商业用途转载。。
原创内容,盗版必究。【转载请注明来源】【版权所有】唐霜 www.tangshuang.net
上图表示,当异常发生时,异常的根源可能离原创内容,盗版必究。著作权归作者所有,禁止商业用途转载。我们很远,我们需要回到异常发生的现场,找【未经授权禁止转载】本文作者:唐霜,转载请注明出处。到异常根源。就像现实生活中破案一样,如果【原创内容,转载请注明出处】【原创内容,转载请注明出处】有监控摄影机对案发过程的录影,对破案来说【本文首发于唐霜的博客】转载请注明出处:www.tangshuang.net更加容易。如果仅仅关注异常本身,要找到异未经授权,禁止复制转载。【作者:唐霜】常的根源,需要凭借运气,但有了异常录制的本文作者:唐霜,转载请注明出处。【版权所有,侵权必究】帮助,找到根源就更加容易。
【本文首发于唐霜的博客】【原创不易,请尊重版权】所谓的“异常录制”,实际上就是通过技术手【本文首发于唐霜的博客】【关注微信公众号:wwwtangshuangnet】段,收集用户的操作过程,对用户的每一个操【转载请注明来源】转载请注明出处:www.tangshuang.net作都进行记录,在发生异常时,把一定时间区【转载请注明来源】著作权归作者所有,禁止商业用途转载。间内的记录重新运行,形成影像进行播放,让【本文受版权保护】【原创内容,转载请注明出处】调试者无需向用户询问,就能看到用户当时的原创内容,盗版必究。本文作者:唐霜,转载请注明出处。操作过程。
【关注微信公众号:wwwtangshuangnet】【本文首发于唐霜的博客】原创内容,盗版必究。转载请注明出处:www.tangshuang.net
上图是来自阿里的一套异常录制还原方案示意【版权所有,侵权必究】本文作者:唐霜,转载请注明出处。图,用户在界面上的操作产生的events【版权所有】唐霜 www.tangshuang.net本文版权归作者所有,未经授权不得转载。和mutation被产品收集起来,上传到原创内容,盗版必究。【访问 www.tangshuang.net 获取更多精彩内容】服务器,经过队列处理按顺序存放到数据库中原创内容,盗版必究。本文作者:唐霜,转载请注明出处。。当需要进行异常重现的时候,将这些记录从原创内容,盗版必究。本文作者:唐霜,转载请注明出处。数据库中取出,采用一定的技术方案,顺序播【本文首发于唐霜的博客】【访问 www.tangshuang.net 获取更多精彩内容】放这些记录,即可实现异常还原。
著作权归作者所有,禁止商业用途转载。未经授权,禁止复制转载。2.5 异常级别
一般而言,我们会将收集信息的级别分为in【原创内容,转载请注明出处】【本文受版权保护】fo,warn,error等,并在此基础转载请注明出处:www.tangshuang.net【作者:唐霜】上进行扩展。
【版权所有】唐霜 www.tangshuang.net原创内容,盗版必究。当我们监控到异常发生时,可以将该异常划分【未经授权禁止转载】【作者:唐霜】到“重要——紧急”模型中分为A、B、C、转载请注明出处:www.tangshuang.net【版权所有,侵权必究】D四个等级。有些异常,虽然发生了,但是并【版权所有】唐霜 www.tangshuang.net【访问 www.tangshuang.net 获取更多精彩内容】不影响用户的正常使用,用户其实并没有感知【关注微信公众号:wwwtangshuangnet】【转载请注明来源】到,虽然理论上应该修复,但是实际上相对于本文版权归作者所有,未经授权不得转载。【本文首发于唐霜的博客】其他异常而言,可以放在后面进行处理。
【版权所有】唐霜 www.tangshuang.net【版权所有】唐霜 www.tangshuang.net【版权所有,侵权必究】
下文会讨论告警策略,一般而言,越靠近右上【原创不易,请尊重版权】【版权所有】唐霜 www.tangshuang.net角的异常会越快通知,保证相关人员能最快接本文作者:唐霜,转载请注明出处。【转载请注明来源】收到信息,并进行处理。A级异常需要快速响原创内容,盗版必究。本文版权归作者所有,未经授权不得转载。应,甚至需要相关负责人知悉。
【版权所有】唐霜 www.tangshuang.net【未经授权禁止转载】未经授权,禁止复制转载。【本文首发于唐霜的博客】在收集异常阶段,可根据第一节划分的异常后【关注微信公众号:wwwtangshuangnet】【作者:唐霜】果来判断异常的严重程度,在发生异常时选择【访问 www.tangshuang.net 获取更多精彩内容】【版权所有】唐霜 www.tangshuang.net对应的上报方案进行上报。
【未经授权禁止转载】【关注微信公众号:wwwtangshuangnet】【作者:唐霜】【版权所有】唐霜 www.tangshuang.net3 整理与上报方案
前文已经提到,除了异常报错信息本身,我们【版权所有】唐霜 www.tangshuang.net【版权所有】唐霜 www.tangshuang.net还需要记录用户操作日志,以实现场景复原。本文作者:唐霜,转载请注明出处。【关注微信公众号:wwwtangshuangnet】这就涉及到上报的量和频率问题。如果任何日著作权归作者所有,禁止商业用途转载。原创内容,盗版必究。志都立即上报,这无异于自造的DDOS攻击【未经授权禁止转载】转载请注明出处:www.tangshuang.net。因此,我们需要合理的上报方案。下文会介转载请注明出处:www.tangshuang.net原创内容,盗版必究。绍4种上报方案,但实际我们不会仅限于其中【本文首发于唐霜的博客】著作权归作者所有,禁止商业用途转载。一种,而是经常同时使用,对不同级别的日志【作者:唐霜】未经授权,禁止复制转载。选择不同的上报方案。
【访问 www.tangshuang.net 获取更多精彩内容】【未经授权禁止转载】【转载请注明来源】本文版权归作者所有,未经授权不得转载。3.1 前端存储日志
我们前面提到,我们并不单单采集异常本身日本文作者:唐霜,转载请注明出处。【转载请注明来源】志,而且还会采集与异常相关的用户行为日志【原创不易,请尊重版权】未经授权,禁止复制转载。。单纯一条异常日志并不能帮助我们快速定位【本文首发于唐霜的博客】著作权归作者所有,禁止商业用途转载。问题根源,找到解决方案。但如果要收集用户【本文首发于唐霜的博客】【作者:唐霜】的行为日志,又要采取一定的技巧,而不能用本文作者:唐霜,转载请注明出处。【原创内容,转载请注明出处】户每一个操作后,就立即将该行为日志传到服著作权归作者所有,禁止商业用途转载。【版权所有】唐霜 www.tangshuang.net务器,对于具有大量用户同时在线的应用,如【版权所有,侵权必究】原创内容,盗版必究。果用户一操作就立即上传日志,无异于对日志【原创内容,转载请注明出处】【版权所有】唐霜 www.tangshuang.net服务器进行DDOS攻击。因此,我们先将这【关注微信公众号:wwwtangshuangnet】【原创不易,请尊重版权】些日志存储在用户客户端本地,达到一定条件【版权所有】唐霜 www.tangshuang.net本文版权归作者所有,未经授权不得转载。之后,再同时打包上传一组日志。
转载请注明出处:www.tangshuang.net【版权所有】唐霜 www.tangshuang.net那么,如何进行前端日志存储呢?我们不可能【关注微信公众号:wwwtangshuangnet】【作者:唐霜】直接将这些日志用一个变量保存起来,这样会【访问 www.tangshuang.net 获取更多精彩内容】转载请注明出处:www.tangshuang.net挤爆内存,而且一旦用户进行刷新操作,这些【转载请注明来源】本文作者:唐霜,转载请注明出处。日志就丢失了,因此,我们自然而然想到前端【关注微信公众号:wwwtangshuangnet】【原创内容,转载请注明出处】数据持久化方案。
【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net【原创不易,请尊重版权】转载请注明出处:www.tangshuang.net目前,可用的持久化方案可选项也比较多了,【版权所有】唐霜 www.tangshuang.net【作者:唐霜】主要有:Cookie、localStor本文版权归作者所有,未经授权不得转载。【本文首发于唐霜的博客】age、sessionStorage、I【转载请注明来源】【原创内容,转载请注明出处】ndexedDB、webSQL 、Fil原创内容,盗版必究。原创内容,盗版必究。eSystem 等等。那么该如何选择呢?著作权归作者所有,禁止商业用途转载。未经授权,禁止复制转载。我们通过一个表来进行对比:
著作权归作者所有,禁止商业用途转载。【版权所有,侵权必究】| 存储方式 | cookie | localStorage | sessionStorage | IndexedDB | webSQL | FileSystem |
| 类型 | key-value | key-value | NoSQL | SQL | ||
| 数据格式 | string | string | string | object | ||
| 容量 | 4k | 5M | 5M | 500M | 60M | |
| 进程 | 同步 | 同步 | 同步 | 异步 | 异步 | |
| 检索 | key | key | key, index | field | ||
| 性能 | 读快写慢 | 读慢写快 |
综合之后,IndexedDB是最好的选择【访问 www.tangshuang.net 获取更多精彩内容】原创内容,盗版必究。,它具有容量大、异步的优势,异步的特性保本文版权归作者所有,未经授权不得转载。【未经授权禁止转载】证它不会对界面的渲染产生阻塞。而且Ind【原创内容,转载请注明出处】【转载请注明来源】exedDB是分库的,每个库又分stor转载请注明出处:www.tangshuang.net【未经授权禁止转载】e,还能按照索引进行查询,具有完整的数据【版权所有,侵权必究】【作者:唐霜】库管理思维,比localStorage更【本文受版权保护】转载请注明出处:www.tangshuang.net适合做结构化数据管理。但是它有一个缺点,【原创不易,请尊重版权】未经授权,禁止复制转载。就是api非常复杂,不像localSto【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。rage那么简单直接。针对这一点,我们可【作者:唐霜】未经授权,禁止复制转载。以使用hello-indexeddb这个【本文受版权保护】【转载请注明来源】工具,它用Promise对复杂api进行转载请注明出处:www.tangshuang.net【未经授权禁止转载】来封装,简化操作,使IndexedDB的【未经授权禁止转载】本文作者:唐霜,转载请注明出处。使用也能做到localStorage一样【作者:唐霜】【转载请注明来源】便捷。另外,IndexedDB是被广泛支【本文受版权保护】【转载请注明来源】持的HTML5标准,兼容大部分浏览器,因【原创不易,请尊重版权】【原创内容,转载请注明出处】此不用担心它的发展前景。
本文版权归作者所有,未经授权不得转载。本文版权归作者所有,未经授权不得转载。【本文首发于唐霜的博客】【访问 www.tangshuang.net 获取更多精彩内容】接下来,我们究竟应该怎么合理使用Inde【本文首发于唐霜的博客】【关注微信公众号:wwwtangshuangnet】xedDB,保证我们前端存储的合理性呢?
【本文受版权保护】本文作者:唐霜,转载请注明出处。【转载请注明来源】本文版权归作者所有,未经授权不得转载。
上图展示了前端存储日志的流程和数据库布局本文作者:唐霜,转载请注明出处。【转载请注明来源】。当一个事件、变动、异常被捕获之后,形成本文版权归作者所有,未经授权不得转载。著作权归作者所有,禁止商业用途转载。一条初始日志,被立即放入暂存区(inde【本文受版权保护】【版权所有,侵权必究】xedDB的一个store),之后主程序本文作者:唐霜,转载请注明出处。【原创不易,请尊重版权】就结束了收集过程,后续的事只在webwo转载请注明出处:www.tangshuang.net本文作者:唐霜,转载请注明出处。rker中发生。在一个webworker【转载请注明来源】【关注微信公众号:wwwtangshuangnet】中,一个循环任务不断从暂存区中取出日志,【未经授权禁止转载】【本文受版权保护】对日志进行分类,将分类结果存储到索引区中著作权归作者所有,禁止商业用途转载。原创内容,盗版必究。,并对日志记录的信息进行丰富,将最终将会【未经授权禁止转载】原创内容,盗版必究。上报到服务端的日志记录转存到归档区。而当【关注微信公众号:wwwtangshuangnet】转载请注明出处:www.tangshuang.net一条日志在归档区中存在的时间超过一定天数【本文首发于唐霜的博客】【转载请注明来源】之后,它就已经没有价值了,但是为了防止特未经授权,禁止复制转载。【访问 www.tangshuang.net 获取更多精彩内容】殊情况,它被转存到回收区,再经历一段时间【作者:唐霜】【本文受版权保护】后,就会被从回收区中清除。
【作者:唐霜】【访问 www.tangshuang.net 获取更多精彩内容】未经授权,禁止复制转载。本文版权归作者所有,未经授权不得转载。3.2 前端整理日志
上文讲到,在一个webworker中对日【转载请注明来源】【版权所有,侵权必究】志进行整理后存到索引区和归档区,那么这个【原创不易,请尊重版权】【作者:唐霜】整理过程是怎样的呢?
未经授权,禁止复制转载。【本文首发于唐霜的博客】【版权所有,侵权必究】【作者:唐霜】由于我们下文要讲的上报,是按照索引进行的【版权所有,侵权必究】转载请注明出处:www.tangshuang.net,因此,我们在前端的日志整理工作,主要就【版权所有】唐霜 www.tangshuang.net【转载请注明来源】是根据日志特征,整理出不同的索引。我们在【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。收集日志时,会给每一条日志打上一个typ著作权归作者所有,禁止商业用途转载。原创内容,盗版必究。e,以此进行分类,并创建索引,同时通过o原创内容,盗版必究。【本文受版权保护】bject-hashcode计算每个lo【版权所有】唐霜 www.tangshuang.net【作者:唐霜】g对象的hash值,作为这个log的唯一【版权所有,侵权必究】【关注微信公众号:wwwtangshuangnet】标志。
【访问 www.tangshuang.net 获取更多精彩内容】未经授权,禁止复制转载。- 将所有日志记录按时序存放在归档区,并将新本文作者:唐霜,转载请注明出处。未经授权,禁止复制转载。入库的日志加入索引 【转载请注明来源】未经授权,禁止复制转载。
- BatchIndexes:批量上报索引(【访问 www.tangshuang.net 获取更多精彩内容】著作权归作者所有,禁止商业用途转载。包含性能等其他日志),可一次批量上报10未经授权,禁止复制转载。【访问 www.tangshuang.net 获取更多精彩内容】0条 【原创内容,转载请注明出处】未经授权,禁止复制转载。
- MomentIndexes:即时上报索引【未经授权禁止转载】转载请注明出处:www.tangshuang.net,一次全部上报 【版权所有】唐霜 www.tangshuang.net【作者:唐霜】本文作者:唐霜,转载请注明出处。转载请注明出处:www.tangshuang.net
- FeedbackIndexes:用户反馈【转载请注明来源】【关注微信公众号:wwwtangshuangnet】索引,一次上报一条 未经授权,禁止复制转载。【原创不易,请尊重版权】【未经授权禁止转载】
- BlockIndexes:区块上报索引,本文作者:唐霜,转载请注明出处。【原创不易,请尊重版权】按异常/错误(traceId,reque【本文受版权保护】【原创不易,请尊重版权】stId)分块,一次上报一块 本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。未经授权,禁止复制转载。【访问 www.tangshuang.net 获取更多精彩内容】
- 上报完成后,被上报过的日志对应的索引删除 本文版权归作者所有,未经授权不得转载。【关注微信公众号:wwwtangshuangnet】转载请注明出处:www.tangshuang.net【未经授权禁止转载】
- 3天以上日志进入回收区 【本文受版权保护】【原创不易,请尊重版权】【转载请注明来源】
- 7天以上的日志从回收区清除 著作权归作者所有,禁止商业用途转载。本文版权归作者所有,未经授权不得转载。
rquestId:同时追踪前后端日志。由【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net于后端也会记录自己的日志,因此,在前端请【访问 www.tangshuang.net 获取更多精彩内容】【关注微信公众号:wwwtangshuangnet】求api的时候,默认带上requestI【版权所有】唐霜 www.tangshuang.net【未经授权禁止转载】d,后端记录的日志就可以和前端日志对应起【本文首发于唐霜的博客】未经授权,禁止复制转载。来。
原创内容,盗版必究。【关注微信公众号:wwwtangshuangnet】【原创内容,转载请注明出处】【关注微信公众号:wwwtangshuangnet】traceId:追踪一个异常发生前后的相【版权所有,侵权必究】【本文首发于唐霜的博客】关日志。当应用启动时,创建一个trace【原创内容,转载请注明出处】【版权所有】唐霜 www.tangshuang.netId,直到一个异常发生时,刷新trace【访问 www.tangshuang.net 获取更多精彩内容】【访问 www.tangshuang.net 获取更多精彩内容】Id。把一个traceId相关的requ未经授权,禁止复制转载。未经授权,禁止复制转载。estId收集起来,把这些request【原创内容,转载请注明出处】本文版权归作者所有,未经授权不得转载。Id相关的日志组合起来,就是最终这个异常转载请注明出处:www.tangshuang.net著作权归作者所有,禁止商业用途转载。相关的所有日志,用来对异常进行复盘。
原创内容,盗版必究。【本文首发于唐霜的博客】
上图举例展示了如何利用traceId和r未经授权,禁止复制转载。【未经授权禁止转载】equestId找出和一个异常相关的所有本文作者:唐霜,转载请注明出处。【转载请注明来源】日志。在上图中,hash4是一条异常日志本文版权归作者所有,未经授权不得转载。【版权所有,侵权必究】,我们找到hash4对应的traceId本文版权归作者所有,未经授权不得转载。【版权所有,侵权必究】为traceId2,在日志列表中,有两条本文作者:唐霜,转载请注明出处。【本文首发于唐霜的博客】记录具有该traceId,但是hash3【本文受版权保护】本文版权归作者所有,未经授权不得转载。这条记录并不是一个动作的开始,因为has原创内容,盗版必究。【本文受版权保护】h3对应的requestId为reqId【版权所有,侵权必究】【作者:唐霜】2,而reqId2开始于hash2,因此【版权所有,侵权必究】【访问 www.tangshuang.net 获取更多精彩内容】,我们实际上要把hash2也加入到该异常本文作者:唐霜,转载请注明出处。【原创不易,请尊重版权】发生的整个复盘备选记录中。总结起来就是,【原创内容,转载请注明出处】【访问 www.tangshuang.net 获取更多精彩内容】我们要找出同一个traceId对应的所有转载请注明出处:www.tangshuang.net本文作者:唐霜,转载请注明出处。requestId对应的日志记录,虽然有未经授权,禁止复制转载。【未经授权禁止转载】点绕,但稍理解就可以明白其中的道理。
【本文受版权保护】【版权所有】唐霜 www.tangshuang.net【本文受版权保护】【本文受版权保护】我们把这些和一个异常相关的所有日志集合起本文版权归作者所有,未经授权不得转载。【作者:唐霜】来,称为一个block,再利用日志的ha著作权归作者所有,禁止商业用途转载。著作权归作者所有,禁止商业用途转载。sh集合,得出这个block的hash,【版权所有】唐霜 www.tangshuang.net【访问 www.tangshuang.net 获取更多精彩内容】并在索引区中建立索引,等待上报。
【访问 www.tangshuang.net 获取更多精彩内容】【原创内容,转载请注明出处】【原创不易,请尊重版权】3.3 上报日志
上报日志也在webworker中进行,为【版权所有,侵权必究】【未经授权禁止转载】了和整理区分,可以分两个worker。上【本文首发于唐霜的博客】未经授权,禁止复制转载。报的流程大致为:在每一个循环中,从索引区【关注微信公众号:wwwtangshuangnet】【原创内容,转载请注明出处】取出对应条数的索引,通过索引中的hash【访问 www.tangshuang.net 获取更多精彩内容】原创内容,盗版必究。,到归档区取出完整的日志记录,再上传到服【原创内容,转载请注明出处】原创内容,盗版必究。务器。
【版权所有,侵权必究】【原创不易,请尊重版权】未经授权,禁止复制转载。【关注微信公众号:wwwtangshuangnet】按照上报的频率(重要紧急度)可将上报分为原创内容,盗版必究。【版权所有,侵权必究】四种:
【原创内容,转载请注明出处】【关注微信公众号:wwwtangshuangnet】【转载请注明来源】【转载请注明来源】a. 即时上报
收集到日志后,立即触发上报函数。仅用于A【本文首发于唐霜的博客】本文版权归作者所有,未经授权不得转载。类异常。而且由于受到网络不确定因素影响,【访问 www.tangshuang.net 获取更多精彩内容】本文作者:唐霜,转载请注明出处。A类日志上报需要有一个确认机制,只有确认本文版权归作者所有,未经授权不得转载。未经授权,禁止复制转载。服务端已经成功接收到该上报信息之后,才算原创内容,盗版必究。本文版权归作者所有,未经授权不得转载。完成。否则需要有一个循环机制,确保上报成【版权所有,侵权必究】未经授权,禁止复制转载。功。
原创内容,盗版必究。【未经授权禁止转载】b. 批量上报
将收集到的日志存储在本地,当收集到一定数【转载请注明来源】原创内容,盗版必究。量之后再打包一次性上报,或者按照一定的频【关注微信公众号:wwwtangshuangnet】著作权归作者所有,禁止商业用途转载。率(时间间隔)打包上传。这相当于把多次合【本文受版权保护】【本文受版权保护】并为一次上报,以降低对服务器的压力。
原创内容,盗版必究。【本文受版权保护】未经授权,禁止复制转载。c. 区块上报
将一次异常的场景打包为一个区块后进行上报【版权所有,侵权必究】【作者:唐霜】。它和批量上报不同,批量上报保证了日志的本文版权归作者所有,未经授权不得转载。著作权归作者所有,禁止商业用途转载。完整性,全面性,但会有无用信息。而区块上著作权归作者所有,禁止商业用途转载。【本文受版权保护】报则是针对异常本身的,确保单个异常相关的【原创内容,转载请注明出处】【版权所有,侵权必究】日志被全部上报。
原创内容,盗版必究。本文作者:唐霜,转载请注明出处。d. 用户主动提交
在界面上提供一个按钮,用户主动反馈bug【本文首发于唐霜的博客】【原创内容,转载请注明出处】。这有利于加强与用户的互动。
【关注微信公众号:wwwtangshuangnet】原创内容,盗版必究。本文版权归作者所有,未经授权不得转载。或者当异常发生时,虽然对用户没有任何影响【版权所有】唐霜 www.tangshuang.net【关注微信公众号:wwwtangshuangnet】,但是应用监控到了,弹出一个提示框,让用本文版权归作者所有,未经授权不得转载。【版权所有】唐霜 www.tangshuang.net户选择是否愿意上传日志。这种方案适合涉及【未经授权禁止转载】原创内容,盗版必究。用户隐私数据时。
【作者:唐霜】【未经授权禁止转载】| 即时上报 | 批量上报 | 区块上报 | 用户反馈 | |
| 时效 | 立即 | 定时 | 稍延时 | 延时 |
| 条数 | 一次全部上报 | 一次100条 | 单次上报相关条目 | 一次1条 |
| 容量 | 小 | 中 | – | – |
| 紧急 | 紧急重要 | 不紧急 | 不紧急但重要 | 不紧急 |
即时上报虽然叫即时,但是其实也是通过类似著作权归作者所有,禁止商业用途转载。本文版权归作者所有,未经授权不得转载。队列的循环任务去完成的,它主要是尽快把一【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net些重要的异常提交给监控系统,好让运维人员著作权归作者所有,禁止商业用途转载。【作者:唐霜】发现问题,因此,它对应的紧急程度比较高。
本文版权归作者所有,未经授权不得转载。【未经授权禁止转载】【访问 www.tangshuang.net 获取更多精彩内容】批量上报和区块上报的区别:批量上报是一次转载请注明出处:www.tangshuang.net【原创内容,转载请注明出处】上报一定条数,比如每2分钟上报1000条【本文首发于唐霜的博客】【原创内容,转载请注明出处】,直到上报完成。而区块上报是在异常发生之转载请注明出处:www.tangshuang.net未经授权,禁止复制转载。后,马上收集和异常相关的所有日志,查询出【原创不易,请尊重版权】本文作者:唐霜,转载请注明出处。哪些日志已经由批量上报上报过了,剔除掉,【作者:唐霜】转载请注明出处:www.tangshuang.net把其他相关日志上传,和异常相关的这些日志未经授权,禁止复制转载。著作权归作者所有,禁止商业用途转载。相对而言更重要一些,它们可以帮助尽快复原转载请注明出处:www.tangshuang.net【本文受版权保护】异常现场,找出发生异常的根源。
原创内容,盗版必究。转载请注明出处:www.tangshuang.net用户提交的反馈信息,则可以慢悠悠上报上去【访问 www.tangshuang.net 获取更多精彩内容】著作权归作者所有,禁止商业用途转载。。
【本文受版权保护】【原创内容,转载请注明出处】【本文受版权保护】【原创不易,请尊重版权】为了确保上报是成功的,在上报时需要有一个【原创不易,请尊重版权】【关注微信公众号:wwwtangshuangnet】确认机制,由于在服务端接收到上报日志之后本文作者:唐霜,转载请注明出处。【本文首发于唐霜的博客】,并不会立即存入数据库,而是放到一个队列转载请注明出处:www.tangshuang.net【版权所有,侵权必究】中,因此,前后端在确保日志确实已经记录进【原创不易,请尊重版权】未经授权,禁止复制转载。数据库这一点上需要再做一些处理。
【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。未经授权,禁止复制转载。
上图展示了上报的一个大致流程,在上报时,【版权所有】唐霜 www.tangshuang.net【原创不易,请尊重版权】先通过hash查询,让客户端知道准备要上【访问 www.tangshuang.net 获取更多精彩内容】著作权归作者所有,禁止商业用途转载。报的日志集合中,是否存在已经被服务端保存【转载请注明来源】转载请注明出处:www.tangshuang.net好的日志,如果已经存在,就将这些日志去除【版权所有,侵权必究】【版权所有】唐霜 www.tangshuang.net,避免重复上报,浪费流量。
著作权归作者所有,禁止商业用途转载。【本文首发于唐霜的博客】本文版权归作者所有,未经授权不得转载。3.4 压缩上报数据
一次性上传批量数据时,必然遇到数据量大,本文作者:唐霜,转载请注明出处。原创内容,盗版必究。浪费流量,或者传输慢等情况,网络不好的状未经授权,禁止复制转载。【本文首发于唐霜的博客】态下,可能导致上报失败。因此,在上报之前【转载请注明来源】【未经授权禁止转载】进行数据压缩也是一种方案。
【原创内容,转载请注明出处】【访问 www.tangshuang.net 获取更多精彩内容】本文作者:唐霜,转载请注明出处。对于合并上报这种情况,一次的数据量可能要【作者:唐霜】转载请注明出处:www.tangshuang.net十几k,对于日 pv 大的站点来说,产生原创内容,盗版必究。著作权归作者所有,禁止商业用途转载。的流量还是很可观的。所以有必要对数据进行【版权所有,侵权必究】【版权所有,侵权必究】压缩上报。lz-string是一个非常优【原创不易,请尊重版权】【未经授权禁止转载】秀的字符串压缩类库,兼容性好,代码量少,转载请注明出处:www.tangshuang.net原创内容,盗版必究。压缩比高,压缩时间短,压缩率达到惊人的6【版权所有,侵权必究】本文作者:唐霜,转载请注明出处。0%。但它基于LZ78压缩,如果后端不支【版权所有,侵权必究】【转载请注明来源】持解压,可选择gzip压缩,一般而言后端原创内容,盗版必究。原创内容,盗版必究。会默认预装gzip,因此,选择gzip压原创内容,盗版必究。【原创不易,请尊重版权】缩数据也可以,工具包pako中自带了gz【版权所有,侵权必究】著作权归作者所有,禁止商业用途转载。ip压缩,可以尝试使用。
【访问 www.tangshuang.net 获取更多精彩内容】本文版权归作者所有,未经授权不得转载。4 日志接收与存储
4.1 接入层与消息队列
一般通过提供独立的日志服务器接收客户端日原创内容,盗版必究。【版权所有,侵权必究】志,接收过程中,要对客户端日志内容的合法【未经授权禁止转载】【访问 www.tangshuang.net 获取更多精彩内容】性、安全性等进行甄别,防止被人攻击。而且【版权所有】唐霜 www.tangshuang.net未经授权,禁止复制转载。由于日志提交一般都比较频繁,多客户端同时【作者:唐霜】【版权所有】唐霜 www.tangshuang.net并发的情况也常见。通过消息队列将日志信息转载请注明出处:www.tangshuang.net著作权归作者所有,禁止商业用途转载。逐一处理后写入到数据库进行保存也是比较常【关注微信公众号:wwwtangshuangnet】【访问 www.tangshuang.net 获取更多精彩内容】用的方案。
【转载请注明来源】著作权归作者所有,禁止商业用途转载。【转载请注明来源】
上图为腾讯BetterJS的架构图,其中本文作者:唐霜,转载请注明出处。【版权所有,侵权必究】“接入层”和“推送中心”就是这里提到的接原创内容,盗版必究。【关注微信公众号:wwwtangshuangnet】入层和消息队列。BetterJS将整个前【转载请注明来源】【版权所有,侵权必究】端监控的各个模块进行拆分,推送中心承担了本文作者:唐霜,转载请注明出处。原创内容,盗版必究。将日志推送到存储中心进行存储和推送给其他未经授权,禁止复制转载。【版权所有】唐霜 www.tangshuang.net系统(例如告警系统)的角色,但我们可以把【本文首发于唐霜的博客】原创内容,盗版必究。接收日志阶段的队列独立出来看,在接入层和本文作者:唐霜,转载请注明出处。【转载请注明来源】存储层之间做一个过渡。
本文作者:唐霜,转载请注明出处。【本文首发于唐霜的博客】【版权所有,侵权必究】4.2 日志存储系统
存储日志是一个脏活累活,但是不得不做。对【关注微信公众号:wwwtangshuangnet】原创内容,盗版必究。于小应用,单库单表加优化就可以应付。一个本文作者:唐霜,转载请注明出处。著作权归作者所有,禁止商业用途转载。成规模的应用,如果要提供更标准高效的日志【未经授权禁止转载】【本文受版权保护】监控服务,常常需要在日志存储架构上下一些【本文首发于唐霜的博客】未经授权,禁止复制转载。功夫。目前业界已经有比较完备的日志存储方【原创内容,转载请注明出处】转载请注明出处:www.tangshuang.net案,主要有:Hbase系,Dremel系【本文首发于唐霜的博客】本文版权归作者所有,未经授权不得转载。,Lucene系等。总体而言,日志存储系【作者:唐霜】【访问 www.tangshuang.net 获取更多精彩内容】统主要面对的问题是数据量大,数据结构不规【版权所有】唐霜 www.tangshuang.net本文版权归作者所有,未经授权不得转载。律,写入并发高,查询需求大等。一般一套日本文作者:唐霜,转载请注明出处。【本文首发于唐霜的博客】志存储系统,要解决上面这些问题,就要解决原创内容,盗版必究。著作权归作者所有,禁止商业用途转载。写入的缓冲,存储介质按日志时间选择,为方未经授权,禁止复制转载。【版权所有】唐霜 www.tangshuang.net便快速读取而设计合理的索引系统等等。
【转载请注明来源】【本文受版权保护】本文作者:唐霜,转载请注明出处。【原创内容,转载请注明出处】由于日志存储系统方案比较成熟,这里就不再【作者:唐霜】原创内容,盗版必究。做更多讨论。
【未经授权禁止转载】原创内容,盗版必究。原创内容,盗版必究。4.3 搜索
日志的最终目的是要使用,由于一般日志的体【关注微信公众号:wwwtangshuangnet】著作权归作者所有,禁止商业用途转载。量都非常大,因此,要在庞大的数据中找到需【版权所有】唐霜 www.tangshuang.net转载请注明出处:www.tangshuang.net要的日志记录,需要依赖比较好的搜索引擎。著作权归作者所有,禁止商业用途转载。【版权所有,侵权必究】Splunk是一套成熟的日志存储系统,但本文作者:唐霜,转载请注明出处。【本文受版权保护】它是付费使用的。按照Splunk的框架,【访问 www.tangshuang.net 获取更多精彩内容】【作者:唐霜】Elk是Splunk的开源实现,Elk是【未经授权禁止转载】【版权所有,侵权必究】ElasticSearch、Logsta【访问 www.tangshuang.net 获取更多精彩内容】【访问 www.tangshuang.net 获取更多精彩内容】sh、Kibana的结合,ES基于Luc【版权所有,侵权必究】【本文受版权保护】ene的存储、索引的搜索引擎;logst本文版权归作者所有,未经授权不得转载。转载请注明出处:www.tangshuang.netash是提供输入输出及转化处理插件的日志【关注微信公众号:wwwtangshuangnet】【本文首发于唐霜的博客】标准化管道;Kibana提供可视化和查询未经授权,禁止复制转载。【版权所有】唐霜 www.tangshuang.net统计的用户界面。
【版权所有,侵权必究】【关注微信公众号:wwwtangshuangnet】5 日志统计与分析
一个完善的日志统计分析工具需要提供各方面原创内容,盗版必究。【本文首发于唐霜的博客】方便的面板,以可视化的方式给日志管理员和【访问 www.tangshuang.net 获取更多精彩内容】未经授权,禁止复制转载。开发者反馈信息。
【本文首发于唐霜的博客】本文作者:唐霜,转载请注明出处。未经授权,禁止复制转载。5.1 用户纬度
同一个用户的不同请求实际上会形成不同的s【访问 www.tangshuang.net 获取更多精彩内容】本文版权归作者所有,未经授权不得转载。tory线,因此,针对用户的一系列操作设【本文受版权保护】【未经授权禁止转载】计唯一的request id是有必要的。【版权所有】唐霜 www.tangshuang.net【作者:唐霜】同一个用户在不同终端进行操作时,也能进行【作者:唐霜】【原创内容,转载请注明出处】区分。用户在进行某个操作时的状态、权限等【作者:唐霜】未经授权,禁止复制转载。信息,也需要在日志系统中予以反应。
【版权所有,侵权必究】本文版权归作者所有,未经授权不得转载。【本文首发于唐霜的博客】5.2 时间维度
一个异常是怎么发生的,需要将异常操作的前【关注微信公众号:wwwtangshuangnet】未经授权,禁止复制转载。后story线串联起来观察。它不单单涉及本文版权归作者所有,未经授权不得转载。转载请注明出处:www.tangshuang.net一个用户的一次操作,甚至不限于某一个页面【未经授权禁止转载】著作权归作者所有,禁止商业用途转载。,而是一连串事件的最终结果。
【本文受版权保护】【作者:唐霜】5.3 性能维度
应用运行过程中的性能情况,例如,界面加载【访问 www.tangshuang.net 获取更多精彩内容】未经授权,禁止复制转载。时间,api请求时长统计,单元计算的消耗转载请注明出处:www.tangshuang.net【关注微信公众号:wwwtangshuangnet】,用户呆滞时间。
【作者:唐霜】【版权所有】唐霜 www.tangshuang.net5.4 运行环境维度
应用及服务所运行的环境情况,例如应用所在未经授权,禁止复制转载。【原创不易,请尊重版权】的网络环境,操作系统,设备硬件信息等,服【作者:唐霜】【版权所有,侵权必究】务器cpu、内存状况,网络、宽带使用情况【原创不易,请尊重版权】【版权所有,侵权必究】等。
【原创不易,请尊重版权】【版权所有,侵权必究】【原创内容,转载请注明出处】转载请注明出处:www.tangshuang.net5.4 细粒度代码追踪
异常的代码stack信息,定位到发生异常未经授权,禁止复制转载。【未经授权禁止转载】的代码位置和异常堆栈。
转载请注明出处:www.tangshuang.net【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net5.6 场景回溯
通过将异常相关的用户日志连接起来,以动态【版权所有,侵权必究】【访问 www.tangshuang.net 获取更多精彩内容】的效果输出发生异常的过程。
【未经授权禁止转载】【本文受版权保护】【转载请注明来源】6 监控与通知
对异常进行统计和分析只是基础,而在发现异未经授权,禁止复制转载。转载请注明出处:www.tangshuang.net常时可以推送和告警,甚至做到自动处理,才【关注微信公众号:wwwtangshuangnet】【本文受版权保护】是一个异常监控系统应该具备的能力。
本文作者:唐霜,转载请注明出处。【转载请注明来源】【原创内容,转载请注明出处】6.1 自定义触发条件的告警
a. 监控实现
【版权所有】唐霜 www.tangshuang.net未经授权,禁止复制转载。【原创内容,转载请注明出处】当日志信息进入接入层时,就可以触发监控逻著作权归作者所有,禁止商业用途转载。转载请注明出处:www.tangshuang.net辑。当日志信息中存在较为高级别的异常时,转载请注明出处:www.tangshuang.net【本文受版权保护】也可以立即出发告警。告警消息队列和日志入【访问 www.tangshuang.net 获取更多精彩内容】【访问 www.tangshuang.net 获取更多精彩内容】库队列可以分开来管理,实现并行。
【本文受版权保护】【转载请注明来源】原创内容,盗版必究。著作权归作者所有,禁止商业用途转载。对入库日志信息进行统计,对异常信息进行告【本文受版权保护】转载请注明出处:www.tangshuang.net警。对监控异常进行响应。所谓监控异常,是【版权所有】唐霜 www.tangshuang.net【版权所有】唐霜 www.tangshuang.net指:有规律的异常一般而言都比较让人放心,【版权所有】唐霜 www.tangshuang.net【版权所有】唐霜 www.tangshuang.net比较麻烦的是突然之间的异常。例如在某一时本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。段突然频繁接收到D级异常,虽然D级异常是【作者:唐霜】【未经授权禁止转载】不紧急一般重要,但是当监控本身发生异常时转载请注明出处:www.tangshuang.net著作权归作者所有,禁止商业用途转载。,就要提高警惕。
【未经授权禁止转载】【关注微信公众号:wwwtangshuangnet】【版权所有】唐霜 www.tangshuang.netb. 自定义触发条件
【版权所有】唐霜 www.tangshuang.net【原创内容,转载请注明出处】本文作者:唐霜,转载请注明出处。除了系统开发时配置的默认告警条件,还应该【本文受版权保护】未经授权,禁止复制转载。提供给日志管理员可配置的自定义触发条件。
本文作者:唐霜,转载请注明出处。【原创内容,转载请注明出处】未经授权,禁止复制转载。【版权所有,侵权必究】- 日志内含有什么内容时 【原创不易,请尊重版权】原创内容,盗版必究。【版权所有,侵权必究】【本文受版权保护】
- 日志统计达到什么度、量时 本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。
- 向符合什么条件的用户告警 本文版权归作者所有,未经授权不得转载。【版权所有】唐霜 www.tangshuang.net
6.2 推送渠道
可选择的途径有很多,例如邮件、短信、微信未经授权,禁止复制转载。本文版权归作者所有,未经授权不得转载。、电话。
【作者:唐霜】转载请注明出处:www.tangshuang.net【本文受版权保护】6.3 推送频率
针对不同级别的告警,推送的频率也可以进行著作权归作者所有,禁止商业用途转载。【原创不易,请尊重版权】设定。低风险告警可以以报告的形式一天推送未经授权,禁止复制转载。【本文受版权保护】一次,高风险告警10分钟循环推送,直到处【访问 www.tangshuang.net 获取更多精彩内容】【原创内容,转载请注明出处】理人手动关闭告警开关。
【本文受版权保护】著作权归作者所有,禁止商业用途转载。6.4 自动报表
对于日志统计信息的推送,可以做到自动生成原创内容,盗版必究。【本文首发于唐霜的博客】日报、周报、月报、年报并邮件发送给相关群本文作者:唐霜,转载请注明出处。转载请注明出处:www.tangshuang.net组。
著作权归作者所有,禁止商业用途转载。转载请注明出处:www.tangshuang.net6.5 自动产生bug工单
当异常发生时,系统可以调用工单系统API【本文受版权保护】【关注微信公众号:wwwtangshuangnet】实现自动生成bug单,工单关闭后反馈给监【原创不易,请尊重版权】【原创内容,转载请注明出处】控系统,形成对异常处理的追踪信息进行记录【转载请注明来源】原创内容,盗版必究。,在报告中予以展示。
著作权归作者所有,禁止商业用途转载。转载请注明出处:www.tangshuang.net本文版权归作者所有,未经授权不得转载。7 修复异常
7.1 sourcemap
前端代码大部分情况都是经过压缩后发布的,原创内容,盗版必究。【版权所有】唐霜 www.tangshuang.net上报的stack信息需要还原为源码信息,【未经授权禁止转载】【本文首发于唐霜的博客】才能快速定位源码进行修改。
【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。原创内容,盗版必究。原创内容,盗版必究。发布时,只部署js脚本到服务器上,将so【版权所有】唐霜 www.tangshuang.net【作者:唐霜】urcemap文件上传到监控系统,在监控转载请注明出处:www.tangshuang.net【原创不易,请尊重版权】系统中展示stack信息时,利用sour【原创内容,转载请注明出处】【版权所有】唐霜 www.tangshuang.netcemap文件对stack信息进行解码,转载请注明出处:www.tangshuang.net本文作者:唐霜,转载请注明出处。得到源码中的具体信息。
原创内容,盗版必究。【关注微信公众号:wwwtangshuangnet】著作权归作者所有,禁止商业用途转载。【转载请注明来源】但是这里有一个问题,就是sourcema【版权所有】唐霜 www.tangshuang.net【关注微信公众号:wwwtangshuangnet】p必须和正式环境的版本对应,还必须和gi【原创内容,转载请注明出处】本文版权归作者所有,未经授权不得转载。t中的某个commit节点对应,这样才能【原创不易,请尊重版权】【版权所有】唐霜 www.tangshuang.net保证在查异常的时候可以正确利用stack原创内容,盗版必究。【访问 www.tangshuang.net 获取更多精彩内容】信息,找到出问题所在版本的代码。这些可以未经授权,禁止复制转载。【版权所有,侵权必究】通过建立CI任务,在集成化部署中增加一个本文作者:唐霜,转载请注明出处。【原创不易,请尊重版权】部署流程,以实现这一环节。
【关注微信公众号:wwwtangshuangnet】【本文首发于唐霜的博客】本文版权归作者所有,未经授权不得转载。原创内容,盗版必究。7.2 从告警到预警
预警的本质是,预设可能出现异常的条件,当【作者:唐霜】【访问 www.tangshuang.net 获取更多精彩内容】触发该条件时异常并没有真实发生,因此,可【关注微信公众号:wwwtangshuangnet】【作者:唐霜】以赶在异常发生之前对用户行为进行检查,及未经授权,禁止复制转载。本文版权归作者所有,未经授权不得转载。时修复,避免异常或异常扩大。
原创内容,盗版必究。【关注微信公众号:wwwtangshuangnet】【本文受版权保护】【版权所有】唐霜 www.tangshuang.net怎么做呢?其实就是一个统计聚类的过程。将【原创不易,请尊重版权】【关注微信公众号:wwwtangshuangnet】历史中发生异常的情况进行统计,从时间、地【原创不易,请尊重版权】【本文首发于唐霜的博客】域、用户等不同维度加以统计,找出规律,并【关注微信公众号:wwwtangshuangnet】【关注微信公众号:wwwtangshuangnet】将这些规律通过算法自动加入到预警条件中,【作者:唐霜】【原创内容,转载请注明出处】当下次触发时,及时预警。
【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net【本文首发于唐霜的博客】原创内容,盗版必究。7.3 智能修复
自动修复错误。例如,前端要求接口返回数值【作者:唐霜】原创内容,盗版必究。,但接口返回了数值型的字符串,那么可以有【转载请注明来源】【版权所有】唐霜 www.tangshuang.net一种机制,监控系统发送正确数据类型模型给【访问 www.tangshuang.net 获取更多精彩内容】【原创内容,转载请注明出处】后端,后端在返回数据时,根据该模型控制每原创内容,盗版必究。未经授权,禁止复制转载。个字段的类型。
未经授权,禁止复制转载。【本文受版权保护】转载请注明出处:www.tangshuang.net8 异常测试
8.1 主动异常测试
撰写异常用例,在自动化测试系统中,加入异转载请注明出处:www.tangshuang.net【版权所有】唐霜 www.tangshuang.net常测试用户。在测试或运行过程中,每发现一本文版权归作者所有,未经授权不得转载。【版权所有,侵权必究】个异常,就将它加入到原有的异常用例列表中未经授权,禁止复制转载。【版权所有】唐霜 www.tangshuang.net。
【原创不易,请尊重版权】【转载请注明来源】8.2 随机异常测试
模拟真实环境,在模拟器中模拟真实用户的随未经授权,禁止复制转载。未经授权,禁止复制转载。机操作,利用自动化脚本产生随机操作动作代转载请注明出处:www.tangshuang.net【关注微信公众号:wwwtangshuangnet】码,并执行。
【原创不易,请尊重版权】著作权归作者所有,禁止商业用途转载。【原创内容,转载请注明出处】定义异常,例如弹出某个弹出框,包含特定内本文版权归作者所有,未经授权不得转载。本文作者:唐霜,转载请注明出处。容时,就是异常。将这些测试结果记录下来,【关注微信公众号:wwwtangshuangnet】【本文受版权保护】再聚类统计分析,对防御异常也很有帮助。
本文作者:唐霜,转载请注明出处。转载请注明出处:www.tangshuang.net9 部署
9.1 多客户端
一个用户在不同终端上登录,或者一个用户在【本文首发于唐霜的博客】转载请注明出处:www.tangshuang.net登录前和登录后的状态。通过特定算法生成r【版权所有】唐霜 www.tangshuang.net本文版权归作者所有,未经授权不得转载。equestID,通过该requestI【作者:唐霜】著作权归作者所有,禁止商业用途转载。d可以确定某个用户在独立客户端上的一系列【关注微信公众号:wwwtangshuangnet】转载请注明出处:www.tangshuang.net操作,根据日志时序,可以梳理出用户产生异【访问 www.tangshuang.net 获取更多精彩内容】未经授权,禁止复制转载。常的具体路径。
【关注微信公众号:wwwtangshuangnet】【本文受版权保护】9.2 集成便捷性
前端写成包,全局引用即可完成大部分日志记【版权所有】唐霜 www.tangshuang.net【作者:唐霜】录、存储和上报。在特殊逻辑里面,可以调用本文版权归作者所有,未经授权不得转载。原创内容,盗版必究。特定方法记录日志。
【作者:唐霜】【原创内容,转载请注明出处】后端与应用本身的业务代码解耦,可以做成独【原创不易,请尊重版权】【版权所有】唐霜 www.tangshuang.net立的服务,通过接口和第三方应用交互。利用【本文首发于唐霜的博客】【原创内容,转载请注明出处】集成部署,可以将系统随时进行扩容、移植等【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。操作。
【版权所有】唐霜 www.tangshuang.net转载请注明出处:www.tangshuang.net【转载请注明来源】未经授权,禁止复制转载。9.3 管理系统的可扩展
整套系统可扩展,不仅服务单应用,可支持多【原创不易,请尊重版权】【关注微信公众号:wwwtangshuangnet】个应用同时运行。同一个团队下的所有应用都【未经授权禁止转载】本文作者:唐霜,转载请注明出处。可以利用同一个平台进行管理。
【版权所有】唐霜 www.tangshuang.net【本文首发于唐霜的博客】【本文受版权保护】【访问 www.tangshuang.net 获取更多精彩内容】9.4 日志系统权限
不同的人在访问日志系统时权限不同,一个访未经授权,禁止复制转载。【作者:唐霜】问者只能查看自己相关的应用,有些统计数据【原创内容,转载请注明出处】本文作者:唐霜,转载请注明出处。如果比较敏感,可以单独设置权限,敏感数据未经授权,禁止复制转载。【原创内容,转载请注明出处】可脱敏。
【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。10 其他
10.1 性能监控
异常监控主要针对代码级别的报错,但也应该【原创不易,请尊重版权】著作权归作者所有,禁止商业用途转载。关注性能异常。性能监控主要包括:
本文版权归作者所有,未经授权不得转载。【版权所有,侵权必究】著作权归作者所有,禁止商业用途转载。- 运行时性能:文件级、模块级、函数级、算法著作权归作者所有,禁止商业用途转载。【未经授权禁止转载】级 【原创内容,转载请注明出处】未经授权,禁止复制转载。
- 网络请求速率 本文作者:唐霜,转载请注明出处。【版权所有】唐霜 www.tangshuang.net本文作者:唐霜,转载请注明出处。【未经授权禁止转载】
- 系统性能 【原创不易,请尊重版权】【作者:唐霜】【版权所有】唐霜 www.tangshuang.net
10.2 API Monitor
后端API对前端的影响也非常大,虽然前端【原创不易,请尊重版权】未经授权,禁止复制转载。代码也控制逻辑,但是后端返回的数据是基础【版权所有】唐霜 www.tangshuang.net【原创内容,转载请注明出处】,因此对API的监控可以分为:
转载请注明出处:www.tangshuang.net【转载请注明来源】【转载请注明来源】本文作者:唐霜,转载请注明出处。- 稳定性监控 未经授权,禁止复制转载。原创内容,盗版必究。【未经授权禁止转载】
- 数据格式和类型 【未经授权禁止转载】本文版权归作者所有,未经授权不得转载。【版权所有】唐霜 www.tangshuang.net转载请注明出处:www.tangshuang.net
- 报错监控 【作者:唐霜】【原创不易,请尊重版权】【原创不易,请尊重版权】【本文首发于唐霜的博客】
- 数据准确性监控 原创内容,盗版必究。【版权所有】唐霜 www.tangshuang.net【本文受版权保护】【转载请注明来源】
10.3 数据脱敏
敏感数据不被日志系统采集。由于日志系统的转载请注明出处:www.tangshuang.net未经授权,禁止复制转载。保存是比较开放的,虽然里面的数据很重要,【关注微信公众号:wwwtangshuangnet】【访问 www.tangshuang.net 获取更多精彩内容】但是在存储上大部分日志系统都不是保密级,【转载请注明来源】【版权所有】唐霜 www.tangshuang.net因此,如果应用涉及了敏感数据,最好做到:
【本文受版权保护】【原创内容,转载请注明出处】【未经授权禁止转载】【关注微信公众号:wwwtangshuangnet】- 独立部署,不和其他应用共享监控系统 【版权所有】唐霜 www.tangshuang.net原创内容,盗版必究。【版权所有】唐霜 www.tangshuang.net
- 不采集具体数据,只采集用户操作数据,在重转载请注明出处:www.tangshuang.net【作者:唐霜】现时,通过日志信息可以取出数据api结果转载请注明出处:www.tangshuang.net未经授权,禁止复制转载。来展示 本文作者:唐霜,转载请注明出处。著作权归作者所有,禁止商业用途转载。原创内容,盗版必究。著作权归作者所有,禁止商业用途转载。
- 日志加密,做到软硬件层面的加密防护 本文版权归作者所有,未经授权不得转载。【版权所有,侵权必究】
- 必要时,可采集具体数据的ID用于调试,场【关注微信公众号:wwwtangshuangnet】著作权归作者所有,禁止商业用途转载。景重现时,用mock数据替代,mock数本文作者:唐霜,转载请注明出处。原创内容,盗版必究。据可由后端采用假的数据源生成 【作者:唐霜】著作权归作者所有,禁止商业用途转载。【本文首发于唐霜的博客】【版权所有,侵权必究】
- 对敏感数据进行混淆 【转载请注明来源】【原创不易,请尊重版权】未经授权,禁止复制转载。
结语
本文主要是对前端异常监控的整体框架进行了【原创内容,转载请注明出处】未经授权,禁止复制转载。研究,没有涉及到具体的技术实现,涉及前端本文作者:唐霜,转载请注明出处。【版权所有】唐霜 www.tangshuang.net部分和后台部分以及与整个问题相关的一些知【原创内容,转载请注明出处】【原创不易,请尊重版权】识点,主要关注前端部分,它和后端的监控有【未经授权禁止转载】【关注微信公众号:wwwtangshuangnet】重叠部分也有分支部分,需要在一个项目中不【关注微信公众号:wwwtangshuangnet】【本文首发于唐霜的博客】断实践,总结出项目本身的监控需求和策略。
【关注微信公众号:wwwtangshuangnet】【未经授权禁止转载】【版权所有】唐霜 www.tangshuang.net【原创不易,请尊重版权】【关注微信公众号:wwwtangshuangnet】本文版权归作者所有,未经授权不得转载。【原创内容,转载请注明出处】
这篇文章是我发在CDC博客上的公开文,为【版权所有】唐霜 www.tangshuang.net【作者:唐霜】了作为记录,也保存在自己的博客一份。
【访问 www.tangshuang.net 获取更多精彩内容】
查看原文:https://cdc.te【原创不易,请尊重版权】本文作者:唐霜,转载请注明出处。ncent.com/2018/09/13【关注微信公众号:wwwtangshuangnet】【本文受版权保护】/frontend-exception-【未经授权禁止转载】著作权归作者所有,禁止商业用途转载。monitor-research/
2018-10-02 7408


