解决方案之美团APP对Crash的治理之路

Crash率是衡量一款APP质量好坏的重要指标之一,不仅会影响用户体验,也可能影响用户存量。一旦出现问题,可能会给企业带来严重损失。

本文由美团技术专家谌天洲分享美团APP Crash率从千分之一到万分之一治理过程中所做的大量实践工作。

美团Crash治理背景

美团作为一个平台化的APP,背后有20+团队设计和30+业务。

在Crash治理过程中面对的挑战有三项:体量大、迭代快和日活高。这三项挑战带来的直接影响是沟通成本上升和防范难度加大。因此在实际治理过程,主要围绕基础能力、治理效率两个层面进行探索和优化建设。 tips-solution-2-201935223013

基础能力

Crash治理的基础能力主要体现在三个层面:能发现、能定位和能修复。

在发现能力层面,美团有一套异常监控退出系统,可发现除Java&JNI Crash&ANR以外其他类型的异常退出。在定位能力层面,有可提供内存泄漏路径及OOM时的内存快照的内存监控体系,有可提供线程现场及任务现场的线程管控体系。除此以外,还有动态日志系统提供额外的方法调用链及参数信息。

内存监控体系

内存问题最典型的呈现形式是OOM,其中80%通过Leak监控系统发现预防,另外20%的内存问题,对于大体量APP需要从全局对内存资源问题进行监控和调查分析。

美团的内存监控体系分为线下和线上两个场景。线下通过Leak监控系统能预防发现80%的OOM问题,线上建立随时获取OOM内存现场的监控能力 tips-solution-2-201935223125

动态日志

美团APP经常会遇到用户个性化的使用场景无法复现和定位的问题。对此,美团提出了一套动态日志系统——

在编译期对应用代码通过插桩实现代理,运行期同步记录,出现异常时可主动触发上报,也可以由服务端主动回捞。基于插桩实现的代理逻辑,可实施获取原方法执行时的方法名、入参和返回值信息,再将这些信息序列化后存储到数据库,由此可在必要的时候获取到较完善的方法调用栈历史,进而定位问题。 tips-solution-2-201935223215 tips-solution-2-201935223229

修复能力

在修复能力层面,美团APP一度深受机型多、系统杂带来的framework层的问题困扰。此外,美团APP也经常会遇到常规日志体系无法覆盖的接口问题。

针对这两类问题,参考热修复的方法替换原理,开发并完善了一套小工具——“Graft”。它的基本原理是在native层通过方法替换实现对Java层方法的hook和代理,进而在Java层实现方法代理和方法替换。

这套工具可以动态代理或替换几乎所有Java层的方法(包括framework层),使得美团APP的修复能力从自有代码和第三方代码有效覆盖到framework层。

tips-solution-2-201935223340 tips-solution-2-201935223353

效率提升

为了提高治理效率,实际治理过程逐渐形成PR检查流程、自动检查平台和Crash平台三大流程和平台。

PR检查流程主要针对PR阶段进行代码规范性检查、代码准入检查和稳定性案例检查;自动检查平台针对以往案例进行定制化防范检查。Crash平台是整个稳定性治理的核心,在建设的考量中主要遵循规范化、流程化、自动化,它主要涵盖接入管控、聚合策略、频道工单、报警系统、基础工具、模块覆盖,可以通过强大的复用能力快速接入并管理几乎所有稳定性相关的问题。 tips-solution-2-201935223433

Crash平台

Crash平台是整个稳定性治理的核心,在建设的考量中主要遵循规范化、流程化、自动化,它主要涵盖接入管控、聚合策略、频道工单、报警系统、基础工具、模块覆盖,可以通过强大的复用能力快速接入并管理几乎所有稳定性相关的问题。

在PR阶段,PR检查流程可自动识别出增量代码是否被现有体系覆盖,并通过Crash平台的接入管控系统督促增量代码的责任人完善基本信息、频道信息、聚合配合及自动工单配置等等。

在开发或全量过程中一旦发现异常,Crash平台会自动完成堆栈聚合、频道识别、报警评估及工单跟踪等工作。

tips-solution-2-201935223539 tips-solution-2-20193522365

Crash率是APP最重要的指标之一,谌天洲建议开发者建立解决Crash的长效机制,找到最合理的解决方案。随着版本的不断迭代,Crash治理之路才能离目标越来越近。

坚持原创技术分享,您的支持将鼓励我继续创作!