BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

Facebook调试iOS文件损坏的过程

| 作者 Sergio De Simone 关注 18 他的粉丝 ,译者 王振峰 关注 0 他的粉丝 发布于 2014年9月12日. 估计阅读时间: 5 分钟 | CNUTCon 了解国内外一线大厂50+智能运维最新实践案例。

Facebook工程师Slobodan Predolac和Nicolas Spielberg最近描述了他们如何解决了一个顽固的移动调试问题,并且使崩溃频率降低了50%以上。在此过程中,他们展示了若干通用的技巧以及Facebook发开的工具,这些对不断快速增长的大型代码库会有所帮助。

Predolac和Spielberg回顾说,此bug开始的时候有点像Core Data崩溃。他们首先使用Facebook自己的工具HipalScuba从崩溃日志中查找和搜集数据,分析的结果是Core Data错误编码没有统一的规律。

在查找问题的根源时,Facebook开发软件的方式是阻碍此过程的障碍之一,因为Facebook以月为发布周期,而且有数百名开发人员向各发布版本提交代码。所以,这两位工程师在文中描述说,“即使我们能够缩小引入bug的时间范围,也无法隔离数千次代码提交来纠错”。况且每次的版本发布都经过A/B测试,这就更难区分“到底是代码还是配置导致了该问题”。

证明以上方式行不通后,Facebook的工程师开始做出不同的假设,在排除了若干假设后,他们试着验证下一个假设,那就是Core Data是该问题的根本原因所在。于是他们找到了“一段受影响的代码,他们可以很容易地将这块代码从Core Data切换为SQLite,用以验证他们的假设”。

之后没多久,他们就收到崩溃报告,报告指出某文件被“可恶的线程或进程”重写了。这说明查找问题的方向是正确的,但是在“庞大的代码库中”顺利找到此线程或进程看起来不是一件容易的事情。他们采取的方法是在打开SQLite文件之前打开一个诱饵文件,这样就能捕捉到进行写文件操作的线程,然后查看损坏的文件。通过此方法,他们在所有的附件中发现了一个相同的前缀:17 03 03 00 28,然后使用lldb中的以下命令设置了一个断点,用以查找试图向POSIX write()方法发送此内容的任意线程:

breakpoint set -n write -c "(*(char**) ($esp + 8))[0]==0x17 
    && (*(char**) ($esp + 8))[1]==0x03 
    && (*(char**) ($esp + 8))[2]==0x03 
    && (*(char**) ($esp + 8))[3]==0x00
    && (*(char**) ($esp + 8))[4]==0x28"

很快他们发现SPDY协议栈很可能就是罪魁祸首,接下来就验证该假设。他们使用Fishhook完成了验证的工作,这是Facebook开发的一款开源工具,它可以替换系统的write调用。

// setup a honeypot file
int trap_fd = open(…);
// Create new function to detect writes to the honeypot
static WRITE_FUNC_T original_write = dlsym(RTLD_DEFAULT, "write");
ssize_t corruption_write(int fd, const void *buf, size_t size) {
FBFatal(fd != trap_fd, @"Writing to the honeypot file");
return original_write(fd, buf, size);
}

// Replace the system write with our “checked version”
rebind_symbols((struct rebinding[1]){{(char *)"write", (void *)corruption_write}}, 1);

在第二天他们手中最新的崩溃报告显示,SSL层在向一个socket中写数据,但这个socket之前已经被关闭,并且被重新分配给了出问题的数据库文件。

一旦在查明了崩溃的原因,修复问题仅仅花了几个小时就搞定了。

查看英文原文:Debugging iOS File Corruption at Facebook


感谢曹知渊对本文的审校。

给InfoQ中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ)或者腾讯微博(@InfoQ)关注我们,并与我们的编辑和其他读者朋友交流。

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我
社区评论

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT