【转】iOS应用崩溃日志分析

作为一名应用开发者你是否有过如下经历?
 
为确保你的应用正确无误在将其提交到应用商店之前你必定进行了大量的测试工作。它在你的设备上也运行得很好但是上了应用商店后还是有用户抱怨会闪退 !
 
如果你跟我一样是个完美主义者你肯定想将应用做到尽善尽美。于是你打开代码准备修复闪退的问题……但是从何处着手呢
 
这时iOS崩溃日志派上用场了。在大多数情况下你能从中了解到关于闪退的详尽、有用的信息。
 
通过本教程你将学习到一些常见的崩溃日志案例以及如何从开发设备和iTunes Connect上获取崩溃日志文件。你还将学习到符号化 symbolication,从日志追踪到代码 。你还将学习调试一个在待定情况下会闪退的应用。
 
让我们开始动手吧!
 
什么是崩溃日志从哪里能得它?
iOS设备上的应用闪退时操作系统会生成一个崩溃报告也叫崩溃日志保存在设备上。
 
崩溃日志上有很多有用的信息包括应用是什么情况下闪退的。通常上面有每个正在执行线程的完整堆栈跟踪信息所以你能从中了解到闪退发生时各线程都在做什么并分辨出闪退发生在哪个线程上。
 
有几种方法可以从设备上获取崩溃日志。
 
设备与电脑上的iTunes Store同步后会将崩溃日志保存在电脑上。根据电脑操作系统的不同崩溃日志将保存在以下位置:
Mac OS X:~/Library/Logs/CrashReporter/MobileDevice/
 
Windows XP: C:Documents and Settings<USERNAME>Application DataApple ComputerLogsCrashReporterMobileDevice<DEVICE_NAME>
 
Windows Vista or 7:  C:Users<USERNAME>AppDataRoamingApple ComputerLogsCrashReporterMobileDevice<DEVICE_NAME>
 
当用户抱怨闪退时你可以要求他让设备与iTunes同步并根据操作系统的不同到上述位置把崩溃日志下载下来然后通过电子邮件发送给你。
 
你必需尽量获取用户设备生成的所有崩溃日志。因为崩溃日志越多就越容易诊断问题所在!
 
另外如果你装了Xcode也能很容易通过Xcode从你的设备上获得崩溃日志。将iOS设备连接到电脑上然后打开Xcode。从菜单栏上选择 Window  菜单, 然后选择 Organizer (快捷方式是 Shift-CMD-2).
在 Organizer 窗口上, 选中 Devices 标签栏. 在左侧的导航面板上选中 Device Logs, 如下图所示:
【转】iOS应用崩溃日志分析
 
看看上图左侧有好几个 Device Logs 菜单项。 LIBRARY 下面的Device Logs是你所有设备曾经连接到Xcode的的日志 。每个设备下面的 Device Logs 是对应设备的日志。
 
应用提交到App Store后你也能从 iTunes Connect 获取到用户的崩溃日志. 登录到 iTunes Connect 上, 选择 Manage Your Applications, 点击相应的应用, 点击应用图标下面的 View Details 按钮, 然后点击右栏Links部分的  Crash Reports 。
【转】iOS应用崩溃日志分析
如果没有崩溃日志试试点击Refresh 按钮刷新一下。如果你的应用还卖得不多或者刚上架不久iTunes Connect账号上也可能还没有任何崩溃日志。
 
如果iTunes Connect上有崩溃日志你将看到如下图:
【转】iOS应用崩溃日志分析
 
有时尽管有用户报告闪退你仍然看不到崩溃报告。这时最好让用户直接把崩溃报告发送给你。
 
什么情况下会产生崩溃日志?
两种主要情况会产生崩溃日志:
1.应用违反操作系统规则。
2.应用中有Bug。
 
违反iOS规则包括在启动、恢复、挂起、退出时watchdog超时、用户强制退出和低内存终止。让我们详细了解一下吧。
 
Watchdog 超时机制
从iOS 4.x开始退出应用时应用不会立即终止而是退到后台。但是如果你的应用响应不够快操作系统有可能会终止你的应用并产生一个崩溃日志。这些事件与下列UIApplicationDelegate方法相对应:
【转】iOS应用崩溃日志分析
application:didFinishLaunchingWithOptions:
applicationWillResignActive:
applicationDidEnterBackground:
applicationWillEnterForeground:
applicationDidBecomeActive:
applicationWillTerminate:
【转】iOS应用崩溃日志分析
上面所有这些方法应用只有有限的时间去完成处理。如果花费时间太长操作系统将终止应用。
 
注意: 如果你没有把需要花费时间比较长的操作(如网络访问放在后台线程上就很容易发生这种情况。关于如果避免这种情况的信息请参考我们的另外两篇教程 Grand Central Dispatch 和 NSOperations。
 
用户强制退出
iOS 4.x开始支持多任务。如果应用阻塞界面并停止响应 用户可以通过在主屏幕上双击Home按钮来终止应用。此时操作应用将生成一个崩溃日志。
 
注意: 双击Home按钮后你将看到运行过的所有应用。那些应用不一定是正在运行也不一定是被挂起。
 
通常用户点击Home按钮时应用将在后台保留约10分钟然后操作系统自动将其终止。 所以双击Home按钮显示的应用列表只是表明那是一系列过去打开过的应用。删除那些应用的图标不会产生任何崩溃日志。
 
低内存终止
子类化UIViewController时,你或许已经注意到didReceiveMemoryWarning方法。
 
在前台运行的应用拥有访问和使用内存的最高优化级。然而这并不意味着该应用能使用设备的所有可用内存 ——每个应用只能使用一部分可用内存。
 
当内存使用达到一定程度时操作系统将发出一个 UIApplicationDidReceiveMemoryWarningNotification 通知。同时,调用 didReceiveMemoryWarning 方法。
 
此时为了让应用继续正常运行操作系统开始终止在后台的其他应用以释放一些内存。所有后台应用被终止后如果你的应用还需要更多内存操作系统会将你的应用也终止掉并产生一个崩溃日志。而在这种情况下被终止的后台应用不会产生崩溃日志。
 
注意: 根据 苹果文档, Xcode不会自动添加低内存日志。你必需手动获取日志。 然而根据我的个人经验使用 Xcode 4.5.2, 低内存日志也会自动导入只是”Process”和”Type”属性都被标为Unknown(未知)。
 
另外值得一提的是在极短时间内分配一大块内存将给系统内存带来巨大负担。这样也会产生内存警告的通知。
 
应用中有Bug
如你所想大多数闪退都是由于应用中有Bug因此大多数崩溃日志的产生都是因为应用中的Bug。Bug的种类的有很多。
 
在本教程的后半部分你将通过调试一个会产生崩溃日志的含有Bug的应用学习如何找到问题所在并进行修复!
 
崩溃日志的实例
让我们看看一个崩溃日志的实例以使你在处理一些实际问题之前心里有谱。
 
事不宜迟见见你的新朋友吧:

【转】iOS应用崩溃日志分析
Incident Identifier: 30E46451-53FD-4965-896A-457FC11AD05F
CrashReporter Key:   5a56599d836c4f867f6eec76afee451bf9ae5f31
Hardware Model:      iPhone4,1
Process:         Rage Masters [4155]
Path:            /var/mobile/Applications/A5635B22-F5EF-4CEB-94B6-FE158D885014/Rage Masters.app/Rage Masters
Identifier:      Rage Masters
Version:         ??? (???)
Code Type:       ARM (Native)
Parent Process:  launchd [1]
// 2: 基本信息
Date/Time:       2012-10-17 21:39:06.967 -0400
OS Version:      iOS 6.0 (10A403)
Report Version:  104
// 3: 异常
Exception Type:  00000020
Exception Codes: 0x000000008badf00d
Highlighted Thread:  0
// 4: 线程回溯
Thread 0 name:  Dispatch queue: com.apple.main-thread
Thread 0:
0   libsystem_kernel.dylib            0x327f2eb4 mach_msg_trap + 20
1   libsystem_kernel.dylib            0x327f3048 mach_msg + 36
2   CoreFoundation                    0x36bd4040 __CFRunLoopServiceMachPort + 124
3   CoreFoundation                    0x36bd2d9e __CFRunLoopRun + 878
4   CoreFoundation                    0x36b45eb8 CFRunLoopRunSpecific + 352
5   CoreFoundation                    0x36b45d44 CFRunLoopRunInMode + 100
6   CFNetwork                         0x32ac343e CFURLConnectionSendSynchronousRequest + 330
7   Foundation                        0x346e69ba +[NSURLConnection sendSynchronousRequest:returningResponse:error:] + 242
8   Rage Masters                      0x000d4046 0xd2000 + 8262
Thread 1:
0   libsystem_kernel.dylib            0x32803d98 __workq_kernreturn + 8
1   libsystem_c.dylib                 0x3a987cf6 _pthread_workq_return + 14
2   libsystem_c.dylib                 0x3a987a12 _pthread_wqthread + 362
3   libsystem_c.dylib                 0x3a9878a0 start_wqthread + 4
// 5: 线程状态
Thread 0 crashed with ARM Thread State (32-bit):
    r0: 0x00000000    r1: 0x00000000      r2: 0x00000001      r3: 0x39529fc8
    r4: 0xffffffff    r5: 0x2fd7d301      r6: 0x2fd7d300      r7: 0x2fd7d9d0
    r8: 0x2fd7d330    r9: 0x3adbf8a8     r10: 0x2fd7d308     r11: 0x00000032
    ip: 0x00000025    sp: 0x2fd7d2ec      lr: 0x001bdb25      pc: 0x30301838
  cpsr: 0x00000010
// 6: 二进制映像
Binary Images:
0xd2000 -    0xd7fff +Rage Masters armv7   /var/mobile/Applications/A5635B22-F5EF-4CEB-94B6-FE158D885014/Rage Masters.app/Rage Masters
0x2fe41000 - 0x2fe61fff  dyld armv7   /usr/lib/dyld
0x327f2000 - 0x32808fff  libsystem_kernel.dylib armv7   /usr/lib/system/libsystem_kernel.dylib
0x328a8000 - 0x328bdfff  libresolv.9.dylib armv7   /usr/lib/libresolv.9.dylib
0x32a70000 - 0x32b35fff  CFNetwork armv7   /System/Library/Frameworks/CFNetwork.framework/CFNetwork
0x32b7a000 - 0x32cc3fff  libicucore.A.dylib armv7   /usr/lib/libicucore.A.dylib
0x32cc4000 - 0x32cc5fff  CoreSurface armv7   /System/Library/PrivateFrameworks/CoreSurface.framework/CoreSurface
0x32f65000 - 0x32f8afff  OpenCL armv7   /System/Library/PrivateFrameworks/OpenCL.framework/OpenCL
【转】iOS应用崩溃日志分析
这报告看起来像天书。:) 我们分几部分来解读吧:
 
(1) 进程信息
第一部分是闪退进程的相关信息。
 
Incident Identifier是崩溃报告的唯一标识符。
 
CrashReporter Key 是与设备标识相对应的唯一键值。虽然它不是真正的设备标识符但也是一个非常有用的情报:如果你看到100个崩溃日志的CrashReporter Key值都是相同的或者只有少数几个不同的CrashReport值说明这不是一个普遍的问题只发生在一个或少数几个设备上。
 
Hardware Model 标识设备类型。 如果很多崩溃日志都是来自相同的设备类型说明应用只在某特定类型的设备上有问题。上面的日志里崩溃日志产生的设备是iPhone 4s。
 
Process 是应用名称。中括号里面的数字是闪退时应用的进程ID。
 
接下来几行不言自明无需赘述。
 
(2) 基本信息
这部分给出了一些基本信息包括闪退发生的日期和时间设备的iOS版本。如果有很多崩溃日志都来自iOS 6.0说明问题只发生在iOS 6.0上。
 
(3) 异常
在这部分你可以看到闪退发生时抛出的异常类型。还能看到异常编码和抛出异常的线程。根据崩溃报告类型的不同在这部分你还能看到一些另外的信息。
 
(4) 线程回溯
这部分提供应用中所有线程的回溯日志。 回溯是闪退发生时所有活动帧清单。它包含闪退发生时调用函数的清单。看下面这行日志:
2    XYZLib    0x34648e88    0x83000 + 8740
它包括四列:
帧编号—— 此处是2。
二进制库的名称 ——此处是 XYZLib.
调用方法的地址 ——此处是 0x34648e88.
第四列分为两个子列一个基本地址和一个偏移量。此处是0×83000 + 8740, 第一个数字指向文件第二个数字指向文件中的代码行。
 
(5) 线程状态
这部分是闪退时寄存器中的值。一般不需要这部分的信息因为回溯部分的信息已经足够让你找出问题所在。
 
(6) 二进制映像
这部分列出了闪退时已经加载的二进制文件。
 
符号化Symbolication
第一次看到崩溃日志上的回溯时你或许会觉得它没什么意义。我们习惯使用方法名和行数而非像这样的神秘位置:
6    Rage Masters    0x0001625c    0x2a000 + 3003
将这些十六进制地址转化成方法名称和行数的过程称之为符号化。
 
从Xcode的Organizer窗口获取崩溃日志后过几秒钟崩溃日志将被自动符号化。上面那行被符号化后的版本如下 :
6    Rage Masters    0x0001625c    -[RMAppDelegate application:didFinishLaunchingWithOptions:] (RMAppDelegate.m:35)
Xcode符号化崩溃日志时需要访问与App Store上对应的应用二进制文件以及生成二进制文件时产生的 .dSYM 文件。必需完全匹配才行。否则日志将无法被完全符号化。

强势插入在编译.app后与.app同根目录文件夹下会有一个对应的.dSYM文件要养成一个好习惯发布一版app时同时保存对应的.dSYM文件。
只要有crashReport文件以及对应的.dSYM文件结合命令行或者一些分析工具就能符号化不需要xcode。关于.dSYM命令行以及工具请点这里

 
所以保留每个分发给用户的编译版本非常重要。提交应用前进行归档时Xcode将保存应用的二进制文件。可以在Xcode Organizer的Archives标签栏下找到所有已归档的应用文件。
 
在发现崩溃日志时如果有相匹配的.dSYM文件和应用二进制文件Xcode会自动对崩溃日志进行符号化。如果你换到别的电脑或创建新的账户务必将所有二进制文件移动到正确的位置使Xcode能找到它们。
 
注意: 你必需同时保留应用二进制文件和.dSYM文件才能将崩溃日志完整符号化。每次提交到iTunes Connect的构建都必需归档。
 
.dSYM文件和二进制文件是特定绑定于每一次构建和后续构建的即使来自相同的源代码文件每一次构建也与其他构建不同不能相互替换。
 
如果你使用Build 和 Archive 命令,这些文件会自动放在适当位置。 如果不是使用Build 和 Archive命令放在Spotlight能够搜索到的位置比如Home目录即可。
 
低内存闪退
因为低内存崩溃日志与普通崩溃日志略有不同所以本教程特别分开说明一下。
 
iOS设备检测到低内存时虚拟内存系统发出通知请求应用释放内存。这些通知发送到所有正在运行的应用和进程试图收回一些内存。
 
如果内存使用依然居高不下系统将会终止后台线程以缓解内存压力。如果可用内存足够应用将能够继续运行而不会产生崩溃报告。否则应用将被iOS终止并产生低内存崩溃报告。
 
低内存崩溃日志上没有应用线程的堆栈回溯。相反上面显示的是以内存页数为单位的各进程内存使用量。(在撰写本文的时候一个内存页的大小是4KB。)
 
被iOS因释放内存页终止的进程名称后面你会看到jettisoned 字样。如果看到它出现在你的应用名称后面说明你的应用因使用太多内存而被终止了。
 
低内存崩溃日志看起来像这样
【转】iOS应用崩溃日志分析
Incident Identifier: 30E46451-53FD-4965-896A-457FC11AD05F
CrashReporter Key:   5a56599d836c4f867f6eec76afee451bf9ae5f31
OS Version:          iPhone OS 3.1.3 (7E18)
Date/Time:           2012-10-17 21:39:06.967 -0400
Free pages:        96
Wired pages:       10558
Purgeable pages:   0
Largest process:   Rage Masters
Processes
         Name                 UUID                    Count resident pages
    Rage Masters     9320 (jettisoned) (active)
    mediaserverd      255
     dataaccessd      505
         syslogd       71
            apsd      171
       securityd      243
         notifyd     2027
      CommCenter      189
     SpringBoard     2158 (active)
      accessoryd       91
         configd      371
       fairplayd       93
   mDNSResponder      292
       lockdownd     1204
         launchd       72
【转】iOS应用崩溃日志分析
当应用发生低内存闪退时你必需看看应用中内存使用的方式以及是如何处理低内存警告的。你可以使用Instruments工具中使用Allocations 和 Leaks来发现内存分配问题和内存泄漏问题。如果你不知道如何利用 Instruments 检查内存问题可以看看这个教程 。
 
还有别忘记虚拟内存 Instruments工具的Leaks 和 Allocations 不能跟踪显存使用情况。必需使用 VM Tracker 才能查看显存使用情况。
 
VM Tracker 默认是关闭的。打开Instrument,手动 选中Automatic Snapshotting 标志或者按下Snapshot Now 按钮。
 
本教程后面将会学习如何研究低内存崩溃日志。
 
异常编码
在研究真实闪退场景之前还有一点需要重点介绍一下就是那些有趣的异常编码 。
 
你可以在报告的异常部分——前面代码的第3部分找到异常编码。有些编码比较常见。
 
通常异常编码以一些文字开头紧接着是一个或多个十六进制值此数值正是说明闪退根本性质的所在。  从这些编码中可以区分出闪退是因为程序错误、非法内存访问或者是其他原因。
下面是一些常见的异常编码:
 
0x8badf00d: 读做 “ate bad food”! (把数字换成字母是不是很像 :p)该编码表示应用是因为发生watchdog超时而被iOS终止的。  通常是应用花费太多时间而无法启动、终止或响应用系统事件。
【转】iOS应用崩溃日志分析
0xbad22222: 该编码表示 VoIP 应用因为过于频繁重启而被终止。
0xdead10cc: 读做 “dead lock”!该代码表明应用因为在后台运行时占用系统资源如通讯录数据库不释放而被终止 。
0xdeadfa11: 读做 “dead fall”! 该代码表示应用是被用户强制退出的。根据苹果文档, 强制退出发生在用户长按开关按钮直到出现 “滑动来关机”, 然后长按 Home按钮。强制退出将产生 包含0xdeadfa11 异常编码的崩溃日志, 因为大多数是强制退出是因为应用阻塞了界面。
 
注意: 在后台任务列表中关闭已挂起的应用不会产生崩溃日志。 一旦应用被挂起它何时被终止都是合理的。所以不会产生崩溃日志。
 
大展身手的时候到了!好了! 你已经学习了所有分析崩溃日志和修复错误的基础知识!
 
假设你刚进入Rage-O-Rage有限公司工作。该公司有一个在App Store上热销的应用叫 Rage Masters。
 
你的老板安迪要你帮忙解决几个用户经常抱怨闪退问题。你的任务就是研究这些闪退符号化用户提供的崩溃日志查找问题所在并修复之。
 
你可以从 这里下载应用的源代码。
 
注意: 如果你想自己重新生成崩溃报告请遵照以下指引
1.下载源码然后在Xcode中打开工程文件。
2.使用正确的provisioning profile连接到iOS设备。
3.从Xcode工具栏上选择iOS设备——不是模拟器作为target然后构建应用。
4.当你在设备上到默认页面应用的全屏图片时立即在Xcode上点击停止按钮。
5.关闭 Xcode。
6.在设备上直接打开应用。
7.测试场景完成后连接设备到电脑上通过Xcode获取崩溃日志。
 
场景 1: 糟糕的代码
一封来自用户的邮件: “大哥你的应用就是一坨屎! 我将其下载到我自己的iPod Touch和iPhone上还下载到我儿子的iPod Touch上。在所有的设备上都是还没打开就闪退了……”
 
别一封来自用户的邮件说, “我下载了你们的应用一打开就闪退。真悲催…”
 
另一封邮件说得更明确”你们的应用不能运行。我把它下载到我和妻子的设备上。所有设备都是 一打开就闪退了…”
【转】iOS应用崩溃日志分析
好吧别灰心! 这些意见藏着什么玄机呢让我们看看崩溃日志吧:
【转】iOS应用崩溃日志分析
Incident Identifier: 85833DBA-3DF7-43EE-AF80-4E5C51091F42
CrashReporter Key:   5a56599d836c4f867f6eec76afee451bf9ae5f31
Hardware Model:      iPhone4,1
Process:         Rage Masters [20067]
Path:            /var/mobile/Applications/B2121A89-3D1F-4E61-BB18-5511E1DC150F/Rage Masters.app/Rage Masters
Identifier:      Rage Masters
Version:         ??? (???)
Code Type:       ARM (Native)
Parent Process:  launchd [1]
Date/Time:       2012-11-03 13:37:31.148 -0400
OS Version:      iOS 6.0 (10A403)
Report Version:  104
Exception Type:  00000020
Exception Codes: 0x000000008badf00d
Highlighted Thread:  0
Application Specific Information:
Soheil-Azarpour.Rage-Masters failed to launch in time
Elapsed total CPU time (seconds): 8.030 (user 8.030, system 0.000), 20% CPU 
Elapsed application CPU time (seconds): 3.840, 10% CPU
Thread 0 name:  Dispatch queue: com.apple.main-thread
Thread 0:
0   libsystem_kernel.dylib            0x327f2eb4 mach_msg_trap + 20
1   libsystem_kernel.dylib            0x327f3048 mach_msg + 36
2   CoreFoundation                    0x36bd4040 __CFRunLoopServiceMachPort + 124
3   CoreFoundation                    0x36bd2d9e __CFRunLoopRun + 878
4   CoreFoundation                    0x36b45eb8 CFRunLoopRunSpecific + 352
5   CoreFoundation                    0x36b45d44 CFRunLoopRunInMode + 100
6   CFNetwork                         0x32ac343e CFURLConnectionSendSynchronousRequest + 330
7   Foundation                        0x346e69ba +[NSURLConnection sendSynchronousRequest:returningResponse:error:] + 242
8   Rage Masters                      0x000ea1c4 -[RMAppDelegate application:didFinishLaunchingWithOptions:] (RMAppDelegate.m:36)
9   UIKit                             0x37f30ad4 -[UIApplication _handleDelegateCallbacksWithOptions:isSuspended:restoreState:] + 248
10  UIKit                             0x37f3065e -[UIApplication _callInitializationDelegatesForURL:payload:suspended:] + 1186
11  UIKit                             0x37f28846 -[UIApplication _runWithURL:payload:launchOrientation:statusBarStyle:statusBarHidden:] + 694
12  UIKit                             0x37ed0c3c -[UIApplication handleEvent:withNewEvent:] + 1000
13  UIKit                             0x37ed06d0 -[UIApplication sendEvent:] + 68
14  UIKit                             0x37ed011e _UIApplicationHandleEvent + 6150
15  GraphicsServices                  0x370835a0 _PurpleEventCallback + 588
16  GraphicsServices                  0x370831ce PurpleEventCallback + 30
17  CoreFoundation                    0x36bd4170 __CFRUNLOOP_IS_CALLING_OUT_TO_A_SOURCE1_PERFORM_FUNCTION__ + 32
18  CoreFoundation                    0x36bd4112 __CFRunLoopDoSource1 + 134
19  CoreFoundation                    0x36bd2f94 __CFRunLoopRun + 1380
20  CoreFoundation                    0x36b45eb8 CFRunLoopRunSpecific + 352
21  CoreFoundation                    0x36b45d44 CFRunLoopRunInMode + 100
22  UIKit                             0x37f27480 -[UIApplication _run] + 664
23  UIKit                             0x37f242fc UIApplicationMain + 1116
24  Rage Masters                      0x000ea004 main (main.m:16)
25  libdyld.dylib                     0x3b630b1c start + 0
【转】iOS应用崩溃日志分析
发现问题了吗? 异常编码是0x000000008badf00d,还有后面的报告:
【转】iOS应用崩溃日志分析
Application Specific Information:
Soheil-Azarpour.Rage-Masters failed to launch in time
Elapsed total CPU time (seconds): 8.030 (user 8.030, system 0.000), 20% CPU 
Elapsed application CPU time (seconds): 3.840, 10% CPU
【转】iOS应用崩溃日志分析
这说明应用在启动时就闪退了iOS的watchdog机制终止了应用。帅! 找到问题了但是为什会发生这样的事呢
 
接着往下看日志。 从下向上读回溯日志。最底下的帧 (frame 25: libdyld.dylib)是最先调用的然后是帧24, Rage Masters, main (main.m:16) 依此类推。
 
跟应用源代码相关的帧是最重要的。忽略掉系统库和框架。下一个与代码相关的帧是:
8    Rage Masters    0x0009f244 -[RMAppDelegate application:didFinishLaunchingWithOptions:] (RMAppDelegate.m:35)
 
应用在执行RMAppDelegate (RMAppDelegate.m:35)类application:didFinishLaunchingWithOptions: 方法第35 行代码时闪退。打开Xcode看看那行代码
NSData *directoryData = [NSURLConnection sendSynchronousRequest:request returningResponse:nil error:nil];

就是它了! 同步调用web服务?! 在主线程上?! 在 application:didFinishLaunchingWithOptions: 方法上?!! 谁写的代码呀?!

【转】iOS应用崩溃日志分析
Network calls on the main thread makes kittens sad.
 
不管如何问题得你来修复了。这个调用必需异步进行甚至更理想的情况是在application:didFinishLaunchingWithOptions:返回YES之后的其他部分再执行Web服务。
 
在其他地方调用可能需要比较多的修改。当下我们只要使应用不闪退就行。可以在日后再实现更好的设计。 将上面那行讨厌的代码及其下面的三行代码换成下面这个异步的版本吧:
【转】iOS应用崩溃日志分析
 [NSURLConnection sendAsynchronousRequest:request
                                           queue:[NSOperationQueue mainQueue]
                               completionHandler:^(NSURLResponse *response, NSData *data, NSError *error)
         {
             NSURL *cacheDirectory = [[[NSFileManager defaultManager] URLsForDirectory:NSUserDirectory inDomains:NSCachesDirectory] lastObject];
             NSURL *filePath = [NSURL URLWithString:kDirectoryFile relativeToURL:cacheDirectory];
             [data writeToFile:[filePath absoluteString] atomically:YES];
         }]; 
【转】iOS应用崩溃日志分析
 场景 2: 无法响应事件的按钮
一名用户说: “我不能将某个rage master添加到书签里面。我想添加的时候应用就闪退…”
 
用一名用户说 ”书签不能用 … 在详细页面上点击书签按钮,应用就闪退了!”
 
上面的抱怨说得不是很清楚引起问题的原因肯定有多样。看看崩溃日志:
【转】iOS应用崩溃日志分析
Incident Identifier: 3AAA63CC-3088-41CC-84D9-82FE03F9F354
CrashReporter Key:   5a56599d836c4f867f6eec76afee451bf9ae5f31
Hardware Model:      iPhone4,1
Process:         Rage Masters [20090]
Path:            /var/mobile/Applications/B2121A89-3D1F-4E61-BB18-5511E1DC150F/Rage Masters.app/Rage Masters
Identifier:      Rage Masters
Version:         ??? (???)
Code Type:       ARM (Native)
Parent Process:  launchd [1]
Date/Time:       2012-11-03 13:39:00.081 -0400
OS Version:      iOS 6.0 (10A403)
Report Version:  104
Exception Type:  EXC_CRASH (SIGABRT)
Exception Codes: 0x0000000000000000, 0x0000000000000000
Crashed Thread:  0
Last Exception Backtrace:
0   CoreFoundation                    0x36bff29e __exceptionPreprocess + 158
1   libobjc.A.dylib                   0x34f0f97a objc_exception_throw + 26
2   CoreFoundation                    0x36c02e02 -[NSObject(NSObject) doesNotRecognizeSelector:] + 166
3   CoreFoundation                    0x36c0152c ___forwarding___ + 388
4   CoreFoundation                    0x36b58f64 _CF_forwarding_prep_0 + 20
5   UIKit                             0x37fbb0a8 -[UIApplication sendAction:to:from:forEvent:] + 68
6   UIKit                             0x37fbb05a -[UIApplication sendAction:toTarget:fromSender:forEvent:] + 26
7   UIKit                             0x37fbb038 -[UIControl sendAction:to:forEvent:] + 40
8   UIKit                             0x37fba8ee -[UIControl(Internal) _sendActionsForEvents:withEvent:] + 498
9   UIKit                             0x37fbade4 -[UIControl touchesEnded:withEvent:] + 484
10  UIKit                             0x37ee35f4 -[UIWindow _sendTouchesForEvent:] + 520
11  UIKit                             0x37ed0804 -[UIApplication sendEvent:] + 376
12  UIKit                             0x37ed011e _UIApplicationHandleEvent + 6150
13  GraphicsServices                  0x3708359e _PurpleEventCallback + 586
14  GraphicsServices                  0x370831ce PurpleEventCallback + 30
15  CoreFoundation                    0x36bd416e __CFRUNLOOP_IS_CALLING_OUT_TO_A_SOURCE1_PERFORM_FUNCTION__ + 30
16  CoreFoundation                    0x36bd4112 __CFRunLoopDoSource1 + 134
17  CoreFoundation                    0x36bd2f94 __CFRunLoopRun + 1380
18  CoreFoundation                    0x36b45eb8 CFRunLoopRunSpecific + 352
19  CoreFoundation                    0x36b45d44 CFRunLoopRunInMode + 100
20  GraphicsServices                  0x370822e6 GSEventRunModal + 70
21  UIKit                             0x37f242fc UIApplicationMain + 1116
22  Rage Masters                      0x000ca004 main (main.m:16)
23  libdyld.dylib                     0x3b630b1c start + 0
【转】iOS应用崩溃日志分析
异常代码是SIGABRT。通常,  SIGABRT 异常是由于某个对象接收到未实现的消息引起的。 或者用简单的话说在某个对象上调用了不存在的方法。
 
这种情况一般不会发生因为A对象调用了B方法如果B方法不存在编译器会报错。但是如果你是使用selector间接调用方法的编译器则无法检测对象是否存在该方法了。
 
回到崩溃日志。它指出闪退发生在编号为0的线程上。 这意味着很可能是在主线程上调用了某个对象没有实现的方法。
 
如果你接着阅读回溯日志会发现跟你的代码相关的只有帧22, main.m:16. 这没有多大帮助。 
 
继续向上查看框架调用出现这个:
2    CoreFoundation    0x36c02e02 -[NSObject(NSObject) doesNotRecognizeSelector:] + 166

这不是你自己写的代码。但至少它确认了是对象调用了一个没有实现的方法。

 
回到RMDetailViewController.m文件, 因为那是书签按钮实现动作的地方。 找到书签功能代码:
【转】iOS应用崩溃日志分析
-(IBAction)bookmarkButtonPressed {
 
    self.master.isBookmarked = !self.master.isBookmarked;
 
    // Update shared bookmarks
    if (self.master.isBookmarked)
        [[RMBookmarks sharedBookmarks] bookmarkMaster:self.master];
    else
        [[RMBookmarks sharedBookmarks] unbookmarkMaster:self.master];
 
    // Update UI
    [self updateBookmarkImage];
}
【转】iOS应用崩溃日志分析

看起来没什么问题再检查一下storyboard (XIB文件) 确认按钮连接的正确性。

【转】iOS应用崩溃日志分析
就是它了! 在 MainStoryboard.storyboard,按钮连接的是 bookmarkButtonPressed: 而不是bookmarkButtonPressed (注意后面的分号说明方法有一个参数。 只要将上面的方法签名修改成这样就能修复问题了:
-(IBAction)bookmarkButtonPressed:(id)sender {
    // Remain unchanged..
}

当然你也可以简单地在XIB文件上删除错误的连接然后重新连接方法使XIB文件连接到正确的方法上。两者方法都行。

 
又处理了一个闪退问题好样的。
 
场景 3: 表格上的Bug
另一用户抱怨道, “在书签视图上无法删除书签…” 还有另一用户抱怨同样的问题, “当我试图删除书签时应用闪退…”
 
这些邮件没什么作用还是看看崩溃日志!
【转】iOS应用崩溃日志分析
Incident Identifier: 5B62D681-D8FE-41FE-8D52-AB7E6D6B2AC7
CrashReporter Key:   5a56599d836c4f867f6eec76afee451bf9ae5f31
Hardware Model:      iPhone4,1
Process:         Rage Masters [20088]
Path:            /var/mobile/Applications/B2121A89-3D1F-4E61-BB18-5511E1DC150F/Rage Masters.app/Rage Masters
Identifier:      Rage Masters
Version:         ??? (???)
Code Type:       ARM (Native)
Parent Process:  launchd [1]
Date/Time:       2012-11-03 13:38:45.762 -0400
OS Version:      iOS 6.0 (10A403)
Report Version:  104
Exception Type:  EXC_CRASH (SIGABRT)
Exception Codes: 0x0000000000000000, 0x0000000000000000
Crashed Thread:  0
Last Exception Backtrace:
0   CoreFoundation                    0x36bff29e __exceptionPreprocess + 158
1   libobjc.A.dylib                   0x34f0f97a objc_exception_throw + 26
2   CoreFoundation                    0x36bff158 +[NSException raise:format:arguments:] + 96
3   Foundation                        0x346812aa -[NSAssertionHandler handleFailureInMethod:object:file:lineNumber:description:] + 86
4   UIKit                             0x37f04b7e -[UITableView(_UITableViewPrivate) _endCellAnimationsWithContext:] + 7690
5   UIKit                             0x3803a4a2 -[UITableView deleteRowsAtIndexPaths:withRowAnimation:] + 22
6   Rage Masters                      0x000fd9ca -[RMBookmarksViewController tableView:commitEditingStyle:forRowAtIndexPath:] (RMBookmarksViewController.m:68)
7   UIKit                             0x3809a5d4 -[UITableView(UITableViewInternal) animateDeletionOfRowWithCell:] + 80
8   UIKit                             0x37fbb0a8 -[UIApplication sendAction:to:from:forEvent:] + 68
9   UIKit                             0x37fbb05a -[UIApplication sendAction:toTarget:fromSender:forEvent:] + 26
10  UIKit                             0x37fbb038 -[UIControl sendAction:to:forEvent:] + 40
11  UIKit                             0x37fba8ee -[UIControl(Internal) _sendActionsForEvents:withEvent:] + 498
12  UIKit                             0x37fbb0a8 -[UIApplication sendAction:to:from:forEvent:] + 68
13  UIKit                             0x37fbb05a -[UIApplication sendAction:toTarget:fromSender:forEvent:] + 26
14  UIKit                             0x37fbb038 -[UIControl sendAction:to:forEvent:] + 40
15  UIKit                             0x37fba8ee -[UIControl(Internal) _sendActionsForEvents:withEvent:] + 498
16  UIKit                             0x37fbade4 -[UIControl touchesEnded:withEvent:] + 484
17  UIKit                             0x37ee35f4 -[UIWindow _sendTouchesForEvent:] + 520
18  UIKit                             0x37ed0804 -[UIApplication sendEvent:] + 376
19  UIKit                             0x37ed011e _UIApplicationHandleEvent + 6150
20  GraphicsServices                  0x3708359e _PurpleEventCallback + 586
21  GraphicsServices                  0x370831ce PurpleEventCallback + 30
22  CoreFoundation                    0x36bd416e __CFRUNLOOP_IS_CALLING_OUT_TO_A_SOURCE1_PERFORM_FUNCTION__ + 30
23  CoreFoundation                    0x36bd4112 __CFRunLoopDoSource1 + 134
24  CoreFoundation                    0x36bd2f94 __CFRunLoopRun + 1380
25  CoreFoundation                    0x36b45eb8 CFRunLoopRunSpecific + 352
26  CoreFoundation                    0x36b45d44 CFRunLoopRunInMode + 100
27  GraphicsServices                  0x370822e6 GSEventRunModal + 70
28  UIKit                             0x37f242fc UIApplicationMain + 1116
29  Rage Masters                      0x000fb004 main (main.m:16)
30  libdyld.dylib                     0x3b630b1c start + 0
【转】iOS应用崩溃日志分析

这看起来跟前面那个崩溃日志很像。是另一个SIGABRT 异常。 你可能想知道是否是相同的问题发送信息到一个没有实现相应方法的对象?

 
让我们从回溯日志看看哪些方法被调用了。从底部开始你的源代码最后被调用的是帧 6:
6    Rage Masters    0x00088c66 -[RMBookmarksViewController tableView:commitEditingStyle:forRowAtIndexPath:] (RMBookmarksViewController.m:68)

这是UITableViewDataSource 的一个方法. 呵呵?! 毫无疑问苹果已经实现了该方法 —— 你可以重载它, 但不像是还没有实现。而且,这是个可选的委派方法。 所以问题不是调用了一个没有实现的方法。

再看看上面的几个帧:
【转】iOS应用崩溃日志分析
3    Foundation    0x346812aa -[NSAssertionHandler handleFailureInMethod:object:file:lineNumber:description:] + 86
4    UIKit         0x37f04b7e -[UITableView(_UITableViewPrivate) _endCellAnimationsWithContext:] + 7690
5    UIKit         0x3803a4a2 -[UITableView deleteRowsAtIndexPaths:withRowAnimation:] + 22
【转】iOS应用崩溃日志分析

帧 5, UITableView调用了它自己的另一个方法 deleteRowsAtIndexPaths:withRowAnimation: 然后是看起来像苹果内部方法的_endCellAnimationsWithContext: 被调用。然后Foundation framework发生异常handleFailureInMethod:object:file:lineNumber:description:.

 
这些分析结合用户的抱怨看起来是你在处理UITableView删除行过程中有Bug。回到Xcode。你知道看哪里吗 ? 能从崩溃日志中判断出来? 就是RMBookmarksViewController.m文件的第68行:
【转】iOS应用崩溃日志分析
- (void)tableView:(UITableView *)tableView commitEditingStyle:(UITableViewCellEditingStyle)editingStyle forRowAtIndexPath:(NSIndexPath *)indexPath {
 
    [self.tableView deleteRowsAtIndexPaths:[NSArray arrayWithObject:indexPath] withRowAnimation:UITableViewRowAnimationAutomatic];
}
【转】iOS应用崩溃日志分析

发现问题了吗? 给你点时间仔细看一下。

 
找到了吧! 数据源呢? 代码在表格视图上删除了一行但并没有修改背后的数据源。把上面的代码替换成下面的就能修复问题了:
【转】iOS应用崩溃日志分析
-(void)tableView:(UITableView *)tableView commitEditingStyle:(UITableViewCellEditingStyle)editingStyle forRowAtIndexPath:(NSIndexPath *)indexPath {
 
    RMMaster *masterToDelete = [bookmarks objectAtIndex:indexPath.row];
    [bookmarks removeObject:masterToDelete];
    [[RMBookmarks sharedBookmarks] unbookmarkMaster:masterToDelete];
 
    [self.tableView deleteRowsAtIndexPaths:[NSArray arrayWithObject:indexPath] withRowAnimation:UITableViewRowAnimationAutomatic];
}
【转】iOS应用崩溃日志分析

搞定了!走起讨厌的 bug!!

 
场景 4: 吃棒棒糖时闪退!
用户邮件说, “当rage master吃棒棒糖时应用就闪退…” 另一用户说, “我让rage master 吃棒棒糖没几次应用就闪退了!”
 
崩溃日志如下:
 
 
【转】iOS应用崩溃日志分析
Incident Identifier: 081E58F5-95A8-404D-947B-5E104B6BC1B1
CrashReporter Key:   5a56599d836c4f867f6eec76afee451bf9ae5f31
Hardware Model:      iPhone4,1
OS Version:          iPhone OS 6.0 (10A403)
Kernel Version:      Darwin Kernel Version 13.0.0: Sun Aug 19 00:28:05 PDT 2012; root:xnu-2107.2.33~4/RELEASE_ARM_S5L8940X
Date:                2012-11-03 13:39:59 -0400
Time since snapshot: 4353 ms
Free pages:        968
Active pages:      7778
Inactive pages:    4005
Throttled pages:   92319
Purgeable pages:   0
Wired pages:       23347
Largest process:   Rage Masters

Processes
     Name                    &lt;UUID&gt;                       rpages       recent_max       [reason]          (state)
 
             lsd &lt;6a9f5b5f36b23fc78f87b6d8f1f49a9d&gt;          331              331         [vm]         (daemon) (idle)
            afcd &lt;b0aff2e7952e34a9882fec81a8dcdbb2&gt;          141              141         [vm]         (daemon) (idle)
    itunesstored &lt;4e0cd9f873de3435b4119c48b2d6d13d&gt;         1761             1761         [vm]         (daemon) (idle)
softwareupdatese &lt;2bc4b5ae016431c98d3b34f81027d0ae&gt;          311              311         [vm]         (daemon) (idle)
          Amazon &lt;4600481f07ec3e59a925319b7f67ba14&gt;         2951             2951         [vm]         (suspended)
       accountsd &lt;ac0fce15c1a2350d951efc498d521ac7&gt;          519              519         [vm]         (daemon) (idle)
coresymbolicatio &lt;edba67001f76313b992056c712153b4b&gt;          126              126         [vm]         (daemon) (idle)
           Skype &lt;504cf2fe60cb3cdea8273e74df09836b&gt;         3187             3187         [vm]         (background)
      MobileMail &lt;bff817c61ce33c85a43ea9a6c98c29f5&gt;        14927            14927         [vm]         (continuous)
       MobileSMS &lt;46778de076363d67aeea207464cfc581&gt;         2134             2134         [vm]         (background)
     MobilePhone &lt;3fca241f2a193d0fb8264218d296ea41&gt;         2689             2689         [vm]         (continuous)
      librariand &lt;c9a9be81aa9632f0a913ce79b911f27e&gt;          317              317         [vm]         (daemon)
             kbd &lt;3e7136ddcefc3d77a01499db593466cd&gt;          616              616         [vm]         (daemon)
            tccd &lt;eb5ddcf533663f8d987d67cae6a4c4ea&gt;          224              224         [vm]         (daemon)
    Rage Masters &lt;90b45d6281e934209c5b06cf7dc4d492&gt;        28591            28591         [vm]         (frontmost) (resume)
            ptpd &lt;04a56fce67053c57a7979aeea8e5a7ea&gt;          879              879                      (daemon)
   iaptransportd &lt;f784f30dc09d32078d87b450e8113ef6&gt;          230              230                      (daemon)
       locationd &lt;892cd1c9ffa43c99a82dba197be5f09e&gt;         1641             1641                      (daemon)
         syslogd &lt;cbef142fa0a839f0885afb693fb169c3&gt;          237              237                      (daemon)
    mediaserverd &lt;80657170daca32c9b8f3a6b1faac43a2&gt;         4869             4869                      (daemon)
     dataaccessd &lt;2a3f6a518f3f3646bf35eddd36f25005&gt;         1786             1786                      (daemon)
      aosnotifyd &lt;d4d14f2914c3343796e447cfef3e6542&gt;          549              549                      (daemon)
           wifid &lt;9472b090746237998cdbb9b34f090d0c&gt;          455              455                      (daemon)
     SpringBoard &lt;27372aae101f3bbc87804edc10314af3&gt;        18749            18749                     
      backboardd &lt;5037235f295b33eda98eb5c72c098858&gt;         5801             5801                      (daemon)
  UserEventAgent &lt;6edfd8d8dba23187b05772dcdfc94f90&gt;          601              601                      (daemon)
    mediaremoted &lt;4ff39c50c684302492e396ace813cb25&gt;          293              293                      (daemon)
     pasteboardd &lt;8a4279b78e4a321f84a076a711dc1c51&gt;          176              176                      (daemon)
springboardservi &lt;ff6f64b3a21a39c9a1793321eefa5304&gt;            0                0                      (daemon)
    syslog_relay &lt;45e9844605d737a08368b5215bb54426&gt;            0                0                      (daemon)
      DTMobileIS &lt;23303ca402aa3705870b01a9047854ea&gt;            0                0                      (daemon)
notification_pro &lt;845b7beebc8538ca9ceef731031983b7&gt;          169              169                      (daemon)
    syslog_relay &lt;45e9844605d737a08368b5215bb54426&gt;            0                0                      (daemon)
             ubd &lt;74dc476d1785300e9fcda555fcb8d774&gt;          976              976                      (daemon)
        twitterd &lt;4b4946378a9c397d8250965d17055b8e&gt;          730              730                      (daemon)
         configd &lt;4245d73a9e96360399452cf6b8671844&gt;          809              809                      (daemon)
   absinthed.N94 &lt;7f4164c844fa340caa940b863c901aa9&gt;           99               99                      (daemon)
filecoordination &lt;fbab576f37a63b56a1039153fc1aa7d8&gt;          226              226                      (daemon)
       distnoted &lt;a89af76ec8633ac2bbe99bc2b7964bb0&gt;          137              137                      (daemon)
            apsd &lt;94d8051dd5f5362f82d775bc279ae608&gt;          373              373                      (daemon)
        networkd &lt;0032f46009f53a6c80973fe153d1a588&gt;          219              219                      (daemon)
      aggregated &lt;8c3c991dc4153bc38aee1e841864d088&gt;          112              112                      (daemon)
        BTServer &lt;c92fbd7488e63be99ec9dbd05824f5e5&gt;          522              522                      (daemon)
   fairplayd.N94 &lt;7bd896bd00783a48906090d05cf1c86a&gt;          210              210                      (daemon)
       fseventsd &lt;996cc4ca03793184aea8d781b55bce08&gt;          384              384                      (daemon)
         imagent &lt;1e68080947be352590ce96b7a1d07b2f&gt;          586              586                      (daemon)
   mDNSResponder &lt;3e557693f3073697a58da6d27a827d97&gt;          295              295                      (daemon)
       lockdownd &lt;ba1358c7a8003f1b91af7d5f58dd5bbe&gt;          389              389                      (daemon)
          powerd &lt;2d2ffed5e69638aeba1b92ef124ed861&gt;          174              174                      (daemon)
      CommCenter &lt;1f425e1e897d32e8864fdd8eeaa803a8&gt;         2212             2212                      (daemon)
         notifyd &lt;51c0e03da8a93ac8a595442fcaac531f&gt;          211              211                      (daemon)
     ReportCrash &lt;8c32f231b2ed360bb151b2563bcaa363&gt;          337              337                      (daemon)
【转】iOS应用崩溃日志分析

这日志跟我们前面见到的相差很多。

 
这个一个来自iOS 6的低内存崩溃日志。正如我们前面所说的低内存崩溃日志与其他类型的崩溃日志很不一样它们不指向特定的文件和代码行。相反它们画出了闪退时设备上的内存使用情况的图表。
 
至少头部还是跟其他崩溃日志很像的:  提供了 Incident Identifier, CrashReporter Key, Hardware Model, OS Version等信息。
 
接下来部分是低内存崩溃日志特有的:
Free pages 指可用内存页数。每页大小约是4KB, 上面的日志中可用内存约为3,872 KB (或者说 3.9 MB)。
Purgeable pages 是那部分可被清除或重用的内存。在上面的日志中是0KB。
Largest process是闪退时使用大部分内存的应用名称在上面的日志中正是你的应用!
Processes显示了闪退时各进程列表还包含内存使用量。包含进程名 (第一列), 进程唯一标识符(第二名), 进程使用的内存页数(第三列)。最后一列是每个应用的状态。通常发生闪退的应用的状态是 frontmost。 这里是 Rage Masters, 使用28591 页 (or 114.364 MB) 内存——这内存太多了!
 
通过最大进程和frontmost状态的应用是相同的 而且也是引起低内存闪退的应用进程。但是也可能看到最大进程和 frontmost状态应用不同的例子。比如如果最大进程是SpringBoard, 忽略它 , 因为 SpringBoard 进程是显示主屏幕的应用出现在你双击home按钮等情况而且它是一直活动的。
 
低内存发生时iOS向活动的应用发出低内存警告并终止后台应用。如果前台应用仍然继续增长内存iOS将终止它。
 
为了查找低内存问题的原因你必需使用Instruments剖析应用。如果你不知道怎么做可以看一下我们 一篇关于这个方面的教程.。 :] 另外, 你也可以走捷径响应低内存警告通知以解决部分闪退问题。
回到Xcode查看RMLollipopLicker.m文件。 这是实现吃棒棒糖的视图控制器。看看源代码:
【转】iOS应用崩溃日志分析 View Code

当用户点击运行按钮, 应用开始一个背景线程调用 lickLollipop 方法若干次然后更新界面反映吃棒棒糖的数量。 lickLollipop 方法从属性列表文件(PLIST文件读取一个长字符串然后添加到数组上。这些数据并不重要, 能在不影响用户体验的前提下重新创建。

 
利用每种能够清除和重建数据而不影响用户体验的情况是好习惯。这样能够方便地释放内存减少低内存警告。
 
那么如何提高代码质量呢? 实现 didReceiveMemoryWarning 方法像下面这样处理数据:
-(void)didReceiveMemoryWarning {
    [lollipops removeAllObjects];
    [super didReceiveMemoryWarning];
}

下一步?

万岁你研究了4个闪退案例! 你的应用更完善了并且学到了一些重要的调试技巧。
 
你可以到这里下载改进后的项目代码。
 
文章转自raywenderlich
 
 
总结一下本文有以下几个要点
1、.dSYM文件结合二进制app文件可以符号化崩溃环境
2、.dSYM相关命令行及分析工具
3、崩溃日志的分析技巧
本文转自编程小翁博客园博客原文链接http://www.cnblogs.com/wengzilin/p/4632172.html如需转载请自行联系原作者
上一篇:Linux 学记 (第三章)


下一篇:11个SEO最常见问题解答