Android 抓包，监控流量工具之 mitmproxy

转：http://greenrobot.me/devpost/how-to-debug-android-http-get-started/

mitmproxy实践教程之调试 Android 上 HTTP流量

之前写了一篇博客介绍了mitmproxy，不过有些同学对这个工具到底该怎么使用还是有点不清楚，于是自己花了一天时间把自己对这个工具的理解和使用过程进行了一番整理，形成了这篇文章。接下来我就以一些简单的场景来说明mitmproxy的用法。

实践环境

iMac一台、华为B199（Android 4.4）手机一部，这两者都连着同一个wifi。mitmproxy安装版本为0.11.3。iMac的ip地址为：192.168.0.104

mitmproxy安装与设置

下载mitmproxy。推荐下载二进制安装包（当前版本为0.11.3），因为使用pip安装会由于墙的原因安装失败。下载成功之后解压，便可直接点击名为“mitmproxy”的文件了。

在iMac上运行和设置mitmproxy。由于直接点击运行是没有设置mitmproxy参数的，所以我们需要在命令行里面输入mitmproxy进行设置：

1	$ [YOUR_DOWNLOAD_PATH]/mitmproxy -b 192.168.0.104 -p 9527

注意，此处的［YOUR_DOWNLOAD_PATH］为你下载mitmproxy二进制文件解压后所对应的目录，就我而言的目录就是：~/Downloads/osx-mitmproxy-0.11.3 . 其中ip设置为iMac的ip，端口则按照你的个人喜好来。
初始界面如下：




mitmproxy初始运行界面
输入“?”便可查看帮助界面（输入“q”回到正常界面）：




mitmproxy帮助界面

在Android上设置代理。按照之前的步骤将Android所连接的wifi代理ip设置为：192.168.0.1，端口设置为：9527 。现在Android已经连上代理，iMac端便开始展示它所抓取到的包了（我在刷微博:)）：



mitmproxy抓包显示

mitmproxy常见操作

mitmproxy的操作主要是通过命令行来解决的，很多操作和vi相同。一般说来，“q”代表返回。当mitmproxy回到抓包列表界面时，输入“q”就代表退出mitmproxy了。

清除抓包结果

当你处于抓包列表界面时，觉得太多的信息让你十分恼火，直接输入大写字母C便可以清楚所有的抓包结果。

查看抓包

在步骤3中我们可以看到一个黄色的指标，我们可以通过上下箭头（或者使用 “j”/”k”来上下选择）。直接回车便可以查看指标所选定的包的详细信息：




mitmproxy抓包的Request详细信息
此时，我们可以使用tab键在“Request”和“Response”之间切换。这是“Response”的详细信息（这是一个张图片，所以下面乱码了）：




mitmproxy抓去response信息
当我们发现“Response”的信息比较乱的时候，我们可以选择合适的形式来展示，这个时候我们只要输入“m”便可以看到mitmproxy提供的不同展现形式，输入对应高亮的字母便可以看到相应的结果（输入“s”便可以以json形式展示）：




mitmproxy 展示模式

mitmproxy修改抓包

如果这个时候我们需要编辑“Request”怎么办，很简单，输入字母“e”即可（注意图片最下方出现的提示(Edit request (query,path,url,header,form,raw body,method)?：




mitmproxy编辑request
我从mitmproxy给出的提示中选择了“method”，也就是编辑当前包的http方法，于是mitmproxy便给出了常见的方法：

在这些方法中，我要选择“trace”，便输入高亮的字母“t”即可，最后原来“Request”里面的方法就变成了TRACE了：




mitmproxy 修改request method

但是这个时候修改的request还没有生效，因为现在mitmproxy所展示的抓包信息只是记录了Android和server端之间的通信，因此我们现在编辑的抓包是已经传输过了，所以怎么办呢？很简单，重新request一下，输入字母“r”（代表“replay”）。这个时候我们就可以看到我们修改过的request得到的结果了:




mitmproxy 抓包replay效果
此时我们输入“q”便可以回到之前的抓包列表了。这些都是历史抓包纪录，能不能实时地抓包呢？当然可以，这就是下面要说的拦截（Intercept）了。

mitmproxy拦截

何为拦截？之前开篇就介绍过mitmproxy是一个中间人代理工具，它位于客户端和Server 端之间，它可以获取客户端的Request然后修改，发送给Server 端；Server端得到Request之后在发出相应的Response又会被mitmproxy拦截，如果你想修改response，便可修改后再发给客户端。注意：这与之前修改抓包信息不同的是，前者的抓包已经发送给了服务器，而mitmproxy拦截则是获取了抓包，还未发送给服务器。也就是说如果我拦截了我手机上所有的request，那么我的手机将无法获取来自服务器的response。

那么我们如果进行拦截，怎么进行特定的拦截？输入字母“i”（代表Intercept filter）即可，此时界面便会让你输入想要拦截的条件：




mitmproxy 拦截
mitmproxy的条件拦截在默认情况下是过滤抓包的URL的。也就是说当你直接输入要拦截的条件（比如输入“weibo”），那么接下来要出现抓包会将匹配的抓包整体变黄：




mitmproxy条件拦截效果
这些橘黄色的数据包都代表被拦截了，还未发送给服务器，这个时候你就可以对这些数据包进行修改，我们选择一个数据包enter进入：




mitmproxy 拦截 选择数据包
与之前的类似，输入“e”，进行request编辑模式，然后输入“h”代表要编辑request的头部:




mitmproxy 编辑拦截包的头部
输入enter便可对高亮的User-Agent的值进行修改，上图的weibo版本之前是5.0的，被我改成了6.0 。我们还可以对header进行添加属性，输入“a”即可，然后使用tab分别键入key和value。这里我添加了“test－test”键值对：




mitmproxy 拦截header添加键值对
至此，我对拦截的request header已经修改完毕，现在要做的就是我要认可接受这个修改，然后发给服务器。所以我们输入“a”（代表“accept”）即可，等到服务器响应后，注意，mitmproxy便又了拦截服务器发过来的response（注意那个“Response intercepted”）：




mitmproxy 拦截response
现在如果你想修改这个response也可以，方式同上面修改request一样。这个时候我再输入“a”，代表我接受了这个response，然后这个response便可发给客户端了:




mitmproxy 拦截response之后accept

更多类型的mitmproxy拦截

同时mitmproxy还支持不同类型的条件过滤，之前在拦截字符串前面加上特定的参数比如我要拦截所有的POST request怎么办？输入：~m POST 即可（m代表method）：




mitmproxy 拦截特定的request 方法
拦截所有的request： ~q

拦截特定的header： ~h

拦截特定的domain： ~d

拦截特定的响应代码（404之类的）： ~c

其他还有很多类型，请参看mitmproxy官方文档。