如何使用Charles抓包并分析Http报文

从Web安全的攻击防御方面来说,最多接触的应该就是Http协议了,当我们作为中间人(man-in-the-middle)查看到所有浏览器到web服务器的http报文的时候,一切就都有意思起来。

比如,分析某电商在交易支付的时候请求了哪些东西,分析某网站的登录流程都请求了哪些数据,分析某社交软件有没有偷偷的上传隐私数据等等,甚至可以拿到Https加密过的请求哦!

如果我是黑客,分析过后也许就会通过工具篡改伪造请求报文,欺骗服务器,从而实现某些恶意行为,比如撞库、刷单、撸羊毛、恶意爬虫爬取数据等等。 那么,如何快速有效的抓取http数据包并进行分析呢,这里推荐一个跨平台抓包神器—Charles。

charles是一个图形界面可视化的代理形式(HTTP,SOCKS,SSL/HTTPS)的抓包工具,它提供对HTTP,SSL/HTTPS协议下通过同一个路由器下的设备的数据交流分析,包括各种HTTP请求和响应信息,charles目前只支持抓到部分socket的数据。

安装配置

●下载安装

http://www.charlesproxy.com/download/ charles需求java环境,并且为收费工具,试用版每30分钟将会关闭。

●socks/http代理配置

charles提供透明代理功能,当安装配置对象为网关服务器时,菜单处proxy->proxy setting勾选HTTP代理,勾选enabletransparent HTTP proxying选项即可。

bigsec

检测为第一次安装使用时charles会提供部分浏览器和应用的自动代理设置:

Windows / Internet Explorer proxy settings – used automatically by mostWindows applications
Mac OS X proxy settings – used automatically by most Mac OS Xapplications
Mozilla Firefox proxy settings (all platforms)

Mozilla Firefox可在设置ADD-ONs处添加自动配置插件: https://addons.mozilla.org/en-US/firefox/addon/charles-proxy/

其他应用/浏览器: 当于charles菜单proxy处设置好了设置以后,可以查询各个浏览器,应用的代理设置方式,在设备(包括手机)处于同一网络(同一路由)下时,填写charles所处设备的ip地址和charles设置的代理端口(默认8888),即可通过charles代理。

●SSL https代理配置

非手机: charles菜单help->SSL proxy->安装certificates后 菜单proxy->SSLproxy setting->添加代理目标地址(可于另外两个选项添加client和root的certificates)。 bigsec bigsec

手机: 在手机端浏览器输入“http://www.charlesproxy.com/getssl“ 下载证书,并将格式转换为crt安装在手机上即可。 bigsec

通过代理client ip段设置: 于菜单proxy->AccessControl处可设置通过代理的clientIP段

bigsec

charles可再通过代理传输数据,可在proxy->external proxy处设置代理,使charles再通过其他代理。

使用

charles的图形界面提供格式话的抓包数据的分析和各种处理方式。 当配置完毕以后数据会在当前session数据界面(Structure树状和Sequence队列两种方式)显示抓到的各个请求和相应信息,树状抓到的数据会以相同地址聚合的方式堆列为树状,而队列形式为以先后的顺序显示。对显示的数据有相应的选项可操作数据,其中request和response可以以image,text,html,json,javascript……的形式显示。

bigsec

charles提供断点形式(breakpoint)的代理,可对请求进行再编辑以后再将请求发送过去。同时提供repeat的重复发送功能,并有相应的功能设置(advance repeat)对该重复发送功能进行设置(定时定量)。

bigsec

●模式

charles在启用时提供的模式主要以record,throttle,断点模式。 其中,记录模式即使关闭charles一样在进行抓取数据,只是不将其显示出来。

bigsec

throttle模式可将目前连接代理的所有client虚拟为所设置的网络质量。

bigsec

其中,在附带工具中有可选其他关联选项附加模式。 菜单->tool下有:

●no caching 对caching设置的工具,设置以后,代理将拒绝代理的client使用cache缓存的形式显示相应。

**●map *** local:该功能可将代理本地的文件替换请求所响应的结果,目标请求的响应将替换为本地所选资源返回并显示给client。 remote:同上功能,但所替换的资源为远程他网络服务器上的其他请求地址或数据接口。

●rewrite 该工具可再编辑client发送给目标服务器的请求,并且提供批量改写字段的编辑。

●blocking cookies 该功能提供保存目标服务器发送/接收的各个cookies,可用来测试该web服务器是否对代理所持有的cookies有效(该功能提供导入和导出所保存的cookies)。

●Mirror 该工具提供对目前的session进行镜像处理。 charles提供终端下的命令形式操作方式和浏览器接口形式的操作方式。

●终端:

charles <path>
以一个session文件打开一个新的session
charles -config <path>
制定一个config文件的使用
charles -headless
无图形界面的启动charles
charles -throttling
开启throttling模式

●网页接口:

包括增加删除,保存session,开启关闭各种模式。同终端模式,并不提供各种可视化的抓包数据分析。

示例

●举个栗子:百度搜索樱桃小丸子图片

1.输入“樱桃小丸子”搜索,然后点击其中某一张图片,查看具体图片样式;

bigsec

2.百度搜索会通过url的形式向服务器请求这张图片的具体信息;

bigsec

3.Charles根据请求,可以抓取到服务器对这个请求做出的响应。比如这张图片的具体信息是什么;

bigsec

4.同时,charles还可以查看不同的响应格式,比如image、JavaScript、Jason等。

bigsec

点击进入岂安的世界