前言 其实前面写的那一点点东西都是轻轻点水，其实HttpClient还有很多强大的功能： （1）实现了所有 HTTP 的方法（GET,POST,PUT,HEAD 等） （2）支持自动转向 （3）支持 HTTPS 协议 （4）支持代理服务器等 一、HttpClient使用代理IP 1.1、前言 在爬取网页的时候，有的目标站点有反爬虫机制，对于频繁访问站点以及...
一.简介 mitmproxy是一款http代理工具,即可用于中间人攻击,也可用于html抓包调试。 二.安装方法 1.sudo apt-get install libffi-dev 2.sudo pip install mitmproxy 二.使用方法 1.快捷键q 返回上一层； enter 查看数据包具体内容；Tab 切换看request/re...
4.获取响应状态Status信息、获取状态码Status Code 一般服务器的响应状态有以下几种： 200 正常 400 未找到页面 403 拒绝 500 服务器错误 比如我们请求bootstrap中文网， 我们现在代码中获取状态码： public classDemo { public static void main(String[] args...