最近项目用到了爬虫,构造HTTP请求是最基本的操作了,记录一下套路备用。
标签: 爬虫
[GoLang]Golang里HTTP-Post/Get的标准套路
最近在用GoLang写爬虫,经常需要发送Get/Post请求,大致套路如下
[Web]用wget递归扒站
[toc]
之前经常扒站扒数据库,都是用软件扒的,最近上网闲逛看到了wget的详细使用介绍,里面有扒站的方法,贴过来备用
最近项目用到了爬虫,构造HTTP请求是最基本的操作了,记录一下套路备用。
最近在用GoLang写爬虫,经常需要发送Get/Post请求,大致套路如下
[toc]
之前经常扒站扒数据库,都是用软件扒的,最近上网闲逛看到了wget的详细使用介绍,里面有扒站的方法,贴过来备用