爬虫论坛

引言 用最短的时间写一个最简单的爬虫,可以抓一些简单的论坛、帖子、网页。 入门 1.准备工作 安装Python 安装scrapy框架 一个IDE或者可以用自带的 2.开始写爬虫 在spiders文件夹中创建一个python文件,比如miao.py,来作为爬虫的脚本。 代码如下: 3.运行一下 如果用命令行的话就这样: 解析 1.试试神奇的xpath 2.看看xpath的效果 在最上面加上引用:...