python爬虫指的是一种自动获取网络数据的成勋,由python标准库提供了系统管理、网络通信、文本处理、数据库接口、图形系统、XML处理等额外的功能,他将根据一定的搜索策略从队列中选择下一步要抓取的网页URL,并重复上述过程,直到达到系统的某一条件时停止。