分布式爬虫指的是在分布式计算环境中运行的网络爬虫程序。通常情况下，爬虫程序在单个计算机上运行，通过网络爬取目标网站的数据。但是，随着互联网中数据量的增加，单个计算机的处理能力已经无法满足大规模数据爬取的需求，因此分布式爬虫应运而生。

　　分布式爬虫的基本原理是将任务分解成多个子任务，由多个计算机并行执行，通过网络协作完成数据的爬取和处理。每个计算机都负责处理部分任务，将爬取到的数据存储到共享的数据存储系统中，以便其他计算机访问和处理。