master端通过redis进行网址的去重，进行任务的调度，slave端争夺任务开始爬取，并将爬取的数据交回master端。第一：爬虫指定好redis_key，启动，等待起始url。第二：运行脚本，往redis_key中填充start_urls。第三：爬虫发现redis_key中有了start_urls，开始取出这些url

在 Python 中，pass 是一个空语句，为了保持程序结构的完整性。一般情况下，pass 不做任何事情，被用作占位符。pass语法格式：pass，如果写了一个循环或者函数，尚未实现(暂未想好如何实现或者交付给其他人)，但是会在将来的某个时候实现。这时，如果循环体或者函数体为空，解释器就会报错。此时，可以使用 pass 语句构造一个不做任何事情的主体。

没有单词是由字母组成的序列且每两个字母之间可以用’-'连接。无效例子：“mail”、".com"、“invalid-”。而单词可拆分为字母+(-)(可选)+字母 ，因此：[a-z]+(\-?即，部分的正则表达式为：[a-z]+(\-?

垃圾回收：Python 不像 C++，Java 等语言一样，他们可以不用事先声明变量类型而直接对变量进行赋值。对 Python 语言来讲，对象的类型和内存都是在运行时确定的。这也是为什么我们称 Python 语言为动态类型的原因(这里我们把动态类型可以简单的归结为对变量内存地址的分配是在运行时自动判断变量类型并对变量进行赋值)。

什么是接口？接口只是定义了一些方法，而没有去实现，多用于程序设计时，只是设计需要有什么样的功能，但是并没有实现任何功能，这些功能需要被另一个类(B)继承后，由 类B去实现其中的某个功能或全部功能。