使用 pythonwhois 测试域名可用性

Question

我正在成功使用pythonwhois（与pip install ...一起安装）来检查.com域的可用性：

import pythonwhois
for domain in ['aaa.com', 'bbb.com', ...]:
    details = pythonwhois.get_whois(domain)
    if 'No match for' in str(details):   # simple but it works!
        print domain 

但是：

• 有点慢（平均每秒 2 个请求）
• 如果我执行 26*26*26 ~ 17000 个请求，我不会被whois 服务器列入黑名单吗？
  （我正在测试???mail.com 的可用性，? 是a..z）

问题：有没有比每个域执行一个whois 请求更好的方法来检查可用性？

---

编辑：截至 2017 年 11 月，这项工作在 9572 秒内完成，所有可用域中的 here is the full list 格式为 ???mail.com，如果有人有兴趣启动电子邮件服务！

Answer 1

你应该并行化你正在做的事情。由于您的函数花费的大部分时间都在等待，因此您可以一次验证大量工作（不限于您的处理器数量）。示例：

import pythonwhois
from joblib import Parallel, delayed, cpu_count
n_jobs = 100 # works in parallel
def f(domain):
    details = pythonwhois.get_whois(domain)
    if 'No match for' in str(details):   # simple but it works!
        print(domain)
        return domain
    else:
        return None

domains= ['aaa.com', 'bbb.com', 'ccc.com', 'bbbaohecraoea.com']
result = Parallel(n_jobs=n_jobs, verbose=10)(delayed(f)(domain) for domain in domains)

# create a list with the available domains
available_domains=[domains[idx] for idx,r in enumerate(result) if r!=None]
print(available_domains)
# Result
# ['bbbaohecraoea.com']