判斷題任何網(wǎng)站都會(huì)定義robots.txt 文件,能夠讓爬蟲了解爬取網(wǎng)站存在著哪些限制。

您可能感興趣的試卷