Warum können einige Webseiten, wie z. B. Zhihu, nicht gecrawlt werden?

Question

Warum manche Webseiten nicht gecrawlt werden können, wie zum Beispiel Zhihu

Answer 1

HTTPS 与 特殊站点 做了防盗链的防护机制 你就无法爬了 HTTPS需要特殊手段处理