有没有人维护这样一个项目

FreeDog

针对 CSDN，阿里，腾讯等几大流氓采集。

目前搜索了下，搜索时怎么屏蔽的，没有直接从根上解决这些流氓。
有没有人维护过 他们的 爬虫IP，UA之类的特征库？
做站的时候，直接禁止他们采集，从根上解决了

hxuf

根本解决不了。只能不做站了。

FreeDog

hxuf 发表于 2024-10-9 11:14
根本解决不了。只能不做站了。

我觉得有戏啊，像百度，谷歌常规搜索引擎也有人维护大概的IP断。
这几个流氓却没人维护。哪怕只有一部分，也能阻止好多了。