有什么好的方法可以防止网络爬虫进行数据抓取

发布网友 发布时间:2022-04-24 12:29

我来回答

1个回答

热心网友 时间:2023-10-12 21:28

服务器根目录放一个robots.txt文件,里面写上不需要被抓取的页面和目录。具体书写格式请自行度娘。

声明声明:本网页内容为用户发布,旨在传播知识,不代表本网认同其观点,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。E-MAIL:11247931@qq.com