发布网友 发布时间:2024-10-23 17:46
我来回答
共1个回答
热心网友 时间:2024-11-03 14:26
比如推送过,或者搜索引擎通过外链访问到这个网页,就可以抓取入库,robots是*抓取网页,但是并不是一定不能抓