首页
191问答库
>
如何在robots.txt屏蔽外部链接。比如我的网站里想屏蔽淘宝的链接，不让蜘蛛爬取淘宝链接
如何在robots.txt屏蔽外部链接。比如我的网站里想屏蔽淘宝的链接，不让蜘蛛爬取淘宝链接
2024-11-18 14:24:04
推荐回答（1个）
回答1：
robots.txt一般是控制你自己的网站内部链接
你可以不你站内的淘宝地址“nofollow”掉：
什么什么什么
或者此页面所以链接都不抓取：
相关问答
最新问答
爱情表白（英语）
描写人物动作,心理活动,语言,神态,外貌的句子
win10桌面图标左下角黑块
百度推广里的排名和质量度分析里的排名展现分布怎么看，代表什么意思？
如果一个人QQ设置问题猜猜我是谁怎么办
个人独资企业所得税税率及如何定税
我QQ和微信号绑定了，但是微信号不知道怎么了被永久封号了，现在我QQ
【紧急 求助】雄配子数目远远多于雌配子的原因是 雄性一个生殖细胞产生4个配子，雌性只能产生1个
如图是测定空气中氧气含量的实验装置．试回答下列问题：（1）实验过程，燃烧匙里为什么要盛放过量的红磷
PROE是全参数化的,UG是半参数化的 PROE比较严谨,ug比较自由
