产品官网 a>
首页 a>
问答 a>
专栏 a>
话题 a>
商城 a>
标签库 a>
视频教程 a>
首页
问题库
资讯专栏
问答专家
标签库
课程中心
NEW
发布
提问题
发文章
禁止自己的网站被爬虫爬去?
财富值76
2016-04-03 00:04
发布
×
打开微信“扫一扫”,打开网页后点击屏幕右上角分享按钮
站内问答
/
其它
2106
3
0
禁止自己的网站被爬虫爬去?有什么方法啊
3条回答
fizlbq123
- 宥集想拥哊壹苆,鲕莪只想拥姷迩。
2016-04-03 08:04
加一个robots.txt文件,内容:
User-agent: * Disallow: /
加载中...
查看其它3个回答
一周热门
更多
>
相关问题
你被禁止访问这个网站,请联系网站管理员!【淘宝网】
0 个回答
这样的爬虫思路要怎么设计??
5 个回答
PHP怎么实现爬虫??
0 个回答
QQ被禁止安装
1 个回答
当前用户被禁止发表评论
0 个回答
如何看待知乎很多问答被微博微信公众号复制使用呢?包括答主声明禁止转载的,也被删掉声明直接使用?
0 个回答
robots设置全部禁止,但是页面meta用index,follow有何效果?
0 个回答
有哪些常用的反爬虫手段?
1 个回答
爬虫项目技术选型
0 个回答
相关文章
成都火车东站垃圾桶爬出四条娃娃鱼(图)
0个评论
成都环卫工清扫垃圾桶爬出四条娃娃鱼 活蹦乱跳
0个评论
成都环卫工清扫垃圾桶 爬出四条娃娃鱼
0个评论
沙特禁止女性开车 女性使用碰碰车练习驾驶
0个评论
揭秘虚假医疗套路:两性疾病成假宣传"重灾区"
0个评论
暗渡"配资"禁令陈仓 百度360疑再涉违规推广
0个评论
上海迪士尼开园:园内酒店6月无空房 禁带自拍杆
0个评论
水源保护区村民生活艰难 告县政府索赔5800余万
0个评论
活老鼠从天而降砸餐厅桌上 女食客当场吓晕住院
0个评论
媒体揭虚假医疗宣传骗术:体检必有病 且病得很重
0个评论
×
关闭
采纳回答
向帮助了您的知道网友说句感谢的话吧!
非常感谢!
确 认
×
关闭
编辑标签
最多设置5个标签!
保存
关闭
×
关闭
举报内容
检举类型
检举内容
检举用户
检举原因
广告推广
恶意灌水
回答内容与提问无关
抄袭答案
其他
检举说明(必填)
提交
关闭
×
打开微信“扫一扫”,打开网页后点击屏幕右上角分享按钮
×
付费偷看金额在0.1-10元之间
确定
×
关闭
您已邀请
0
人回答
查看邀请
擅长该话题的人
回答过该话题的人
我关注的人
加一个robots.txt文件,内容:
一周热门 更多>