联系官方销售客服

1835022288

028-61286886

Robots爬虫协议生成器

个人认证

第三方 Robots爬虫协议生成器 版本号:1.0 投诉举报

告诉网络搜索引擎的漫游器(又称网络蜘蛛),此网站中的哪些内容是不应被搜索引擎蜘蛛获取的,哪些是可以被(蜘蛛)获取的
0 更新时间:2024-07-10 18:01:05
价格: ¥ 10 元
试用: 不支持试用
使用: 源代码可永久使用
域名: 不限域名,允许安装到多个项目中
下载: 2 次    说明
依赖: 不依赖于任何插件
售后: 首次购买提供一年售后服务    说明
源码: 本插件没有开启试用权限,购买之前需要咨询开发作者是否满足你自己的需求
需求: 若本源码的功能点不满足您的项目需求时,你可以通过这里找我们做定制开发服务 提交需求
安装平台: XunRuiCMS V4.6.3及以上版本
名称 Robots爬虫协议生成器
版本号 V1.0
应用编号 APP1619
应用类型 插件
发布时间 2024-07-10 18:01:39
更新时间 2024-07-10 18:01:05
支持内核 CodeIgniter Laravel ThinkPHP
功能类别 SEO
依赖场景 不依赖于任何插件
源码加密 未加密
技术保障 第三方服务商
技术要求 无要求
支持浏览器 Chromium内核浏览器、Chrome、Edge、Firefox、Safari、Opera等
功能介绍

robots.txt(统一小写)是一种存放于网站根目录下的文本文件,它通常告诉网络搜索引擎的漫游器(又称网络蜘蛛),此网站中的哪些内容是不应被搜索引擎蜘蛛获取的,哪些是可以被(蜘蛛)获取的。

因为一些系统中的URL是大小写敏感的,所以robots.txt的文件名应统一为小写。

robots.txt应放置于网站的根目录下。

如果想单独定义搜索引擎的漫游器访问子目录时的行为,那么可以将自定的设置合并到根目录下的robots.txt,或者使用robots元数据。

robots.txt协议并不是一个规范,而只是约定俗成的,所以并不能保证网站的隐私。

注意robots.txt是用字符串比较来确定是否获取URL,所以目录末尾有与没有斜杠“/”表示的是不同的URL。robots.txt允许使用类似"Disallow: *.gif"这样的通配符。

Robots协议是国际互联网界通行的道德规范,基于以下原则建立:

1、搜索技术应服务于人类,同时尊重信息提供者的意愿,并维护其隐私权;

2、网站有义务保护其使用者的个人信息和隐私不被侵犯。


QQ_1720520402339.png

QQ_1720520413954.png

使用说明:
1. 严禁卖家出现画饼行为,也不提倡因为卖家许诺后期新增某某功能产生让您下单购买的心理,请理性入手。
2. 严禁线下交易,买卖应用请通过线上购买,线下交易出现任何问题,均不在迅睿云官方处理范围,请知晓。
3. 维权退款问题可参考 《应用市场退款准则》 的说明。