联系官方销售客服

1835022288

028-61286886

问题 求助问题 分享经验 开发需求
开发框架 版主：迅睿框架研发组
蜘蛛监控里有很多这样子的记录，怎么避免
柴火
类型：迅睿CMS 更新时间：2021-05-14 16:29:47

蜘蛛监控里有很多这样子的记录，在搜索框里输入这些信息，然后被蜘蛛爬，这种的怎么避免？或者对网站有没有影响啊？

{xunruicms_img_title}

{xunruicms_img_title}

回帖
  • 迅睿框架技术-刘怀远
    #1楼    迅睿框架技术-刘怀远
    2021-05-14 16:00:03
    Chrome 0
    建议通过robotx。txt来避免
  • 柴火
    #2楼    柴火
    2021-05-14 16:04:07
    Safari 0
    迅睿框架技术-刘怀远 具体robotx是怎么设置呢？
  • 湾仔码头
    #3楼    湾仔码头
    2021-05-14 16:04:52
    Chrome 0
    robotx可以做这些事情的，禁止蜘蛛爬取指定url
  • 迅睿框架技术-刘怀远
    #4楼    迅睿框架技术-刘怀远
    2021-05-14 16:05:15
    Chrome 0
  • 欧尔麦特
    #5楼    欧尔麦特
    2021-05-14 16:06:32
    Chrome 0
    百度去搜索下robots语法吧
  • 柴火
    #6楼    柴火
    2021-05-14 16:11:04
    Safari 0
    迅睿框架技术-刘怀远 目前也收录了很多好的搜索词的页面，但是像这些色情广告的都没有收录的，如果屏蔽的话，所有的关于搜索的都会屏蔽吧。如果不屏蔽的话，就是不知道这种广告被搞多了对网站有没有影响，
  • 官方技术总监-陈总
    #7楼    官方技术总监-陈总
    2021-05-14 16:12:54
    Chrome 0
    建议百度搜索下相关的防范方法
  • 小波工作室--标签和API大师
    #8楼    小波工作室--标签和API大师
    2021-05-14 16:16:21
    Chrome 0
    • 敏感词过滤

      当发布内容时判断内容中是否包含敏感词，存在时就提示并禁止继续提交支持手动批量录入词语，也...

    需要的话我给你开发一个搜索词过滤功能
  • 柴火
    #9楼    柴火
    2021-05-14 16:29:47
    Safari 0
    小波工作室--标签和API大师 这个也很长时间了，收录了很多正常好的搜索词的页面，像这些不良信息都没有收录，就是不知道这个对网站有没有影响。