#
###################################################################################################################################
#
# Bienvenido a Robots.txt de INiBICA.es :)
#
###################################################################################################################################
#                                                                      
#####  ### #     #   ######  ###  #####     #    
#####   #  ##    # # #     #  #  #     #   # #   
#####   #  # #   # # #     #  #  #        #   #  
#####   #  #  #  # # ######   #  #       #     # 
#####   #  #   # # # #     #  #  #       ####### 
#####   #  #    ## # #     #  #  #     # #     # 
#####  ### #     # # ######  ###  #####  #     #                                                                        
#
#   Instituto de Investigación e Innovación en Ciencias Biomédicas de Cádiz
#
###################################################################################################################################

## GENERAL SETTINGS

User-agent: *
Allow: /


## SITEMAPS

Sitemap: https://inibica.es/sitemap.xml


## PRIVATE URLS (ÁREAS INTERNAS DE WORDPRESS)

Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-json/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /cgi-bin/
Disallow: /xmlrpc.php
Disallow: /feed/
Disallow: /trackback/
Disallow: /*?s=
Disallow: /*&preview=true
Disallow: /*&p=
Disallow: /*&page_id=
Disallow: /mastermega-content/
Disallow: /jltma_popup/

# Bloqueo de bots basura, scrapers y spam
User-agent: Baiduspider
Disallow: /

User-agent: YandexBot
Disallow: /

User-agent: Yandex
Disallow: /

User-agent: msnbot
Crawl-delay: 30

User-agent: Slurp
Crawl-delay: 10

User-agent: AhrefsBot
Crawl-delay: 1

User-agent: SEMrushBot
Crawl-delay: 1

User-agent: archive.org_bot
Crawl-delay: 1

User-agent: WebCopier
Disallow: /

User-agent: Python-urllib
Disallow: /

User-agent: URL_Spider_Pro
Disallow: /

User-agent: EmailCollector
Disallow: /

User-agent: EmailSiphon
Disallow: /

User-agent: WebBandit
Disallow: /

User-agent: EmailWolf
Disallow: /

User-agent: ExtractorPro
Disallow: /

User-agent: CopyRightCheck
Disallow: /

User-agent: Alexibot
Disallow: /

User-agent: Zeus
Disallow: /

User-agent: EroCrawler
Disallow: /

User-agent: Black Hole
Disallow: /