# Robots.txt # Este archivo combina las reglas para el sitio principal y para las subinstalaciones de WordPress. ############################## # DIRECTIVAS GENERALES PARA TODOS LOS BOTS ############################## User-agent: * ### Permitir el acceso a archivos esenciales (CSS, JS, imágenes, etc.) # Rutas para instalaciones en el root: Allow: /wp-content/uploads/* Allow: /wp-content/*.js Allow: /wp-content/*.css Allow: /wp-includes/*.js Allow: /wp-includes/*.css # Rutas para instalaciones en subcarpetas: Allow: /*/wp-content/uploads/* Allow: /*/wp-content/*.js Allow: /*/wp-content/*.css Allow: /*/wp-includes/*.js Allow: /*/wp-includes/*.css ### Bloqueo de directorios y archivos críticos (para evitar exposición de código) # cgi-bin (root y subcarpetas) Disallow: /cgi-bin Disallow: /*/cgi-bin # Plugins, themes y archivos de wp-includes (root y subcarpetas) Disallow: /wp-content/plugins/ Disallow: /*/wp-content/plugins/ Disallow: /wp-content/themes/ Disallow: /*/wp-content/themes/ Disallow: /wp-includes/ Disallow: /*/wp-includes/ ### Bloqueos propios de WordPress (adjuntar, paginación, etc.) # Bloqueo de directorios de attachment Disallow: /*/attachment/ # Bloqueo de paginación en etiquetas (root y subcarpetas) Disallow: /tag/*/page/ Disallow: /*/tag/*/page/ # Bloqueo de feeds en etiquetas Disallow: /tag/*/feed/ Disallow: /*/tag/*/feed/ # Bloqueo de páginas de paginación generales Disallow: /page/ Disallow: /*/page/ # Bloqueo de comentarios Disallow: /comments/ Disallow: /*/comments/ # Bloqueo del archivo xmlrpc.php (root y, por si acaso, en subcarpetas) Disallow: /xmlrpc.php Disallow: /*/xmlrpc.php # Bloqueo de URL con parámetro attachment_id Disallow: /?attachment_id* Disallow: /*?attachment_id* ### Bloqueo de URLs dinámicas y búsquedas Disallow: /*? # Bloquea cualquier URL que contenga "?" Disallow: /?s= Disallow: /*?s= Disallow: /search Disallow: /*/search ### Bloqueo de trackbacks Disallow: /trackback Disallow: /*/trackback Disallow: /*trackback Disallow: /*trackback* ### Bloqueo de feeds (exceptuando el feed principal que se permite) Allow: /feed/$ Allow: /*/feed/$ Disallow: /feed/ Disallow: /*/feed/ Disallow: /comments/feed/ Disallow: /*/comments/feed/ Disallow: /*/feed/rss/$ Disallow: /*/trackback/$ Disallow: /*/*/feed/$ Disallow: /*/*/feed/rss/$ Disallow: /*/*/trackback/$ Disallow: /*/*/*/feed/$ Disallow: /*/*/*/feed/rss/$ Disallow: /*/*/*/trackback/$ ### Bloqueo de páginas “trial” y otras URLs específicas Disallow: /landing-store-user Disallow: /landing-store-age Disallow: /landing-store-family Disallow: /landing-store-start-kids Disallow: /landing-store-start-adults Disallow: /landing-store-start-adults-kids Disallow: /privacy-policy Disallow: /partner-m228632623 Disallow: /landing-neuronup2go Disallow: /sweepstakes-official-rules/ ############################## # BLOQUEO DE BOTS Y CRAWLERS POCO ÚTILES ############################## User-agent: MSIECrawler Disallow: / User-agent: WebCopier Disallow: / User-agent: HTTrack Disallow: / User-agent: Microsoft.URL.Control Disallow: / User-agent: libwww Disallow: / User-agent: Orthogaffe Disallow: / User-agent: UbiCrawler Disallow: / User-agent: DOC Disallow: / User-agent: Zao Disallow: / User-agent: sitecheck.internetseer.com Disallow: / User-agent: Zealbot Disallow: / User-agent: SiteSnagger Disallow: / User-agent: WebStripper Disallow: / User-agent: Fetch Disallow: / User-agent: Offline Explorer Disallow: / User-agent: Teleport Disallow: / User-agent: TeleportPro Disallow: / User-agent: WebZIP Disallow: / User-agent: linko Disallow: / User-agent: Xenu Disallow: / User-agent: larbin Disallow: / User-agent: ZyBORG Disallow: / User-agent: Download Ninja Disallow: / User-agent: wget Disallow: / User-agent: grub-client Disallow: / User-agent: k2spider Disallow: / User-agent: NPBot Disallow: / User-agent: WebReaper Disallow: / ############################## # Ralentización de algunos bots problemáticos ############################## # User-agent: noxtrumbot # Crawl-delay: 20 # User-agent: msnbot # Crawl-delay: 20 # User-agent: Slurp # Crawl-delay: 20 ############################## # REGLAS ESPECÍFICAS PARA GOOGLEBOT ############################## User-agent: Googlebot # Se permite el acceso a archivos CSS y JS (para evitar problemas de renderizado) Allow: /*.css$ Allow: /*.js$ ############################## # SITEMAP ############################## Sitemap: https://neuronup.com/sitemap.xml
Following keywords were found. You can check the keyword optimization of this page for each keyword.
(Nice to have)