#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: *
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: */page/
Disallow: /*/page/
Disallow: */*/page/
Disallow: /*/*/page/
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: MSIECrawler
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: WebCopier
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: HTTrack
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Microsoft.URL.Control
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: libwww
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: 80legs
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Ezooms
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Baiduspider
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: AhrefsBot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: YandexImages
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: YandexBot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Sogou
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: MJ12bot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: SeznamBot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: WBSearchBot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Exabot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: SISTRIX
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: JikeSpider
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Sosospider
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: 360Spider
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: proximic
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: noxtrumbot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: msnbot
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Slurp
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml

#
# Sitemap permitido, busquedas no.
#
#
# Permitimos el feed general para Google Blogsearch.
#
# Impedimos que permalink/feed/ sea indexado ya que el
# feed con los comentarios suele posicionarse en lugar de
# la entrada y desorienta a los usuarios.
#
# Lo mismo con URLs terminadas en /trackback/ que solo
# sirven como Trackback URI (y son contenido duplicado).
#
#
# A partir de aqui­ es opcional pero recomendado.
#
# Lista de bots que suelen respetar el robots.txt pero rara
# vez hacen un buen uso del sitio y abusan bastante...
# Anyadir al gusto del consumidor...
User-agent: Mediapartners-Google
Crawl-Delay: 50
Crawl-Delay: 30
Crawl-Delay: 10
Disallow: /
Disallow: 
Sitemap: http://remesasmexico.com.mx/sitemap.xml