# robots.txt para http://techtastico.com
#
# Las Tres Leyes de la Robótica
#
# 1. Un robot no puede causar daño a un ser humano o, por su inacción,
# permitir que un ser humano sufra daño.
#
# 2. Un robot debe obedecer las órdenes que le sean dadas por un ser
# humano, a menos que dichas órdenes entren en conflicto con la Primera Ley
#
# 3. Un robot debe proteger su propia existencia, siempre que ello no entre
# en conflicto con la Primera o la Segunda ley
#
# -- Isaac Asimov
#
# (robots.txt inspirado por yell.com/robots.txt y microsiervos.com)
#


#
# Bloqueo para todos los Crawlers que no son de motores de búsqueda y que roban contenido
#

User-agent: SiteSnagger
Disallow: /

User-agent: WebStripper
Disallow: /

User-agent: WebCopier
Disallow: /

User-agent: Fetch
Disallow: /

User-agent: Offline Explorer
Disallow: /

User-agent: Teleport
Disallow: /

User-agent: TeleportPro
Disallow: /

User-agent: WebZIP
Disallow: /

User-agent: HTTrack
Disallow: /

User-agent: Microsoft.URL.Control
Disallow: /

User-agent: Xenu
Disallow: /

User-agent: larbin
Disallow: /

User-agent: Download Ninja
Disallow: /

User-agent: NPBot
Disallow: /

User-agent: WebReaper
Disallow: /

User-agent: Googlebot
Disallow: /post/*/trackback/
Disallow: /post/*/feed/

# Ahora las reglas para los todos los Robots
User-agent: *
Disallow: /feed
Disallow: /comments
Disallow: /suscribete

# Sitemap
Sitemap: http://techtastico.com/sitemap.xml.gz