Parsero: Análisis de robots.txt en Kali

 

 https://www.onlinetis.com/es/

Parsero: Análisis de robots.txt en Kali

Si estás auditando un sitio web desde Kali Linux, Parsero es una herramienta de reconocimiento (OSINT) muy útil y ligera. Su función principal es analizar el archivo robots.txt de un servidor para encontrar directorios que el administrador ha pedido a los buscadores (como Google o Bing) que no indexen.

A menudo, esos directorios "ocultos" contienen información sensible o rutas vulnerables que el administrador no quiere que sean públicas.

¿Cómo instalar Parsero?

Parsero no siempre viene preinstalado en todas las versiones de Kali, pero puedes obtenerlo fácilmente desde los repositorios oficiales:

Bash
sudo apt update
sudo apt install parsero

Comandos básicos y uso

La sintaxis de Parsero es muy directa. Aquí tienes los usos más comunes:

  • Escaneo estándar:

    Analiza el archivo robots.txt y verifica si las entradas marcadas como "Disallow" son accesibles y qué código de estado HTTP devuelven.

    Bash
    parsero -u https://www.ejemplo.com

  • Búsqueda en Bing (Opción -b):

    Esta es la función más potente de Parsero. Busca en Bing las URLs que están listadas en el robots.txt para ver si, a pesar de la restricción, el buscador ya las ha indexado.

    Bash
    parsero -u https://www.ejemplo.com -b

  • Guardar resultados:

    Si quieres exportar los hallazgos a un archivo de texto para un informe posterior:

    Bash
    parsero -u https://www.ejemplo.com -o archivo_salida.txt

¿Por qué es útil en Pentesting?

El archivo robots.txt es una mina de oro por una razón psicológica: le dice al atacante exactamente dónde están las cosas importantes. | Característica | Descripción |

| :--- | :--- |

| Identificación de rutas | Encuentra paneles de administración (/admin, /config). |

| Fugas de información | Localiza directorios de respaldo o temporales que el dueño olvidó borrar. |

| Eficiencia | En lugar de hacer fuerza bruta (brute forcing) de directorios, vas directamente a lo que el administrador intentó "esconder". |

Nota de seguridad: Parsero es una herramienta de recopilación de información pasiva/semipasiva, pero recuerda siempre realizar estas pruebas en entornos controlados o con la debida autorización.

 

Interpretar los resultados de Parsero es clave para no perder tiempo con "falsos positivos". Cuando ejecutas la herramienta, verás una lista de URLs seguida de un código de estado HTTP.

Aquí te explico cómo leer esos resultados como un profesional del Pentesting:

1. Los Códigos de Estado (HTTP Status Codes)

Es lo más importante que verás en la columna de resultados.

  • HTTP 200 (OK): ¡Bingo! El directorio está configurado como "Disallow" en el robots.txt, pero es accesible públicamente. Esto es una vulnerabilidad potencial o una fuga de información.

  • HTTP 403 (Forbidden): El servidor prohíbe el acceso. El administrador hizo bien su trabajo; aunque sabes que la carpeta existe, no puedes entrar directamente.

  • HTTP 404 (Not Found): La entrada en el robots.txt es antigua o apunta a algo que ya no existe. Puedes ignorarlo.

  • HTTP 301 / 302 (Redirect): Te redirige a otra parte (comúnmente al login o a la página principal).

2. Ejemplo de una salida típica

Imagina que ejecutas parsero -u https://objetivo.com y obtienes esto:

URL analizadaEstadoSignificado
https://objetivo.com/admin/200 OKCrítico: Panel de control expuesto.
https://objetivo.com/backup/200 OKMuy Alto: Posible descarga de base de datos o código fuente.
https://objetivo.com/config.php403 ForbiddenInteresante, pero protegido por el servidor.
https://objetivo.com/uploads/200 OKPodrías ver archivos subidos por otros usuarios.

3. ¿Qué hacer con los resultados "200 OK"?

Si Parsero te confirma que una ruta es accesible, el siguiente paso no es solo mirar, sino analizar qué hay ahí:

  1. Exploración Manual: Visita la URL en tu navegador (usa una VPN o Tor si es necesario por privacidad).

  2. Fuzzing de archivos: Si encontraste /backup/ con un 200 OK, pero está vacío, usa herramientas como Gobuster o FFUF para buscar archivos específicos dentro (ej. db.sql, config.zip).

  3. Análisis de Bing (-b): Si Parsero dice que Bing tiene indexada una ruta "Disallow", significa que la información ya es pública en internet aunque el dueño no lo sepa.

4. Errores comunes al interpretar

  • El "Falso 200": Algunos servidores están configurados para redirigirte siempre a la página de inicio en lugar de dar un error 404. Si ves que todas las rutas devuelven "200 OK" y muestran el mismo contenido, es un falso positivo.

  • Trampas (Honey Pots): A veces, los administradores ponen rutas como /passwords.txt en el robots.txt para detectar escaneos. Si intentas acceder, tu IP podría quedar bloqueada automáticamente.

Location: España

Entradas populares de este blog

Hacking y ciberseguridad en kali linux con Fping

Imagen
  www.onlinetis.com   Hacking y ciberseguridad en kali linux con Fping Fping es un programa similar a ping que utiliza la solicitud de eco del Protocolo de Mensajes de Control de Internet (ICMP) para determinar si un host objetivo responde. fping se diferencia de ping en que permite especificar cualquier número de objetivos en la línea de comandos o un archivo con las listas de objetivos a los que se hará ping. En lugar de enviar a un objetivo hasta que se agote el tiempo de espera o responda, fping envía un paquete de ping y pasa al siguiente objetivo mediante un sistema de turnos rotatorios. Como instalar:  sudo apt install fping fping Enviar paquetes ICMP ECHO_REQUEST a los hosts de la red   fping6 Compatibilidad con versiones anteriores de fping anteriores a la versión 4.0 El comando fping en Kali Linux es una utilidad de red que se utiliza para enviar paquetes de ICMP (Protocolo de mensajes de control de Internet) a varios hosts de forma simultánea. A diferen...
LEER MAS »

Hacking y ciberseguridad en kali linux con atk6-thcping6

Imagen
www.onlinetis.com Hacking y ciberseguridad en kali linux con atk6-thcping6 Parece que estás interesado en usar atk6-thcping6 en Kali Linux. Esta herramienta es parte del conjunto de utilidades thc-ipv6 , diseñado para probar las debilidades del protocolo IPv6. Para usar atk6-thcping6 , primero necesitas tener instalado el paquete thc-ipv6 . En la mayoría de las distribuciones de Kali, ya viene preinstalado, pero si no, puedes instalarlo con el siguiente comando: Bash sudo apt install thc-ipv6 Una vez que lo tienes instalado, la sintaxis básica para atk6-thcping6 es: Bash atk6-thcping6 <interface> <target> [opciones] Aquí está el desglose de los argumentos y opciones más comunes: <interface> : La interfaz de red que usarás para enviar el paquete. Por ejemplo, eth0 , wlan0 , etc. <target> : La dirección IPv6 del objetivo al que quieres hacer ping. [opciones] : Puedes usar varias opciones para modificar el comportamiento del ping. La mejor manera de ver todas la...
LEER MAS »

Como utilizar Fierce en kali linux

Imagen
  www.onlinetis.com   Como utilizar Fierce en kali linux Fierce es un escáner semiligero que ayuda a localizar direcciones IP no contiguas y nombres de host en dominios específicos. Está pensado como precursor de nmap, unicornscan, nessus, nikto, etc., ya que todos ellos requieren que se conozca previamente el espacio IP buscado. No realiza exploits ni escanea internet indiscriminadamente. Está diseñado específicamente para localizar objetivos probables tanto dentro como fuera de una red corporativa. Dado que utiliza principalmente DNS, es frecuente encontrar redes mal configuradas que filtran el espacio de direcciones interno. Esto es especialmente útil en malware dirigido. Originalmente escrito por RSnake y otros en http://ha.ckers.org/. Se trata simplemente de una conversión a Python 3 para simplificar y modernizar el código base. Como instalar: sudo apt install fierce Escáner DNS que ayuda a localizar espacios de IP no contiguos y nombres de host contra dominios específico...
LEER MAS »