Robots.txt (Curiositats)
Si us voleu divertir, podeu agafar qualsevol web que vulgueu i fer aquesta curiosa prova. Afegir “/robots.txt” al final de la web que vulguis.
Ex: http://www.telecinco.es/robots.txt
En aquest fitxer diem als cercadors que no mirin certes carpetes (informació sensible?). Això per un hacker és molt llaminer! És on anirà a mirar en primer lloc!
Amb aquest fitxer podem obtenir informació de les parts sensibles de la web (que no volem que els cercadors emmagatzemin aquestes dades).
Internet no descansa mai.