#23 No es que seamos tontos. Es que no es decisión nuestra y nunca lo será porque si se hiciera lo que beneficia a la población las empresas no ganarían tanto dinero. Y como todo el mundo sabe, lo único que importa es la economía, aunque cueste vidas.
#38 Sí, y si alguien quiere hacer un uso pernicioso de esa información no te preocupes que como te explican #9 y #10 hay formas de hacerlo. Este robot, por lo tanto, sólo sirve para dificultar el acceso a la información, no para defender de manera efectiva el derecho al olvido. Copio de la referencia de #20:
Para Pérez, los robots txt no son efectivos porque es un protocolo informático pensado para facilitar a los buscadores que no rastreen textos irrelevantes o duplicados. "Que los buscadores no publiquen un texto protegido por un robot txt es únicamente resultado de un pacto de caballeros porque técnicamente pueden obviar el bloqueo".
La diferencia es que con el robot no puedes escribir en google el nombre de un sobrino de Rita Barberá y ver cuándo y por qué sale, pero sigues pudiendo bajarte todos los disallowed y rastrearlos uno por uno.