He encontrado este modelo de robots.txt que me pareció ideal para implementar en WordPress. Para quién no lo sepa, este archivo se suele crear en cualquier sitio web respetable a fin de que Google, Yahoo o cualquier otro buscador indexe (es decir, agregue a su base de datos de resultados de búsqueda) solamente las páginas que [...]
Posted in
Tags:

Youtube tiene una tecnología para detectar videos protegidos por derechos de autor (copyright). Este "sistemita" escanea 100 años de video por día.