Ovviamente non parlo del mio sito, che ha molti meno visitatori al giorno, ma è indicizzato.
Parlo di LiveLeak, un portale di video che non stanno sempre comodi a tutti, secondo quello che leggo in giro sui vari blog. Personalmente non l'ho visitato a fondo.
La questione è un altra, sembrerebbe che questo sito non sia indicizzato da Google, molti l'hanno vista come una censura, soprattutto perchè Google possiede già due siti simili: Google Video e YouTube, insomma a nessuno sembrava possibile che un sito con almeno 500 mila visite uniche al giorno non apparisse sul motore di ricerca che più amo al mondo.
Ebbene, stando alle ultime news sarebbe una gaffe dello staff di LiveLeak, che avrebbe disattivato il "crawling" (ovvero la visita da parte dei motori di ricerca) del loro sito attraverso il famigerato file "robots.txt".
Chi di voi ha un pò di manualità con il web saprà che il file robots.txt non è creato per gli "umani" ma proprio per i motori di ricerca (visti proprio come robot) e può indicare a questi di non visitare alcune pagine, ad esempio nel mio caso, i motori di ricerca non richiedono le pagine di login, quelle per l'inserzione di commenti, e tutte quelle pagine che hanno bisogno di un interazione con un umano.
Questa notizia è però di seconda mano, e su alcuni blog sostengono che il robots.txt di LiveLeak sia sempre stato quello che c'è adesso (che è correttamente funzionale per un indicizzazione), pertanto la vicenda credo si chiarirà nei prossimi giorni.
Fonte: Punto-Informatico
Fonte: Allsux.com
E per finire vorrei segnalarvi questo meccanismo di sicurezza per la sega circolare
Qualsiasi.NET
http://www.qualsiasi.net/article.php/500k_unique