Robozilla, auch Rob O’Zilla, ist der Webcrawler des Open Directory Project. Er wird von Zeit zu Zeit von Hand gestartet, um zu überprüfen, ob die Einträge im Verzeichnis noch funktionieren. Nicht mehr funktionierende Einträge werden mit einem Fehlercode versehen und bis zur Prüfung durch einen Editor aus dem Verzeichnis entfernt.

Robozilla prüft jeden Eintrag mehrfach. Die einzelnen Durchläufe liegen jeweils mehrere Tage bis Wochen auseinander, um kurzzeitige Serverprobleme auszuschließen.

ODP Editierrichtlinien – Fehlerhafte Links (Robozilla)

Kategorie: World Wide Web