zawartość robots.txt różnych znanych serwerów (CIA, CISCO itp.):

	B O A R D
	» Board » Zadaj pytanie » Archiwum » Szukaj » Stylizacja

M E N U

» Nowości

» Archiwum

» Recenzje / Testy

» Board

» Rejestracja

Szukaj @ TwojePC

	OBECNI NA TPC
	» Sherif 11:01 » Janusz 10:46 » [yureq] 10:30 » yanix 10:16 » etranger 10:02 » rainy 10:01 » AfiP 09:59 » jablo 09:56 » rooter666 09:49 » Lucullus 09:41 » GLI 09:36 » ligand17 09:34 » Wedelek 09:30 » Kelso1 09:25 » MARtiuS 09:24 » Kenny 09:19 » mravel 09:08 » leon 09:06 » Raist 09:03 » @GUTEK@ 08:52 Dzisiaj przeczytano 18170 postów, wczoraj 45080 Szybkie ładowanie jest: włączone.

ccc

A R C H I W A L N A W I A D O M O Ś Ć

zawartość robots.txt różnych znanych serwerów (CIA, CISCO itp.): , j23 21/10/05 21:41
dla kolegów z "białego wywiadu":
http://cryptome.org/robots-out.txt
Wyjaśnienie dla kolegów agentów "starej daty", nie kumających nowych technologii: pliki robots.txt zawierają spis czego pająki sieciowe różnych googli itp. NIE POWINNY INDEKSOWAĆ, czyli co administratorzy takich serwerów raczej chcą ukryć.

Tak to wymieniam, bo ostatnio pozornie zaniedbałem agenturalną działalność (byłem zajęty zdobywaniem dokumentów nt wojennej przeszłości rodziny Tusków...), aby koledzy po fachu nie myśleli że wypadłem z branży... ;-)

Dumny nosiciel moherowego beretu!
Me gustan tomar mis copas
Żubrówka es lo mejor!