Re: robots.txt

Autor: Tomasz Surmacz (ts_at_blurp.bnafh.bofh.org.pl)
Data: Wed 21 Jan 1998 - 01:42:08 MET

• Następna wiadomość: Tomasz Surmacz: "Re: Lacznosc ze Skandynawia"
• Poprzednia wiadomość: Antek Sawicki: "Re: WWW.PL !!! SKANDAL!"
• W odpowiedzi na: Jaroslaw Rafa: "Re: robots.txt"
• Następna w wątku: Wojtek Sylwestrzak: "Re: robots.txt"
• Odpowiedz: Wojtek Sylwestrzak: "Re: robots.txt"
• Wiadomości sortowane wg: [ datay ] [ wątku ] [ tematu ] [ autora ] [ załącznik ]

Jaroslaw Rafa (RAJ_at_inf.wsp.krakow.pl) wrote on 20 Jan 98 15:28:56 GMT:
JR> Dnia 20 Jan 98 o godz. 16:19, Kiemal Amietszajew napisal(a):

>> Czy moze ktos podzielic sie doswiadczeniami
>> nt stosowania tego pliku w serwisach www ?
>>
>> Obserwuje naprawde duzy ruch jaki generuje u mnie np infoseek,
>> ale z drugiej strony wypada dac sie zaindeksowac.
>>
JR> Ja mam np. w tym pliku wykluczone /cgi-bin/.

/cgi-bin roboty (podobnie jak w3cache) i tak nie ruszają.

-- 
 _________
(_   _' __) Tomasz R. Surmacz, Work: (071) 3202636, tsurmacz_at_ict.pwr,wroc.pl
  |  (__  \ http://www.ict.pwr.wroc.pl/~tsurmacz/ *-* Home: ts@ wroc,apk,net
  |__(____/     "Life is complex. You know - part real, part imaginary."

• Następna wiadomość: Tomasz Surmacz: "Re: Lacznosc ze Skandynawia"
• Poprzednia wiadomość: Antek Sawicki: "Re: WWW.PL !!! SKANDAL!"
• W odpowiedzi na: Jaroslaw Rafa: "Re: robots.txt"
• Następna w wątku: Wojtek Sylwestrzak: "Re: robots.txt"
• Odpowiedz: Wojtek Sylwestrzak: "Re: robots.txt"
• Wiadomości sortowane wg: [ datay ] [ wątku ] [ tematu ] [ autora ] [ załącznik ]

To archiwum zostało wygenerowane przez hypermail 2.1.7 : Wed 19 May 2004 - 16:10:29 MET DST