Jak zaindeksować swoją stronę?
To zależy od robota. Każdy przyjmuje inną stategię. Generalnie zaczyna od historycznej
listy URLi,szczególnie te, które mają wiele linków na zewnątrz.
Wiele wyszukiwarek daje możliwość manualnego wprowadznia strony do odwiedzenia.
Czasem używane są inne źródła URLi, np. wyszukane z postów USENETu, list mailingowych
itd.
Kiedy robot ma startową listę urli może odwiedzać i indeksować nowe miejsca
(pełzając po linkach)
Jeśli robot wie o istnieniu jakiegoś dokumentu, może zdecydować na jego rozbiór
i wprowadzenie do bazy danych. Sposób w jaki się to odbywa zależy od robota.
Niektóre indekują tytuły HTML lub kilka pierwszych wierszy, lub pobrać całą
stronę i zaindeksoać wszystkie słowa. Niektóre analizują META TAGI.
Tak, zgadłeś, to zależy od wyszukiwarki;) Większość z nich posiada
link do formularza, który pozwala na zaindeksowanie strony.
Więcej informacji znajdziesz na www.searchengines.pl
Dalej - dla administratorów