Robots Exclusion Protocol: Różnice pomiędzy wersjami
[wersja przejrzana] | [wersja przejrzana] |
Usunięta treść Dodana treść
Przywrócono wersję 35067741. Znacznik: Anulowanie edycji |
m Zamieniam przestarzały tag 'source' na 'syntaxhighlight' |
||
Linia 32:
=== Przykłady ===
Cała witryna '''będzie''' indeksowana przez roboty (tak jakby nie było pliku robots.txt):
<
User-agent: *
Disallow:
</syntaxhighlight>
Cała witryna '''nie będzie''' indeksowana:
<
User-agent: *
Disallow: /
</syntaxhighlight>
Indeksowane nie będą '''tylko''' foldery „images” i „private” w katalogu głównym strony:
<
User-agent: *
Disallow: /images/
Disallow: /private/
</syntaxhighlight>
Indeksowany nie będzie '''tylko''' plik „file” w katalogu „directory”:
<
User-agent: *
Disallow: /directory/file.html
</syntaxhighlight>
== Znaczniki meta ==
|