Robots Exclusion Protocol: Różnice pomiędzy wersjami
| [wersja przejrzana] | [wersja przejrzana] |
Usunięta treść Dodana treść
Funkcja sugerowania linków: dodane 6 linków. |
|||
Linia 27:
Pola <code>Disallow</code> to [[Przedrostek|przedrostki]] (prefiksy) [[Uniform Resource Locator|URL]]-i, których ściągać nie wolno.
Pole <code>User-agent: *</code> dotyczy wszystkich
Niektóre [[Bot (program)|boty]] rozumieją też inne pola, np. ograniczające liczbę pobrań ze strony na minutę.
| |||