Pojęcie to używane jest w odniesieniu do indeksowania stron internetowych przez przeglądarki. Określa liczbę stron dopuszczonych do indeksowania i pobranych przez boty przemierzające przestrzenie Internetu.   Ograniczony czas   W wypadku olbrzymich witryn internetowych programy…