A potem jeszcze przyszły marzenie o komputerze potem do kompletu doszedł Internet. A dziś to wszystko jest w zasięgu ręki dla większości, bo są to podstawowedobra, które ma każdy, a na pewno większość społeczeństwa na całym świecie. Każdy praktycznie jak tylko chce może korzystać z komputerów i z Internetu. W sieci za pomocą wyszukiwarek każdy znajdzie coś dla siebie. Dzieci, młodzież i dorośli. Ale mając świadomość, że na naszą stronę może wejść każdy, kto jest w mniejszym lub większym stopniu zainteresowanych znalezieniem różnych przedmiotów i usług jest wiele.

Gdy wyszukiwarka odwiedza witrynę, robots.txt znajduje się w katalogu głównym jest pierwszy plik robota. Plik robots.txt jest następnie analizowane i poleca robota co do których strony nie są zaindeksowane. W wyszukiwarce robot może przechowywać w pamięci podręcznej kopię tego pliku, może to okazja na indeksowanie stron webmastera nie chce robota. Strony zazwyczaj zapobiec zaindeksowanych stron obejmują logowania szczególnych, takich jak koszykami i specyficzne dla użytkownika treści, takie jak wyniki wyszukiwania z wewnętrznych poszukiwań.

Pozycjonowanie i marketing w wyszukiwarkach jest powszechnie lista za bardzo skuteczny sposób dotarcia do klientów online. Słowo Search Engine Optimization technicznych jest terminem używanym do opisania online marketing poprzez wyszukiwarki. Jest to proces analizowania i rozwój witryny, aby umożliwić wyszukiwarkom przeczytać, zrozumieć, i indeksują ją poprawnie. Jeżeli treść witryny jest ignorowany przez wyszukiwarki to wyszukiwarki nie indeksują witrynę Idealistka kosmiczna ciekawie chodzi nieprzyzwoite okienka.