Wsparcie użytkownika
Plik „robots.txt” to plik tekstowy znajdujący się w katalogu głównym witryny firmy. Specjalne instrukcje (instrukcje) dla robotów wyszukujących są do niego zapisywane. Instrukcje te mogą uniemożliwić indeksowanie niektórych sekcji lub stron w witrynie.
Wszystkie roboty wyszukujące przy wejściu na stronę najpierw szukają pliku robots.txt.
Plik „robots.txt” jest identyczny dla wszystkich witryn utworzonych na platformie portalu i znajduje się już w katalogu głównym witryny. Aby poprawić indeksowanie przez wyszukiwarki, w pliku „robots.txt” blokowane są tylko duplikaty stron, na przykład lista tych samych produktów w formie galerii i w formie listy:
- http://firma.com/produkt_list - dozwolone
- http://firma.com/produkt_list?view_as=list - zabronione
Domyślnie w pliku „robots.txt” witryny nieindeksowane strony, takie jak strona dodawania produktu do koszyka, zamawiania produktu, tworzenia recenzji, wszystkich stron konta osobistego itd., Są zamykane przed indeksowaniem. Otwarcie w celu indeksowania takich stron boli tylko Twoją witrynę, ponieważ nie ma dla nich przydatnych informacji ani dla klientów, ani dla wyszukiwarek.
Wszystkie inne strony mogą indeksować.
W przypadku firm, które podłączyły zewnętrzną domenę typu „Company.com”, możliwe jest wprowadzenie zmian w pliku „robots.txt”.
Uwaga! Edycja „robots.txt” może spowodować nieprawidłowe indeksowanie witryny przez wyszukiwarki. Przed wprowadzeniem zmian w pliku skonsultuj się ze specjalistą SEO.
Strona do edycji pliku „robots.txt” znajduje się w „ Gabinet firmy ›Promocja strony› SEO ›Edycja robots.txt „Dostępne dla firm z podłączoną domeną zewnętrzną. Więcej informacji na temat łączenia domeny zewnętrznej w dokumencie „ Adres strony internetowej firmy (domena firmy) „
Główne błędy podczas edycji pliku:
- Zmień nazwę lub usuń instrukcje:
User-Agent: YadirectBot
Disallow:
User-Agent: YandexDirect
Disallow:
- W dyrektywie Host skrót od protokołu przesyłania hipertekstowego jest określany przy użyciu http: // i końcowego ukośnika /
Host: http://company.com/ - niepoprawny
Host: company.com - prawo
- Usuwanie instrukcji „Host: company.com”
- Korzystanie z instrukcji Zezwalaj nie zawsze jest prawidłowo postrzegane przez wyszukiwarki i może pogorszyć indeksowanie Twojej witryny.
- Usuwanie instrukcji „Mapa witryny: http://firma.com/sitemap.xml”
Uwaga Mapa witryny „sitemap.xml” jest generowana i aktualizowana automatycznie przez system portalu.
Poniżej znajduje się przykład pliku „robots.txt” znajdującego się w katalogu głównym witryny firmy na portalu:
Przykładowy plik robots.txt
Aby powrócić do oryginalnych ustawień pliku „robots.txt”, kliknij przycisk „Ustawienia domyślne” i zapisz zmiany.
Ustawienia domyślne
Bardziej szczegółowe instrukcje dotyczące tworzenia pliku „robots.txt” z witryn wyszukiwarki:
Com/produkt_list?