{"id":6684,"date":"2021-06-16T07:22:31","date_gmt":"2021-06-16T05:22:31","guid":{"rendered":"https:\/\/pomoc.dhosting.pl\/?post_type=manual_kb&#038;p=6684"},"modified":"2023-05-18T15:54:22","modified_gmt":"2023-05-18T13:54:22","slug":"jak-korzystac-z-pliku-robots-txt","status":"publish","type":"manual_kb","link":"https:\/\/dhosting.pl\/pomoc\/baza-wiedzy\/jak-korzystac-z-pliku-robots-txt\/","title":{"rendered":"Jak korzysta\u0107 z pliku robots.txt?"},"content":{"rendered":"<h3>Czym jest plik robots.txt?<\/h3>\n<p>Plik ten okre\u015bla zestaw regu\u0142 wy\u0142\u0105cznie dla robot\u00f3w indeksuj\u0105cych, kt\u00f3re nie maj\u0105 wp\u0142ywu na dzia\u0142anie strony WWW w przeciwie\u0144stwie do tych zawartych w pliku <strong>.htaccess<\/strong> gdzie r\u00f3wnie\u017c mo\u017cna przyk\u0142adowo okre\u015bli\u0107 mo\u017cliwo\u015b\u0107 dost\u0119pu lub zablokowa\u0107 go dla wybranych robot\u00f3w. Plik\u00a0<strong>robots.txt<\/strong> u\u0142atwia t\u0119 kwesti\u0119, eliminuj\u0105c jednocze\u015bnie ryzyko zablokowania dost\u0119pu u\u017cytkownikom odwiedzaj\u0105cym Twoj\u0105 stron\u0119 WWW.<\/p>\n<p>Oczywi\u015bcie to przy za\u0142o\u017ceniu, \u017ce dane roboty indeksuj\u0105ce, kt\u00f3re odwiedzaj\u0105 Twoj\u0105 stron\u0119, odczytuj\u0105 i respektuj\u0105 zawarte w tym pliku regu\u0142y.<br \/>\n<a href=\"http:\/\/dhosting.pl\/pomoc\/baza-wiedzy\/jakimi-nazwami-agentow-identyfikuja-sie-popularne-serwisy-i-wyszukiwarki\/\">TUTAJ<\/a> znajdziesz list\u0119 popularnych bot\u00f3w wraz z informacj\u0105 jakimi nazwami agent\u00f3w si\u0119 identyfikuj\u0105.<\/p>\n<h3>Przyk\u0142adowa sk\u0142adnia<\/h3>\n<pre class=\"line-numbers\"><code class=\"language-php\" data-line=\"\">User-agent: [nazwa agenta]\nDisallow: [\u015acie\u017cka URL, kt\u00f3ra nie ma by\u0107 skanowana]\n\nUser-agent: [nazwa agenta]\nAllow: [\u015acie\u017cka URL, kt\u00f3ra ma by\u0107 skanowana]\n\nSitemap: [URL do pliku XML zawieraj\u0105cego map\u0119 strony (Sitemap)]\n<\/code><\/pre>\n<h3>Gdzie powiniene\u015b zamie\u015bci\u0107 plik robotx.txt?<\/h3>\n<p>Plik ten powinien znale\u017a\u0107 si\u0119 w g\u0142\u00f3wnym katalogu Twojej strony WWW, a wi\u0119c domy\u015blnie po po\u0142\u0105czeniu si\u0119 z serwerem FTP b\u0119dzie to \u015bcie\u017cka o postaci: <strong>nazwadomeny\/public_html<\/strong><\/p>\n<p>Informacj\u0119 w jaki spos\u00f3b po\u0142\u0105czy\u0107 si\u0119 z serwerem FTP aby utworzy\u0107 lub wgra\u0107 przygotowany wcze\u015bniej plik na przyk\u0142adzie klienta <strong><em>\u201eWinSCP\u201d<\/em><\/strong>, znajdziesz <a href=\"http:\/\/dhosting.pl\/pomoc\/baza-wiedzy\/konfiguracja-programu-winscp\/\">TUTAJ<\/a>.<\/p>\n<p>Poni\u017cej przedstawiamy jedn\u0105 z zalecanych konstrukcji pliku <strong>robots.txt<\/strong> z przeznaczeniem dla stron WWW opartych o <strong><em>\u201eWordPress\u201d<\/em><\/strong>.<\/p>\n<pre class=\"line-numbers\"><code class=\"language-php\" data-line=\"\">User-Agent: *\nAllow: \/wp-content\/uploads\/\nDisallow: \/wp-content\/plugins\/\nDisallow: \/wp-admin\/\nDisallow: \/readme.html\nDisallow: \/refer\/\n\nSitemap: http:\/\/www.twojadomena.pl\/post-sitemap.xml\nSitemap: http:\/\/www.twojadomena.pl\/page-sitemap.xml\n<\/code><\/pre>\n<p>Jak zapewne zwr\u00f3ci\u0142e\u015b uwag\u0119, na ko\u0144cu plik zawiera adresy do tzw. map stron, a konkretniej bazuj\u0105c na przyk\u0142adzie do mapy post\u00f3w (wpis\u00f3w) oraz stron dla serwisu WWW opartego o <strong><em>\u201eWordPress\u201d\u00a0<\/em><\/strong>&#8211; <a href=\"http:\/\/dhosting.pl\/pomoc\/baza-wiedzy\/jak-wygenerowac-mape-strony-sitemap-korzystajac-z-cms-wordpress\/\">TUTAJ<\/a> znajdziesz wi\u0119cej informacji jakiej wtyczki u\u017cy\u0107 aby wygenerowa\u0107 map\u0119 strony.<\/p>\n","protected":false},"author":6,"featured_media":10957,"parent":0,"menu_order":0,"template":"","format":"standard","manualknowledgebasecat":[95,109],"manual_kb_tag":[655,1687,1684,3517,1685,1683,1686,3516],"class_list":["post-6684","manual_kb","type-manual_kb","status-publish","format-standard","has-post-thumbnail","hentry","manualknowledgebasecat-hosting","manualknowledgebasecat-strony-www","manual_kb_tag-hosting","manual_kb_tag-jak-korzystac-z-pliku-robots-txt","manual_kb_tag-plik-robots","manual_kb_tag-polski-hosting","manual_kb_tag-reguly-w-pliku-robots","manual_kb_tag-robots-txt","manual_kb_tag-roboty-indeksujace","manual_kb_tag-web-hosting"],"_links":{"self":[{"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/manual_kb\/6684","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/manual_kb"}],"about":[{"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/types\/manual_kb"}],"author":[{"embeddable":true,"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/users\/6"}],"version-history":[{"count":0,"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/manual_kb\/6684\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/media\/10957"}],"wp:attachment":[{"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/media?parent=6684"}],"wp:term":[{"taxonomy":"manualknowledgebasecat","embeddable":true,"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/manualknowledgebasecat?post=6684"},{"taxonomy":"manual_kb_tag","embeddable":true,"href":"https:\/\/dhosting.pl\/pomoc\/wp-json\/wp\/v2\/manual_kb_tag?post=6684"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}