Robots.txt

TIP#2502: Jak je možné OpenAI/Bard říci, že nesmí přistupovat k vašemu obsahu pro zahrnutí do ChatGPT/Bardu. A proč to je to ničemu

5. 9. 2023

Je to teď tak trochu módní “zakazovat” ChatGPT přístup k obsahu, aby ho nemohla použít. Udělat to jde poměrně snadno, protože OpenAI respektuje zákaz indexování v robots.txt.

TIP#672: Co je to sitemap.xml, k čemu to slouží a jak s tím mám zacházet

6. 12. 2016

Kdysi dávno jsme tu už řešili robots.txt a nástroj Google Search Console. V obou tipech je v zásadě pouze zmínka o sitemap.xml, velmi užitečném nástroji pro…

TIP#106: robots.txt? K čemu něco takového je? A proč je to užitečné?

16. 4. 2015

Věc jménem robots.txt budete potřebovat, pokud provozujete web či blog. Je to soubor, který říká robotům (hlavně vyhledávačům) jak mají zacházet s vašim webem při procházení…