Google navrhuje změnit soubory robot.txt kvůli AI
Datum publikování: 10. 7. 2023
Google na blogu minulý týden napsal o souboru robots.txt, který vznikl před téměř 30 lety a který reguluje chování web crawlerů – robotů, kteří indexují obsah internetu pro vyhledávače.