WEB и SEO

О том как правильно настроить Robots.txt в современных реалиях и не запороть свой сайт. Обзор синтаксиса, основных и устаревших директив, а также практика заполнения.