SEO - parametrs Robot txt
https://sitechecker.pro/ru/robots-tester/