Привет!Я начал изучать то как работают поисковые роботы яндекса и мне по заданию нужно сделать проверку на наличие директивы Host в файле robots.txt.Но я не понимаю как это сделать.Можете показать на примере как правильноэто сделать?
Сборка персонального компьютера от Artline: умный выбор для современных пользователей