При гет запросе выходит ответ <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">

[AndreyAAA]

При гет запросе выходит ответ <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
Делаю гет запрос, ответ такой, как будто я робот и не авторизован, но я заголовки загружаю из профиля.
При том что там почему то получается иногда. Что не так?

 

[Sergodjan]

При гет запросе выходит ответ <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
Делаю гет запрос, ответ такой, как будто я робот и не авторизован, но я заголовки загружаю из профиля.
При том что там почему то получается иногда. Что не так?

Это не сигнал о том что подозревается, что работает робот, это стандартные мета-теги.
https://htmlweb.ru/analiz/meta-robots.php

 

[AndreyAAA]

Это не сигнал о том что подозревается, что работает робот, это стандартные мета-теги.
https://htmlweb.ru/analiz/meta-robots.php

Да я знаю что это за мета теги, но просто кроме их больше ничего в дом не приходит, нету остального.
А если правильно все, то там в доме много всего есть. Т.е. один раз только эти теги, другой раз весь код.