Jak Zablokować Robota Ahrefs Przed Indeksowaniem Strony

[btsy]

Witam,

Próbuje zablokować dostęp do strony robotowi ahrefs i w żaden sposób nie idzie go zablokować.

W HEAD mam tak

Kod: Zaznacz cały

<meta name="Robots" content="nofollow, noindex" />

. W pliku TXT Robots mam tak

Kod: Zaznacz cały

User-Agent: AhrefsBot
Disallow: /

a w pliku .htaccess mam tak

Kod: Zaznacz cały

Order Deny,Allow
Deny from AhrefsBot
Allow from all

mimo tego dalej widać że robot wchodzi na stronę

Adres IP: 188.165.15.97, Host: (boson065.ahrefs.com)

. Jak jeszcze mogę zablokować robota żeby nie indeksował strony?.

Co jest nie tak zrobione że pomimo zdeklarowania braku indeksowania strona jest nadal indeksowana przez roboty?.

[rkd77]

btsy, to nie jest strona hostowana na cba?

[btsy]

Póki co strona jeszcze nie jest hostowana na CBA ale przed przeniesieniem jej chcę ogarnąć sprawę z indeksowaniem strony przez roboty ale póki co nie bardzo mi to wychodzi i nadal roboty indeksują stronę.