Analizează fișierul `robots.txt` pentru erori de sintaxă și testează regulile de blocare pentru orice URL.
Folosim cookie-uri pentru a imbunatati experienta de navigare, a analiza traficul site-ului si a personaliza continutul. Afla mai mult