İnformasiya Təhlükəsizliyi, Ümumi

Robots.txt nədir?

Salamlar… Bu yazıda mən robots.txt nədir? Sadə robots.txt faylını necə hazırlamaq olar onları göstərəcəm. Bu script saytınıza daxil olan axtarış motorları üçün bir növ bələdçi rolu oynayır, yəni axtarış motorlarına haraları indeksliyə, haraları indeksliyə bilməzlər onu bildirir. Saytınızı ziyarət edən google spiderləri və digər botlar ilk olaraq saytda bu faylı axtararlar yəni ilk öncə bunun içinə baxarlar. Əgər saytınızda belə…

Continue Reading