Back to Question Center
0

Semalt semua robot robots.txt

1 answers:

Di robot saya Source - commercial appraisals. Saya memiliki daftar robot yang tidak diizinkan untuk diindeks di situs saya dan selebihnya saya harus mengizinkan semua robot lainnya, namun saya ingin mengetahui perbedaan nyata antara kedua peraturan ini:

     Agen pengguna: *
Melarang:    

dan ini:

     Agen pengguna: *
Izinkan: /    
February 13, 2018