indexlenmesini istemediğimiz sayfalar?
botlar tarafından indexlenmesini istemediğimiz sayfaların meta etiketlerine hangi kodu koymamız gerekiyor robots.txt dosyasına eklemeye korkuyorum deneme amaçlı ekledim programlar diğer sayfalarıda gezemedi benim indexlenmesini istemediğim sayfa url si site.com/sayfa/15.html ama bi de benim site.com/sayfas/15.html şeklinde linklerim var bu s harfinden dolayı deneme amaçlı kullandığım robot programları her iki linkide gezemedi onun için meta etiketlerine indexlemesin diye kod ekliyecem fakat tam kodu hatırlayamadım yardımcı olursanız sevinirim
|