Robots.txt Nedir?
Robots.txt, robot engelleme standardıdır. Bot (web böceği veya web örümceği) yazılımların web sunucularının kamuya açık bölümlerinin tamamına veya bir kısmına erişimini engellemek için kullanılır.
Robots.txt Dosyası Nasıl Oluşturulur?
Robots.txt hakkında çok fazla ayrıntıya girerek kafanızı karıştırmak istemiyorum.
MyBB Google SEO eklentisinin robots.txt dosyasını güncel MyBB yapısına düzenleyerek sizler için hazırladım.
Robots.txt dosya içeriği;
Code:
User-Agent: *
Disallow: /captcha.php
Disallow: /editpost.php
Disallow: /misc.php
Disallow: /modcp.php
Disallow: /moderation.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /printthread.php
Disallow: /private.php
Disallow: /ratethread.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /search.php
Disallow: /sendthread.php
Disallow: /task.php
Disallow: /usercp.php
Disallow: /calendar.php
Disallow: /*action=emailuser*
Disallow: /*action=nextnewest*
Disallow: /*action=nextoldest*
Disallow: /*year=*
Disallow: /*action=weekview*
Disallow: /*action=nextnewest*
Disallow: /*action=nextoldest*
Disallow: /*sort=*
Disallow: /*order=*
Disallow: /*mode=*
Disallow: /*datecut=*
Allow: /robots.txt adında bir dosya oluşturabilir ya da aşağıdan hazır halini indirebilirsiniz.Hazır robots.txt dosyası;
Robots.txt Dosyasını Yüklemek
Oluşturduğunuz ya da indirdiğiniz robots.txt dosyasını FTP (FileZilla, Cute FTP, vb.) programı ile MyBB yazılımının kurulu olduğu dizine yükleyin.
İşlem tamamdır 👌
(Geri bildirim için yorum yapabilirsiniz.)