فایل Robots.txt چیست

??????? ?? ????? ?? ????????? ???????? ???????? ????? ?????????? ??? ???? ???? ????? ???? ?? ???? ?? ???????? ????? ?? ???? ???????. ???? ?? ????? ???????? ???? ? ??????????? ???? ?? ??? ?????? ???????? ??????? ? ????? ????? ????? ???? ???. ?????????? ???? ?????? ?????? ? ??????? ??? ??????? ?? ????? ???? ? ????? ?? ???????????? ???? ?????? ???????.

??? ??? ??????? ?? ?? ???? ?? ???????? ??????? ?????? ???? ???????? ???? ??????? ?????? ??? ??????? ?? ????? ?? ????? ???? ?? ??????? ?? ????? ???? ?? ?? ????? ?????? ???? ?????? ???? ??? ????? ?????? ???? ? ?? ??? ??? ?????????? ??? ? ????? ???? ????. ??? ?????? ??????? ?? ?? ???? ???? ????? ?? Robots.txt ??? ?? ?? ??? ?? ? ??? ??????? ??? ?? ??????? ?????? ?????? ?? ???? ????? ?????? ?? ????????? ???? ???????? ????? ?? ????? ???.

????? ? ?????????? ??? ???? ???????? ??? ????? ????? ?? ?????? ???? ???????? ??? ????? ???? ? ???? ?????? ???????? ? ??????? ?? ??? ?? ??? ???? ??? ?? ????? ???? ???? ??? ?? ????? ????? ???? ???. ?? ?? ??? ????? ??? ????? ?? ??? ?? ?? ????? ???????? Robots.txt ???? ???? ? ????? ????? ???? ????? ???? ??? ?????? ???? ?? ????????? ??? ?? ??? ????? ????.

???? Robots.txt ?????

?? Robots.txt ?????? ?? ???? ???? ???? ??? ?? ?? ???? ???? ???? ???? ??? ?? ??? ????????? (Root Directory) ???? ???????. ?? ????? ????? ??? ???? ????? ??????? ???? ?????? ? ??????? ????? ??? ???? ?????? ??????? ?? ?? ?????? ???????? ??????? ??? ?? (Web Crawlers) ?? ?? ??? ???????? ????? ?? ????? ????? ? ??? ??????? ??????? ????? ??? ??? ???????.

?? ??? ???????? ??? ?? ??? ????? ??? ????????? ?? ???????? ???????? ????? ?????? ?? ???? ?????? ???? ??????? ? ???? ??????? ???? ??? ?? ???? ? ????? ?? ?????? ???? ? ???? ????? ?? ?????? ??????. ?? ????? ????? ????? ???? ?? ???????? ???????? ????? ?? ?? ?????? ???????? ???? ???? Robots.txt ???. ?? ??? ???????? ?? ??? ????? ??????? ??? ?? ???? ?? ????? ????? ? ???? ???? ??? ???? ???? ?? ??????? ???? ?????? ?? ???? ????.

??????? ?? ???? ??? ??? ???? ???? ?? ??? ???? ???? ??? ???? ?????. ?? ??? ???? ???? ?????? ?? ??? ???? ?? ???? ??? ????? ??? :

www.YourWebsite.com/robots.txt

??? ???? ??? ???? robots.txt ?? ?????? ???? ?? ?????? ????????

??? ??? ???? ?? ???? ???? ??? ????? ???? ????? ??????? ? ???????? ???????? ????? ????? ?????? ?? ???? ????? ????? ?? ?????? ???? ? ???? ????? ?? ???? ?????? ???? ??? ?? ?????? ????.

??? ???? robots.txt ?? ????? ???? ? ????? ???? ?? ???????

????? ??? ???? ????? ?? ??? ???? ????? ????. ??? ???? ????? ?? ???? ????????? ? ???? ????? ???? ???? ? ?? ??????? ? ??????? ???? ?? ???? ?? ??????? ??????? ???????? ???????? ????? ?????? ?? ?????? ?? ??????? ???? ??? ????? ???? ? ????????? ????? ?? ?????? ????. ?? ????? ????? ??????? ??? ????? ????? ????? ??????? ?? ????? ???? ? ????? ?? ?? ????? ?? ?? ???? ???? ???? ??? ???? ?????? ???? ?????. ?? ??? ??? ???? ????? ?? ????? ????? ??? ???? ????? ? ?????? ???? ???? ??????? ???? ????? ?????? ???.

???? ?? ???????? ????? ??????? ?? robots.txt

?? ?? ??? ??? ???? ??????? ?????? ???????? ????? ?? ?????? ???

????? ???? ?????? ??????? ???????? ????? ?? ?????? ??????? ? ?????? ??????? ??????? ????????? ???? ??????? ?? ???? robots.txt ???.

??? ???? ??? ??? ???? ??? ???? ??? ?? ??? ???? ???? ?? ????? ?? ??????? ?? ?????? ?????? ?? ???? ???? ??? ?? ?? ?????? ?? ?????? ?????? ??? ? ????? ??? ?? ???? ?? ???? ?? ?? ???? ?? ???????? ????? ???????? ????? ???????? ?? ????? ????? ????.

?? ????? ???? ???? ?? ??????? ??? ?????? ????? ??? ?? ????? ???? ?? ??????? ?? ???? ??? ?????? ??? ? ????? ?????. ??? ???? ???? ??? ?? ???? ???? ??????? ???? ?? ?????? ???????? ????? ?? ??? ??? ? ?? ???? ??????? ???? ?? ????? ????? ?? ?? ???? ????? ???? ?????? ????. ?? ??? ???? ??????? ?? ??? ???? Robots.txt ?????? ???????? ????? ?? ??? ????? ?? ??????? ?? ????? ???.

?? ???????? ??????? ?? ??? ?????? ???????? ?????? ???? ????????? ?? ???? ???????? ????? ?????. ???? ?? ??? ??????? ????? ?????? ?? ?????? ???????? ?? ?? ???????? ???????? ????? ???????? ? ?? ??? ?? ??????? ????? ?????? ?? ?? ??????? ??????? ???????. ??? ??? ?????? ??? ??????? ???? ??????? ??????? ????? ??? ??????? ?? ???? ????? ?????? ????????? ?? ???? ???? ? ?????? ??? ?? ?? ???????? ????? ?? ??? ???????? ???? ????? ????? ?? ???? ???????? ? ?????? ?? ??? ???? ??? ????????????? ????? ??.

?? ??? ??????? ?? ???? robots.txt ???????? ?? ??? ?????? ????? ???? ???? ????

??????????? ???? ?? ???? ??????????? ???????? ? ????? ?????? ?????? ??? ???? ???????? ??????? ?? ??? ???????? ????? ???? ?????? ? ????? ???? ????????. ?? ???? ?? ?? ?????? ????? (Crawler) ?? ?? ?????? ?????????? (????? ? ??? ??????) ????? ?? ???????? ??????? ?? ??????? ??????. ??? ?????? ???? ????? ???? ??????? ???? ??? ???. ???? ??? ???? ?? ???? ?????? ???? ?? ?????? ???? ???? ?? ????? ? ???????? ??????? ?? ???? ??? ??????? ? ?? ??? ????? ?????? ????? ???? ??? ? ???? ???????? ??????? ?? ???? ???????? ?????????? ???? ????? ????.

???????? ?? ??? ? ??? ??? ??? ?? ??????? ???????? ?? ?? ???? ????? ?????? ??? ???? ?? ?? ????? ???????? ????? ???. ????? ????? ??? ????? ???? ????????? ?? ?????? ????? ????? ????? ???? ?? ??? ?????? ??? ???? ???????? ???????? ?? ?? ???? ??? ???? ?????? ?????? ?????? ?? ??? ?????? ????? ?? ???? ????? ????? ??? ?????? ???? ??? ??????? ??? ???? ??? ???????? ????.

?? ??? ????? ???? ????????? ?? ????? ? ?? ??????? ?? robots.txt ?????? ???????? ???????? ????? ?? ?? ??????? ????? ? ???? ?????? ?? ????? ?????? ???? ??? ? ??? ???? ?? ???????? ????? ?????? ?? ????? ???????. ?? ??? ???? ?? ???? ???? ???? ?? ?????? ??????? ?????? ????? ???? ???? ????? ????? ? ???????? ??????? ? ??? ?????? ???? ????? ???? ??????? ??? ?? ????? ????? ????? ??????? ????? ??.

?? ??????? ?? ???? robots.txt ???????? ?? ?????? ??????? ??????? ????

?? ???? ?????? ??????? ?? robots.txt ????? ?????? ??????? ? ???? ????? (URL) ???. ?? ??? ??? ???????? ?? ????? ????????? ???? ????? ?? URL Cloacking ???? ????. ??? ??? ?????? ???? ????? ??? ???? ????? ???? ???? ????? ?? ??? ??????? ? ?? ???????? ????? ???. ?? ??? robots.txt ??????? ??? ??? ??????? ?? ?????? ???? ? ???? ????? ?? ????? ???.

??????? ?????? ??? ???? ?? ??????? ?? ???????? ????? ?? ??? “????? ?????? ?? ????” ?? “Affiliate Marketing” ???????. ?? ??? ????? ??? ????????? ???????? ????? ??? ?? ????? Affiliate ?? ?? ????? Affiliate Links ?????? ??????? ?? ?????? ???? ? ???? ????? ?? ???? ???? ?? ??????? ?? ???? ????? ?? ???? ??? ????? ????.

???? ???? ?? ??? ????? ??? ???? ???? ????? ??????? ????? ???. ????? URL Cloacking ??? ?? ????????? ???? ???? ???? ??? ? ?? ????? ?? ?? ????? ?? ?? ?????????? ?????? ???? ?? ??? ?????? ???????? ????? ??? ? ???? ????????? ???? ?????? ??.

???? robots.txt ????? ??? ???????

???? robots.txt ?? ???? ???? ?? ??????? ???? ???. ???? ?????? ??? ???? ?? ??? ??????? ??????? ? ????? ????? ????? ?? ??? ????? ??? ???. ?? ???? ???????? ? ????????? ??? ??????? ?????? ??? User-agent ? Disallow ? Allow ? Crawl-delay ? Sitemap ???????? ?? ?? ????? ?? ???? ??????? ???? ?? ??? ????? ?? ?? ?????? ????? ??? ???????.

User-agent: ??? ????? ???? ???? ???? ??????? ? ???????? ??? ?? ????? ?????? ?? ??????? ???? ?? ????? ????? ?? ???. ?? ??? ?????????? ??????? ?? ???? ??????? ?????? ??? ? ?? ?? ????? ???? ??? ????? ???? ??? ?? ?? ???? ?????????? ????? ?? ??? ?? ????? ???.

????: ?? ???? ???? ???? ??? ??? ? ??? ????? ? ???????? ??????? ?? ?? ???? ??? ???? ???? www.example.com/test.html ?? ????. ??? ???? ??? ?? ????? ??? ???? ?? ???? ????? ???? ???? ????? ???? robots.txt ?? ?? ??????. ???? ???? ??????? ???? ??? ???? ?? ???? ??? ???:

User-agent: *

User-agent: * ?? ??? ???? ??? ?? ???? ??????? ??? ???? ???? ????? ???? ???? ??????? ? ??????? ???????? ????? ???. ??? ??? ??? ??? ?? ????? ?? ??????? ??? ?? ??? ???? ?? ???? ??? ????? ???? ???? ??? ???? ?? ???? ?? ?? ??? ????? ???????? ????.

?? ???? ??? ??? ????. ?? ??? ???? ??? ???? ???? ?? ?????? ?? ????? ???? ?? ???? :

User-agent: Googlebot

Disallow ? Allow: ?? ??? ??? ?????????? ??????? ?? User-agent ?? ???? ???????? ????? ??? ???? ??? ?? ???? ??????? ???? ?? ????? ? ?????? ???? ?? ?????. ??????? ?? ???? ???? ?? Allow ?? ????? ????? ?????? ? ?? Disallow ?? ????? ????????? ?????? ??????? ??????? ???????.

????: ??? ??? ????? “Disallow: /” ?? ?? ???? robots.txt ??? ???? ?????? ?? ??? ??? ?? ??????? ????? ??????? ?? ????? ????? ??? ??????? ?? ??? ???? ?? ??????? ????? ?? ?????? ????. ?????? ??? ????????? ?? ??? ????? ?????? ???? ???? ????? ???? ?? ?????  “Allow: /” ??????? ????.

??? ????????? ???????? ??????? ??????? ? ????? ???? ??? ???? ??? ?? ?? ????? ????? ??????? ????? ???? ?? ??? ??? ?????? ???? ?????? ????? ?? ?????. ?? ????? ???? ??? ??? ????:

Disallow: /wp-admin/

Allow: /contact/

??? ???? ????? ???? ????? ?? ??? ??????? ?????? ???? ?????? ??????? ????? ??? ??? ??? ???? Contact ?? ???? ???? ?????? ?? ?? ???? ????? ???. ?? ???? ???? ??????? ???? ???? ? ???? ??? ??? ????????? ?? ?????? ???.

?????????? ???? ?? ??? ????????????? :

Crawl-delay: ??? ???? ????? ?? ?? ??? ?????????? Crawl-delay ?? ??? ?????? ???????? ???????? ????? ?? ????? ???? ?? ???? ????? ? ?????? ???? ????? ??? ?? ????? ?? ????? ???? ???? ??? ???? ??? ??? ????. ????? ???? ??? ??? ?? ??? ?????????? ??? ???? ?? ??????? ?? ???? ??????? ????? ???? ???? ?? Googlebot ???? ??????? ????. ???? ????? ??? ?????? ?? ?? ???? ???? ??? ???? ????? ????????? ?? ????? ?????? ???? (Google Search Console) ??? ???? ????? ?? ??? ???? ?? ???? ???? ???? ?? ??? ??????? ???? (Site Settings) ????? ????.

??? ?? ??? ??? ???? ????? ??????????? ????? ??????? ?? ???? ???? ??? ???. ???? ?????? ?? ????? ????????? ?????? ??? ??? ????? ??????. ???? ??????? ?? ??? ????? ????????? ?? ???? ???? robots.txt ??? ??? ?? ???? ???? :

crawl-delay: 10

?? ???? ???? ??? ?? ?? robots.txt ??? ?????? ?? ???????? ???????? ??????? ????? Yahoo ? Bing ????? ??????? ?? ??? ?? ?? ?? ??????? ?? ????? ??? ???? ? ?????? ???? ????? ?? ?????? ????. ??? ?? ???? ????? ?????? Yandex ?? ??? ????? ??? ??????. ?? ??? ??? ????? ?? robots.txt ????? ?????? Yandex ?? ?? ????? ?? ??? ?? ?? ????? ???? ?????? ???? ????? ???. ?? ????? ??? ?? ?? ???? ?????? ????????? ??? ???? ?????? ?? ?? ?? ???? ????.

????: ???? ???? ?? ??????? ?? ?????????? crawl-delay ???? ??? ?? ??? ????? ????? ????? ?? ????? ?????? ????. ?? ????? ???? ??? ??? ??? ????? ??????? ?? ??? ?? ????? ???? ????? ???????? ????? ?? ???? ?????? ????????? ??? ????? ?? ???? ???? ?? ???? ??? ?? ????? ? ?????? ????. ????? ??? ????? ???? ???????? ?? ????? ???? ????? ??? ????? ??? ???? ????????? ?? ????? ???? ? ?????? ?????? ????? ????? ?????? ????????. ???????? ??? ?? ??????? ?? ??? ???? ?? ??? ????? ??? ???? ?? ????? ?????.

Sitemap: ?? ????? ????? ????? ?? ???? ???? ?? robots.txt ????????? ?? ???????? ????? ???????? ?? ???? XML ???? ???? ??? ?? ?? ?? ????? ???? ???? ? ?? ?? ?????? ????? ?????. ????? ???? ??? ???? ???? ???? ?? ???????? ????? ???????? ??????? ???? ???? ????? ??? ??? ??? ??? ??? ?? ??????? ???? ? ?? ????? ???? ??? ????? ???. ????? ??? ?? ??????? ??????? ?? ???????? ???????? ???????? ????? ??? Google Webmaster Tools ?????? ????? ?????? ????? ????. ??? ??? ????? ?? ?????? ??? ??????? ?????? ?????? ?? ?????? ??? ?? ?? ???? robots.txt ????? ???? :

Sitemap: https://example.com/sitemap.xml

??????? ?? ??????? ???? ??? ????? ????? ???? ???? ???? ???? ??? ?? ?? ???? ???? ?? ??? ???? ???? ????.

???? ????? ???: ?????? ???? robots.txt ?? ????? ?? ????? ???? ???? ???. ???? ???? ??? ??? ?? Disallow: /File.php ?? ?? ??? ???? ???? ??? ?? ????? ?? ????? ?? ????? File.php ?? ?? ???? ???? ????? ???? ??????? ??? ?? ????? ??????? ??? ??? ???? ???? ??? ??? ?? ??? file.php ????? ??? ????? ??? ???????? ??? ?? ???? ?????? ????. ?????? ???? ??? ??? ?? ??? ??? ???? robots.txt ??? ?? ????? ? ????? ???? ???? ???. ??? ???? ????? ???? ?? ???? ???? ? ?????? ?? ???? robots.txt ????? ???.

???? ?? ???? robots.txt ???????

??? ?? ???? ??? ????? ??? ????? ???? ?? ??? ?? ??? ???? ????? ?? ???? ???? ??? ????? ???? ????. ???? ????? ?? ??? ???? ???? ????? ?????? ???? ???? ??? ?? ???? ???? ? ?? ?????? ?? /robots.txt ?? ???? ???? ? ????? ?????.

???? ?? ??? ????: www.Modireweb.com/robots.txt

??? ?? ???? ??? ???? ??? ???? ?? ???? ??? ????? ???? ???? ???? ????? ????? ???? ???. ??? ?? ????? ?? ??? ?? ???? ??? ?? ??? ???? ?? ????? User-agent ? … ????? ????? ???? ???? ??? ??? ???? ?? ????. ?? ??? ???? ???? ?? ???? FTP ? ?? ????? ??? ???? ???? ???? ?? ???? ?????? ???? ???? ? ?? ??? ???? ???? ???? robots.txt ?? ???? ????. ??? ???? ?? ?? ???? ?? ???????? ???? ?????? ???? ???? ? ?? ?? ?????? ????. ?????? ????????? ??? ???? ?? ?????? ???? ? ??? ???????? ??? ?????? ???? ? ?? ????? ???? ????? ??? ?? ?? ???? ???? ??????? ????.

?????? ??? ??? ???? ?? ???? ???? ??? ???? ???? ???? ???? ?? ???? ???? txt ?? ???? Notepad ?????? ?????? ? ?? ?? ?? ??? robots (?? ???? ????) ????? ????. ??? ??????? ???? ???? ??? ?? ???? ?? ???? ???? ? ???? ?? ????? ???? ????. ?? ?????? ???? ????? ??? ?? ?? ???? ??????? ???? ??? (?? ???? FTP ?? ???? ????? ????? ??? ????) ?? ??? ???? ???? ????? ????.

???? ???? robots.txt ?????? ?? ??? ???? ? ?? ?????? ???? ?? ????? ?????

?? ???? ???? ? ?? ??? ???? ???? ???? robots.txt ? ????? ???? ??????? ???? ?? ????????? ?? ??? ???? ???? ??????? ????? ????. ??? ??? ??????? ?? ??????? ?? ????? ??? ???? robots.txt ????? ?????? ???? ???. ???????? ?????:

• ???? ??? ????? ????? ???? ???? Google Search Console ????
• ??? ??? robots.txt Tester ???? ????
• ????? Test ?? ?????? ????

??? ????? ?? ???? ???? ?????? ????? ???? ??????? Test ?? ???? ?????? Allowed ????? ???? ??????. ??? ??? ?????? ?? ???? ???? ???? ???? (?????) ???? ??? ??????? ??? ? ???? ??????.

?????? ?? ??? ??? ????? ???? ??????? ?? ?????????? ????? ??? ???????? ??. ????? ????????? ?? ??? URL Tester ???? ????? ???? ??? ?? ?????? ???? ?? ????? ???? ???? ?? ?? ????? ???? ??????? ????? ??? ?????.

?????? ??? ????? ?? ???????? ?????? ??? ??????? ?? ????????? ??????? ?? ?? ?? ???????????? ???????? ????? ????. ??? ?????? ????? ?? ?? ????? ????? ??? ??????? ?? ???? ???? ???? ?????? ?????? ??? ???? ?? ?? ?????? ???? ???? ????? ?? robots.txt ??? ???? ?? ???? ??? ??????? ????.

????? ???? ???? robots.txt Tester ?? Google Search Console

???? ?????? ????? ?????? ?? robots.txt ? ????? ???? (Allowed)

???? ????? ????? ?????? ?? robots.txt ? ??? ????? ???? (Disallowed)

???? ???? ??? ????? ?????? ??????? ???????? ???. ?????? ??? ?? ????? ??????? ? ?????? ??? ???? robots.txt ?? ??? ??? ?????? ?????? ????? ?? ?? ????? ???? (???? ??? ???? Submit) ????? ???? ?? ?? ??? ???? ????? ????. ?? ??? ??? ?? ???? ? ??? ???? ??? ????????? ???? robots.txt ?????? ??? ???? ?? ?????? ????. ??? ???? ???? ???? ?? ?? ???? ???? ?? ???? ??? ??????? ????. ??? ?? ??? ??? ?????? ?? ??? ???? ?????? ? ????? Submit ????? ?? ????? ?? ?? ???? ????? ???? ?? ???? ???? ??? ????????? ??? ???.

????? Robots.txt ?? ?????? ?? ?? ???? ????

???? ?????? ?? ?? ???? ???? ??? ???? ????? ?????? ?????? Wordpress ??? ??? ??????. ??? ??? ???? ???? ?? ?????? ?? ??? ????? ???? ???? ?? ?????? ????? ???? ?? ??? ????.

???? ???:

?? ????? ??????? ???? ?? ???? ??? ??????? ?????? ?? ???? wp-admin ?? ?? ???? ???? robots.txt ???? ?????? ??????? ????????? ????. ??? ??? ?? ????????? ?????? ?? ??? ???? ??? ????? ???? ?????? ?????. ??? ?? ?????? ?? ????? ???? ??? ??????? ??????? ?? ?? ??? ???? robots.txt ????? ???? ??? ?? ?? ?? ?? noindex ? ????? ????????? ?????? (disallow) ??????? ??? ???. ???????? ?? ??? ???? ???? ???? ?? ???? ????? ???? ??????? ??? ???? ??? ?? ???? ?????? ?? ???? ?????????? ???????? ????? ??? ??????.

???? ???:

????? ?????? ?????? Wordpress ?? ???? ??????? ?? ???? robots.txt ???? ?? ?? ??? ???? ?? ??? ???? ????? robots.txt ?? Virtual robots.txt ??? ??????. ??? ?? ??? ???? ??? ?? ??? ?????????? ?? ???? ?????? ??? ???? ?? ???? ???? ? ?? ?? ?????? ????. ???? ???? ?? ????? ??? ???? ?? ?????? ??? ??? ???? ???? ?????? ?? ?? ???????? (http://www.example.com/robots.txt) ???.

?????????????? ??????? ????? ?? ???? robots.txt ????? ?? ?????? ???? ????? ??? ??? :

User-agent: *

Disallow: /wp-admin/

Allow: /wp-admin/admin-ajax.php

?? ??? ???? ??????? ?? ???? admin-ajax.php ?????? ?????. ??? ????????? ???? ??????? ???? ??? ???? ?? ??? ??????? ????? ???? ?? ??????? ?????? ?? ???? wp-admin ???? ? ????? Search Engine Visibility ?? ???? ???? ?? ?????? ????? ??????? ?? ???? ??? ????? ???.

???? ???? ???? robots.txt ?? ?????? ?? ?????? ????

??? ???? ?? ???? ?? (??? ????? ?????? ?????? ???? robots.txt ?? ??????) ???? ???? ?? ????? ???? robots.txt ?? ?????? ??? ????? ?? ???? ???? ?? ?? ? ????? ???? ?? ?? ??? ???? ???? ???? ???? ???. ?????? ???? ?? ???? ???? ?? ??? ????? ????? ???? ?????? ?? ???? ?????? ???? ????? robots.txt ?? ??????? ??????.

???? ??? ???? robots.txt ?? ????? ?? ???

??????? ?? ??????? ?? ??????? robots.txt ?? ???? ?? ????? ??????? ?????? ? ???? ????? ???? ???? ??? ????? ?????? ??? ????? ????? ????????? ? ?? ?????? ???? ?? ?? ??? ???????? ????? ??? ????? ????. ?? ???? ????? ???? ??? ?? ?? ??? ???? ?????? ???? ? ?? ???? ?? ??? ????? ?? ???? robots.txt ????? ? ????? ?? ???????????? ??? ???? ???? :

• ??? ?? ????? ???? robots.txt ??? ?? ????? ? ??? ???? ?? ????? ???? ??? ???? ?? ???? ??? ?? ???? ?? ????? ???? ????.

• ??????? ? ???????? ??? CSS ? JS ?? ????? ?????. ?????? ????? ?? ???????? ???? ???? ?? ???? ?? ????? ?? ???? ?? ????? ? ?????? ???????. ?? ????? ??? ???? ?? ???????? CSS ? JS ? ???? ???????? ????? ?? ???? ????? ???? ??? ???? ??? ?? ???? ????? ???????? ???? ? ??? ????? ??? ???????? ???? ????? ??? ??? ? ?? ?????? ??? ???? ????? ???? ??? ????? ???? ??????.
• ??? ?? WordPress ??????? ???????? ????? ?? ????????? ???????? ????? wp-admin ? ???????? wp-include ????. ?????? ?? ???? ???????? ??? ??? ?? ?? ???? ?????? ??? ????? ??????.
• ??? ???? ??????? ??? ????? ???? ???????? ??? ????? ?????. ??????? ?????? ??? ????? ???? ????? ?? ?? ?? ??? ?? User-agent: * ??? ???? ??????? ????? ????.
• ??? ?????? ?? ???? ?? ????? ???? ??? ?? ???????? ????? ?????? ?????? ??????? ??????? ?? ????????? ??? ?? ???? ??????? ????. ????? ?? ???? ?? ????? ??? ????? ?? ???? ?? ??? ?????? ???? ??? ????? ?????.

??????????

??? robots.txt ???? ???? ?? ??????? ??? ????? ??? ?? ??????? ? ?? ?? ???? ????? ?? ?? ???? ????? ? ??? ???? ????. ??? ???? ?? ???????? ??? ?? ??? ?????? ?????? ?????? ??? ??????? ?? ????? ?????? Google Search Console ???. ?? ??? ??? ????? ???? ??????? ????????? ???? robots.txt ??? ?? ??????? ??????? ??????????? ? ????????? ????.

?????? ??????? ?????? ?? ?? ????? ?? ????????? ??? ?? ??? ???? ??????? ????. ?????? ??? ??? ??? ?? ???? ??? ?? ???? ???????? ?? ???? ???? ? ????? ?? robots.txt ???? ????. ????????????? ????? ??? ???? ????? ?? ???? ?????? ???? ??? ?? ???? ????? ????? ?????? ?????? ??? ???????? ???? ?? ?????? ??? ?????? ?????? ??????? ? ??????? ?? ???? ??? ???.

پویش #دو_درجه_کمتر