አብዛኛዎቹ ልምድ ያላቸው ጦማሪያን በትክክል robots.txt ምን እንደሆነ እና ለምን ይህን ፋይል እንደፈለጉ ያውቃሉ ፡፡ ነገር ግን ጥቂት ደራሲያን ወዲያውኑ በዎርድፕረስ ላይ ብሎግ ከጫኑ በኋላ የ robots.txt ፋይልን ለመፍጠር ይቸኩላሉ ፡፡
Robots.txt በጣቢያዎ ስርወ ማውጫ ላይ የተጫነ የጽሑፍ ፋይል ሲሆን ለዓሳሪዎች መመሪያዎችን የያዘ ነው። የአጠቃቀሙ ዋና ዓላማ በጣቢያው ላይ የነጠላ ገጾችን እና ክፍሎችን ማውጫ መከልከል ነው ፡፡ ሆኖም ፣ robots.txt ን በመጠቀም ትክክለኛውን የጎራ መስተዋት መግለፅ ፣ ለጣቢያ ካርታው የሚወስደውን መንገድ እና የመሳሰሉትን መወሰን ይችላሉ ፡፡
አብዛኛዎቹ ዘመናዊ የፍለጋ ሞተሮች ታዋቂውን CMS በጥሩ ሁኔታ ለማሰስ የተማሩ ሲሆን አብዛኛውን ጊዜ ለዚህ ያልታሰበ ይዘት ለመጥቀስ አይሞክሩም ፡፡ ለምሳሌ ፣ Google በቀጥታ በ ‹robots.txt› ውስጥ ባይገልፁም የ WordPress ጦማር አስተዳዳሪዎን አካባቢ መረጃ ጠቋሚ አያደርግም ፡፡ ሆኖም ፣ በአንዳንድ ሁኔታዎች ቀጥተኛ እገዳዎችን መጠቀም አሁንም ጠቃሚ ሊሆን ይችላል ፡፡ እና እኛ በዋነኝነት የምንናገረው ስለ የተባዛ ይዘት መከልከል ነው ፡፡
አንዳንድ የድር አስተዳዳሪዎች ይዘታቸው በከፊል የዋናውን ገጽ ይዘት ስለሚባዛ የምድብ እና የመለያ ገጾችን ማውጫ ማውጣትን እስከ መከልከል ደርሰዋል ፡፡ ግን አብዛኛዎቹ የጽሑፍ ይዘትን ሙሉ በሙሉ የሚያባዙ እና በጭራሽ ለፍለጋ ሞተሮች የማይፈለጉ የመመለሻ እና የመመገቢያ ገጾችን ማገድ ላይ የተገደቡ ናቸው ፡፡ እንዲህ ዓይነቱ ጥንቃቄ የጣቢያውን ውጤት ‹ንፁህ› ከማድረግ ባለፈ በተለይ አዲሱን የጉግል ፓንዳ ስልተ ቀመር ከወጣ በኋላ ሊኖሩ ከሚችሉ የፍለጋ ማጣሪያዎች ያድንዎታል ፡፡
ለ robots.txt ፋይል የሚመከሩ መመሪያዎች እነሆ (ለማንኛውም የ WordPress ብሎግ ማለት ይቻላል ይሠራል)
የተጠቃሚ-ወኪል: * አይፍቀዱ: /wp-login.php አይፍቀዱ: /wp-register.php አይፍቀዱ: / xmlrpc.php አይፍቀዱ: / wp-admin አልፍቀድ: / wp-ያካትታል አልተፈቀደም: / wp-content / ተሰኪዎች አልተፈቀደም: / wp-content / cache አልተፈቀደም: / wp-content / ገጽታዎች አልፈቀድም: / trackback / አልፍቀድ: / feed / አልፍቀድ: * / trackback / አልፍቀድ: * / feed /
እባክዎን ያስተውሉ በ robots.txt ውስጥ የአስተዳደር አቃፊዎች wp-admin እና wp-ያካትታሉ ለማውረድ ሙሉ በሙሉ ዝግ ናቸው ፡፡ የ wp- ይዘቱ አቃፊ በመጠቆም ከብሎግዎ የሚመጡትን ሁሉንም ምስሎች የያዘውን የሰቀላዎችን ማውጫ ስለሚይዝ በከፊል የተዘጋ ነው።
ማድረግ ያለብዎት መመሪያዎችን ከላይ ከተጠቀሰው ኮድ መገልበጥ ነው (እያንዳንዱ መመሪያ በአዲስ መስመር ላይ መፃፍ እንዳለበት ልብ ይበሉ) ፣ ሮቦት.ቲፕት በተባለው የጽሑፍ ፋይል ላይ ያስቀምጡ እና ወደ ጣቢያዎ ዋና ማውጫ ይስቀሉ ፡፡
Robots.txt በ Google Webmaster መሳሪያዎች እና በ Yandex Webmaster በይነገጾች በኩል በትክክል እየሰራ መሆኑን ማረጋገጥ ይችላሉ።
