የጣቢያዎችን ማውጫ በፍለጋ ሞተሮች ለማስተዳደር ከሚያስችሉት መሳሪያዎች መካከል አንዱ የ robots.txt ፋይል ነው ፡፡ በዋናነት ጥቅም ላይ የሚውለው የተወሰኑ ወይም የተወሰኑ ሮቦቶችን የተወሰኑ የገጽ ቡድኖችን ይዘት እንዳያወርድ ለመከላከል ነው ፡፡ ይህ በፍለጋ ሞተር ውጤቶች ውስጥ “ቆሻሻን” ለማስወገድ ያስችልዎታል እና በአንዳንድ ሁኔታዎች የሀብቱን ደረጃ በከፍተኛ ሁኔታ ያሻሽላል። ለስኬታማ ትግበራ ትክክለኛውን የ robots.txt ፋይል ማግኘቱ አስፈላጊ ነው ፡፡
አስፈላጊ
የጽሑፍ አርታኢ
መመሪያዎች
ደረጃ 1
ለየት ያሉ የማግለል ሕጎች የሚዘጋጁባቸው የሮቦቶች ዝርዝር ያዘጋጁ ወይም የተራዘመውን የሮቦት. Txt ደረጃ መመሪያ እንዲሁም መደበኛ ያልሆኑ እና ልዩ መመሪያዎችን (የአንድ የተወሰነ የፍለጋ ሞተር ማራዘሚያዎች) ጥቅም ላይ የሚውሉ ይሆናሉ። በተመረጡት ሮቦቶች የተላኩ የኤችቲቲፒ ጥያቄ ራስጌዎች የተጠቃሚ ወኪል መስኮች እሴቶች ወደዚህ ጣቢያ ያስገቡ ፡፡ የሮቦቶች ስሞች እንዲሁ በፍለጋ ሞተር ጣቢያዎች ማጣቀሻ ክፍሎች ውስጥ ይገኛሉ ፡፡
ደረጃ 2
በመጀመሪያ ደረጃ በተጠናቀረው ዝርዝር ውስጥ ለእያንዳንዱ ሮቦቶች መዳረሻ ሊከለከልባቸው የሚገቡ የጣቢያ ሀብቶች ዩአርኤሎችን ይምረጡ ፡፡ ለሁሉም ሌሎች ሮቦቶች (ያልተወሰነ የማውጫ ቦቶች ስብስብ) ተመሳሳይ ክዋኔ ያከናውኑ ፡፡ በሌላ አገላለጽ ውጤቱ ከጣቢያው ክፍሎች ፣ ከገጾች ቡድኖች ወይም ከማውጫ ማውጫ የተከለከሉ የመገናኛ ብዙኃን ምንጮች አገናኞችን የያዙ በርካታ ዝርዝሮች መሆን አለበት ፡፡ እያንዳንዱ ዝርዝር ከሌላ ሮቦት ጋር መዛመድ አለበት። እንዲሁም ለሁሉም ሌሎች ቦቶች የተከለከሉ ዩ.አር.ኤል.ዎች ዝርዝር መኖር አለበት። የጣቢያውን አመክንዮአዊ አወቃቀር በአገልጋዩ ላይ ካለው የውሂብ አከባቢ ጋር በማነፃፀር እንዲሁም የገጾቹን ዩአርኤሎች በመመደብ መሠረት በማድረግ ዝርዝሮችን ያዘጋጁ። የእነሱ ተግባራዊ ባህሪዎች። ለምሳሌ ፣ በማንኛውም የአገልግሎት ካታሎጎች ይዘቶች (በአከባቢው የተቧደኑ) ወይም ሁሉንም የተጠቃሚ መገለጫ ገጾች ይዘቶች (በአላማ በቡድን) ማካተት ይችላሉ ፡፡
ደረጃ 3
በሁለተኛው ደረጃ ላይ በተጠናቀሩት ዝርዝሮች ውስጥ የተካተቱት ለእያንዳንዱ ሀብቶች የዩ.አር.ኤል ምልክቶችን ይምረጡ ፡፡ መደበኛ የሮቦት. Txt መመሪያዎችን እና ያልታወቁ ሮቦቶችን ብቻ በመጠቀም ለሮቦቶች ማግለል ዝርዝሮችን በሚሰሩበት ጊዜ የከፍተኛው ርዝመት ልዩ የዩ.አር.ኤል. ክፍሎችን ያደምቁ። ለቀሪዎቹ የአድራሻዎች ስብስቦች በተወሰኑ የፍለጋ ሞተሮች ዝርዝር መግለጫዎች መሠረት አብነቶችን መፍጠር ይችላሉ።
ደረጃ 4
የ robots.txt ፋይል ይፍጠሩ. የመመሪያ ቡድኖችን በእሱ ላይ ያክሉ ፣ እያንዳንዳቸው ለአንድ የተወሰነ ሮቦት ከሚከለከሉ ህጎች ስብስብ ጋር ይዛመዳሉ ፣ ዝርዝራቸው በመጀመሪያ ደረጃ ተሰብስቧል ፡፡ የኋላ ኋላ ለሁሉም ሌሎች ሮቦቶች መመሪያ ቡድን መከተል አለበት ፡፡ የተለዩ የደንብ ቡድኖች በአንድ ባዶ መስመር። እያንዳንዱ ህጎች ሮቦትን ለመለየት በተጠቃሚ-ወኪል መመሪያ መጀመር አለባቸው ፣ በመቀጠል ጠቋሚ ማውጫ ዩ.አር.ኤል. ቡድኖችን የሚከለክል የከለከል መመሪያ። በሦስተኛው ደረጃ የተገኙትን መስመሮች ከከለከሉ መመሪያዎች እሴቶች ጋር ያድርጉ ፡፡ መመሪያዎቹን እና ትርጉማቸውን ከኮሎን ጋር ለየ። የሚከተሉትን ምሳሌ እንመልከት-የተጠቃሚ ወኪል YandexDisallow: / temp / data / images / የተጠቃሚ-ወኪል: * አትፍቀድ: / temp / data / ይህ የመመሪያዎች ስብስብ ዋናውን ሮቦት ያስተምራል የ Yandex የፍለጋ ሞተር ዩ.አር.ኤልን ጠቋሚ እንዳያደርግ ነው። ይህም የመሠረቻ / ቴምፕ / ውሂብ / ምስሎችን / ይይዛል። እንዲሁም ሌሎች ሁሉም ሮቦቶች / ቴምፕ / ዳታ / የያዙ ዩአርኤሎችን ከመረጃ ጠቋሚ (ኢንዴክስ) እንዳያወጡ ያደርጋቸዋል ፡፡
ደረጃ 5
የተራዘመ መደበኛ መመሪያዎችን ወይም የተወሰኑ የፍለጋ ሞተር መመሪያዎችን በመጠቀም robots.txt ን ይሙሉ። የእነዚህ መመሪያዎች ምሳሌዎች-አስተናጋጅ ፣ የጣቢያ ካርታ ፣ የጥያቄ-ተመን ፣ የጉብኝት ጊዜ ፣ የጉዞ መዘግየት ናቸው ፡፡