ሮቦቶች.txt ጀነሬተር
ለድር ጣቢያዎ ወዲያውኑ የrobots.txt ፋይል ይፍጠሩ። የተጠቃሚ-ወኪል ደንቦችን አክል፣ ዱካዎችን ፍቀድ/አትፍቀድ፣ጎበኘ-ዘገየ እና የጣቢያ ካርታ URL። ነፃ፣ የእውነተኛ ጊዜ robots.txt ጀነሬተር።
ለድር ጣቢያዎ ወዲያውኑ የrobots.txt ፋይል ይፍጠሩ። የተጠቃሚ-ወኪል ደንቦችን አክል፣ ዱካዎችን ፍቀድ/አትፍቀድ፣ጎበኘ-ዘገየ እና የጣቢያ ካርታ URL። ነፃ፣ የእውነተኛ ጊዜ robots.txt ጀነሬተር።
robots.txt ተሳቢዎች የትኞቹን ዱካዎች ሊጎበኟቸው እንደሚችሉ እና የትኞቹን ማስወገድ እንዳለባቸው የሚነግር በድረ-ገጹ ስር የሚገኝ ግልጽ የጽሁፍ ፋይል ነው። ቅርጸቱ እ.ኤ.አ. በ 1994 ነው እና በሁሉም የፍለጋ ሞተር እና ጥሩ ባህሪ ባለው ጎብኚ ይደገፋል። ፋይሉ ጠቃሚ ነው - ተንኮል አዘል ፈላጊዎች ችላ ይሉት - ነገር ግን ህጋዊ ተሳቢዎች (Google፣ Bing፣ ወዘተ.) መመሪያዎቹን በአስተማማኝ ሁኔታ ያከብራሉ።
የተለመዱ አጠቃቀሞች፡ ጎብኚዎችን ከአስተዳዳሪ አካባቢዎች (/wp-አድሚን/፣ /አስተዳዳሪ/) ማገድ፣ የተባዛ ይዘት የሚያመነጩ የፍለጋ ዩአርኤል መለኪያዎችን ሳያካትት፣ የዝግጅት ወይም የእድገት መንገዶችን ጠቋሚ ማድረግን፣ የጣቢያ ካርታ ቦታን ማወጅ እና የተወሰኑ የተጠቃሚ ወኪሎችን መፍቀድ ሌሎችን በማገድ። ፋይሉ በእያንዳንዱ የጉብኝት ክፍለ ጊዜ መጀመሪያ ላይ ይነበባል።
ይህ ጄኔሬተር ከቅጽ ግብዓቶች በአገባብ ትክክል የሆነ robots.txt ይገነባል። የተለመዱ ቅጦች (ሁሉንም ፍቀድ, ሁሉንም አግድ, የተወሰኑ ዱካዎችን አግድ) አብነቶች ናቸው; ብጁ ደንቦች በተጠቃሚ ወኪል ሊታከሉ ይችላሉ። ውጤቱ በ /robots.txt የጣቢያዎ ስር ይሄዳል።
ሮቦቶች.txt በእጅ መፃፍ ለስህተት የተጋለጠ ነው። የአገባብ ስህተቶች (የጉዳይ ትብነት፣ ትክክለኛ መንገድ ማዛመድ፣ የደንቦች ቅደም ተከተል) በጸጥታ የተሳሳተ ባህሪን ያመጣሉ - ለማገድ ያሰቧቸው ዱካዎች እንደተሳበ ይቆያሉ፣ ወይም መጠቆሚያ እንዲደረግላቸው የፈለጓቸው መንገዶች ይገለላሉ። ትክክለኛ አገባብ የሚያመነጭ ጀነሬተር እነዚህን ወጥመዶች ያስወግዳል።
robots.txt ከሌሎች የ SEO መሳሪያዎች ጋር ስውር መስተጋብር አለው። በRobots.txt ውስጥ ዱካ መከልከል በፍለጋ ውጤቶች ውስጥ እንዳይታይ አያግደውም (Google ሳይጎበኘው ዩአርኤሉን ሊጠቁም ይችላል)። meta noindex ገጹ መጀመሪያ እንዲጎበኝ ይፈልጋል። የትኛው መሳሪያ ለየትኛው ዓላማ ጥቅም ላይ እንደሚውል ማወቅ; ጀነሬተሩ ሊመራዎት ይችላል.
አብነት ይምረጡ፣ ያብጁ፣ ያሰማሩ።
ቅርጸት፡ የተጠቃሚ-ወኪል፡ <ስም> በመቀጠል መመሪያዎችን ፍቀድ/አትፍቀድ። * ሁሉንም ቦቶች ይዛመዳል። የተወሰኑ ስሞች (Googlebot፣ Bingbot) የተወሰኑ ጎብኚዎችን ያነጣጠሩ። በርካታ የተጠቃሚ ወኪል ብሎኮች ደንቦችን መደርደር ይችላሉ።
አትፍቀድ፡ <መንገድ> በተሰጠው ቅድመ ቅጥያ የሚጀምሩ ዱካዎችን ያግዳል። አትፍቀድ: / መላውን ጣቢያ ያግዳል። አትፍቀድ፡/አስተዳዳሪ/በ/አስተዳዳሪ/ ስር ማንኛውንም ነገር ያግዳል። የዝርፊያ ጉዳዮችን መከታተል; አትፍቀድ፡/አስተዳዳሪ (ምንም slash) እንዲሁ ይዛመዳል/አስተዳዳሪ።
መጎብኘት-ዘግይቶ (በሴኮንዶች) ቀርፋፋ መጎተትን ይጠይቃል። የጣቢያ ካርታ (ፍፁም ዩአርኤል) የጣቢያ ካርታ ቦታዎን ያውጃል። # የአስተያየት መስመር ይጀምራል።