Практически правила за SEO оптимизация - #6

Правило # 6 - robots.txt, sitemap.xml, urllist.txt
Преди да пристъпите към регистриране на новосъздадения си сайт, направете си труда да му направите добра карта и да прецените, кои файлове и директории ще искате да се индексират от търсачките, и кои не. За целта разгледайте добре това, което се съдържа в основната директория на хостинг сървъра и направете списък на всички файлове и директории от сайта.
1. robots.txt - този обикновен на пръв поглед файл върши доста необикновени работи. Най-грубо казано той може да указва на търсачките какво искате да се индексира, и какво не. Няма да се спирам подробно на всичко, което може да се пише в него, защото за нашата тема за сега е най-важно с robots.txt да указваме на търсачката, какво НЕ искате да индексира. Например, ако имаме директория "images", в която са картинките Ви, във файла robots.txt ще напишем Disallow: /images/. Това ще уведоми търсачките, да не си губят времето да преминават през всичките Ви картинки. За да може обаче търсачките да знаят за вашите намерения за използването на robots.txt, в мета тага "robots" на основния ви индексен файл ще напишем content="INDEX, FOLLOW". Ако в един или друг момент решите, че не искате търсачките да му обръщат внимание просто напишете content="INDEX, NOFOLLOW".
2. sitemap.xml - това е файл, съдържащ карта на сайта Ви. Т.е. вътре са описани всички важни за Вас страници, които искате да предложите на google за индексация. В него трябва да са описани правилно всички адреси на страници от сайта. Като допълнителни опции, може да укажете, кога за последно те са променени, колко често се обновяват и важността на всяка от тях със стоиности от 0.00 до 1.00. Хубаво е да започнете от важните - дайте им коефициент 1.00. За всяка следваща страница продължете в низходящ ред 0.90, 0.80 и т.н. Ако мислите, че няма да се справите сами, потърсете "sitemap generator" в търсачките и ще откриете доста безплатен софтуер за автоматично генериране на sitemap. Когато сте готови, влезте в www.google.com/webmasters/tools/ и изпратете на google своята карта - sitemap.xml. Разширението на файла може да се различава от посоченото тук, както и структурата му - това не е толкова важно.
3. urllist.txt - същото като sitemap.xml, но важи за yahoo.
От тук нататък Ви остава да се регистрирате насам-натам. Тук важи правилото "колкото повече - и да не е по-добре, със сигурност не пречи". Регистрирайте се навсякъде, където пожелаете в следния ред - важните търсачки, отворени директории, директории за класация и оценка на сайтове, категоризирани директории и търсачки и т.н. Някой ден ще седна да напиша и за rss - бъдещето на в популяризирането според мен.
Това са основните съвети, които ще Ви дам. Следвате ли ги ще имате простичък, добре структуриран сайт, който търсачките със сигурност няма да подминат. Не вярвайте на всичко, което се пише - пробвайте. Ако не стане, тогава критикувайте смело. За край ще Ви дам един пресен пример за оптимизация, който ми е любим, защото е оптимизиран точно и само според правилата, които ви предложих в скромните ми списвания. Шегата настрана, ето Ви един пример за тотално неизвестен за google постен сайт, направен по темплейт, набързичко и без много мисъл. Появи се на втора страница в google по "алпинисти", трета по "топлоизолация" и първа по "монтаж на топлоизолация" (засега) само една седмица след като беше оптимизиран - spider-bg.com.
За консултации и въпроси не се колебайте да използвате SEO OPTIMIZATOR