Robots.txt fayli qidiruv Botlariga yo‘l-yo‘riq ko‘rsatish maqsadida yaratiladi. Ya’ni, ushbu fayl orqali qaysi kataloglarni indeksatsiya qilish yoki qilmaslikni belgilab berish mumkin.
Robots.txt oddiy matn fayli bo‘lib, oddiy Notepad dasturi orqali ham yaratilishi mumkin.
User-agent: *
Disallow: /wp-
Disallow: /feed/
Disallow: /trackback/
Blogni rivojlantirish borasida yana bir qadam bu - SEO. Search Engine Optimization - blogingizni qidiruv tizimlari uchun moslash.
Bu sizga nima beradi? Hozirgi kunda bir necha millionlab faoliyat olib boradigan bloglar orasida o‘z o‘rningizni topish, ma’lum miqdorda o‘z o‘quvchilaringizga ega bo‘lish juda ham qiyin vazifa hisoblanadi. Bunday blog yuritish hech qachon oson bo‘lmagan va bundan keyin ham osonlashmaydi. Agar o‘z blogingizni yuqori bosqichlarga olib chiqishni istasangiz, albatta juda ham ko‘p mehnat qilishingiz kerak bo‘ladi. To‘g’ri, turli xil avtomatik tarzda amalga oshiriladigan jarayonlar ham mavjud, lekin bu degani “olma pish, og‘zimga tush” deb qarab o‘tirish degani emas. Albatta chuqur mehnat qilish hamda sifatli maqolalar yozish bu siznin eng oliy vazifangiz bo‘lishi kerak.
(more…)