0

سبد خرید شما خالی است.

طراحی سایت در اصفهان, سئو سایت اصفهان, طراحی سایت فروشگاهی , شرکت طراحی سایت اصفهان, طراحی حرفه ای سایت اصفهان, بهینه سازی سایت , بازاریابی و تبلیغات اینترنتی

نحوه ایجاد و فواید فایل Robots.txt

نویسنده پشتیبانی وب یار
امتیاز مطلب
تعداد بازدید 63
تاریخ بروزرسانی ۱۲ دی ۱۳۹۴

دراین مطلب آموزشی توسط تیم وب یار کاربرد اصلی robots.txt و تاثیر آن بر سئوی ایندکس شدن مطالب را درک میکنیم,  اگر چه وجود robots.txt را بسیار ضروری است,البته عدم وجود فایل robots.txt دلیل بر ایندکس نشدن مطالب سایتتون در موتور های جستجو نیست اما با این حال ما توصیه می کنیم که اگر این فایل رو ندارید حتما بسازید.

نحوه ایجاد و فواید فایل Robots.txt

نحوه ایجاد فایل robot.txt

نحوه ایجاد فایل robot.txt

کار اصلی robots.txt چیست؟؟؟ این فایل اساسا به سایت شما اجازه میده تا به موتور های جستجو متصل باشند و همچنین به موتور های جستجو می فهماند که کدوم قسمت های وبسایت رو ایندکس کنند.

چگونگی ساخت فایل robots.txt:

اگر نقشه سایتتون رو در موتورهای جستجو ثبت کنید موتور های جستجو از روی همین نقشه سایت میتونند سایت شما رو بررسی کنند.این فایل رو معمولا در ریشه یا همون روت هاست می سازیم. پس کافیه به پنل هاست برید و یک فایل به این نام بسازید.

البته بهتر بدانید هدف از این آموزش اینه که بخش هایی از سایت رو که نمیخوایید ربات های گوگل در آنجا خزش کنند را تعیین کنیم و استفاده از robots.txt مانع ایندکس شدن سایت در گوگل نخواهد شد.

 

طریقه استفاده از فایل robots.txt:

در خط اول عبارت user agent رو داریم.در اینجا نام رباتی را که میخواهید با آن ارتباط داشته باشید را وارد کنید. مثلا: Googlebot , Bingbot و…. همچنین با وارد کردن * اجازه برقرار ارتباط با همه موتورهای جستجو را می دهیم.

در مراحل بعدی با استفاده از Allow و Disallow قسمت هایی که موتور جستجو دسترسی داشته باشد یا نداشته باشد را مشخص می کنید.

این یک نمونه کد فایل robots.txt است:

User-Agent: *

Allow: /wp-content/uploads/

Disallow: /wp-content/plugins/

Disallow: /readme.html

این نکته بسیار مهم است که بدونید که اگر میخوایید از این فایل برای جلوگیری از ایندکس شدن مطالبتون آرشیو یا … استفاده کنید باید بگم که این کار اصلا  عاقلانه نیست. برای این کار میتونید از افزونه بسیار قدرتمند WordPress SEO by Yoast استفاده کنید,همچنین به یاد داشته باشید که هدف این آموزش اینه که بخش هایی از سایت رو که نمیخوایید ربات های گوگل در آنجا خزش کنند را تعیین کنیم و استفاده از robots.txt مانع ایندکس شدن سایت در گوگل نخواهد شد.البته جهت ایندکش شدن مطالبتان نکات بسیار مهم دیگری که حتما در نوشتن مطالبتان باید رعایت کنید وجود دارد که می توانید آنها را در قسمتایندکس شدن مطالب مطالعه بفرمایید.

ما با استفاده از این فایل می تونیم دسترسی به برخی پوشه های سایت و یا حتی فایل هایی که به نظرمون اهمیتی ندارند رو قطع کنیم. مثلا دسترسی به پوشه افزونه ها یا تم ها یا فایل readme.html یا …

قرار دادن نقشه سایت در robots.txt

اگر شما از افزونه ای مانند Yoast’s WordPress SEO یا هر افزونه دیگری برای ساخت نقشه سایت استفاده می کنید، به طور اتوماتیک آدرس فایل نقشه سایت در فایل robots.txt قرار می گیرد.

به هر حال اگر به هر دلیلی این اتفاق انجام نشد می تونیم به صورت دستی این کار رو کنیم به شکل زیر

Sitemap: http://www.example.com/post-sitemap.xml
Sitemap: http://www.example.com/page-sitemap.xml

ظاهر استاندارد یک فایل robots.txt

راستش خیلی از وب سایت های محبوب فایل robots.txt ساده ای دارند. به این کد پایین دقت کنید.

Disallow:

Sitemap: http://www.example.com/post-sitemap.xml
Sitemap: http://www.example.com/page-sitemap.xml

کد بالا میگه تمامی ربات ها به محتوای صفحه اول و لینک های نقشه سایت دسترسی داشته باشند.

امیدوارم با این آموزش توانسته باشیم نحوه ساخت فایل robots.txt را به شما یاد داده باشم,با آموزش هایی دیگر از تیم  وب یار با ما همراه باشید.

مطالب مرتبط
منوی Edit فتوشاپ
مطالعه : 8دقیقه

منوی Edit فتوشاپ پس از یادگیری منوی file فتوشاپ به سراغ منویEdit می رویم، همانطور که از نام این منو پیدا است منوی Edit فتوشاپ برای ویرایش می باشد و کاربرد های جالب و کاربردی در منوی Edit فتوشاپ وجود دارد، گزینه هایی مانند بازگشت،حذف،کپی،رنگ کردم،ساخت عکس،تغییر رنگ ها و موارد بسیار دیگری وجود دارد که به صورت مختصر و مفید به توضیح آن برای آسان شدن بیشتر راه اندازی کسب و کار اینترنتی پرداختیم.   – Undo Delete Layar : برای برگرداندن آخرین عملیات انجام شده استفاده می شود. – Step Forward: به وسیله این گزینه عملیات لغو شده توسط step back ward برگردانده می شود. – Step Backward: با کمک این گزینه می توان به تعداد معینی از عملیات را لغو نمود. – Feda: این گزینه بعد از استفاده از ابزار brush برای میزان غلظت و نوع مد آن استفاده می شود. – Cut: بعد از انتخاب یک قسمت با ابزار انتخاب می توان با این فرمان آن قسمت را برش داد. – Copy: مانند فرمان cut باید قسمتی انتخاب شود و با این فرمان می توان یک کپی از قیمت انتخابی داشت. – Copy Special: مانند فرمان قبل عمل می کند با این تفاوت که زمانی که آن را در جایی paste می نمایید بر روی همان لایه نمی ماند و لایه جدیدی ایجاد می کند. – […]

انتخابگرها - CSS Selectors
مطالعه : 7 دقیقه

معرفی انتخابگر ها در CSS   همانطور که می دانید برای استایل دادن به المان های صفحه وب در فایل CSS، ابتدا باید المان HTML مورد نظر را با استفاده از انتخابگر های CSS مشخص کنیم؛ اما گاهی انتخاب کردن ها دشوار می شود و معلوم نیست اشکال کدنویسی از کجا ناشی شده است. تیم طراحی سایت اصفهان وب یار، نحوه ی انتخاب دقیق و سریع المان های HTML را در این مقاله آموزش می دهد که امیدواریم مورد استفاده شما برنامه نویسان و نوآموزان خوش آتیه قرار بگیرد.   لیست انتخابگرها (CSS Selectors List)   نوع انتخابگر مثال توضیح .class .Buttons همه المان هایی که کلاس Buttons دارند را انتخاب می کند .class1.class2 <div class=”name1 name2″>…</div> همه المان هایی که هر دو کلاس name1 و name2 را دارند، انتخاب می کند .class1 .class2 <div class=”name1″> <div class=”name2″> … </div> </div> همه المان هایی که کلاس name1 را دارند و از نوادگان المانی با کلاس  name2 هستند را انتخاب می کند #id #unique المانی با “id=”unique را انتخاب می کند * * همه المان ها را انتخاب می کند element p همه پاراگراف ها را انتخاب می کند element,element div, p همه <div> ها و همه <p> ها را انتخاب می کند element element div p همه پارگراف های داخل همه <div> ها را انتخاب می کند element>element div > […]

آموزش کار با ابزار slice tools فتوشاپ | اسلایز-تولز
مطالعه : 7دقیقه

  آموزش کار با ابزار slice tools فتوشاپ   اسلایس بخش های مختلف تصویر و شروع به تبدیل سایت ابزار slice tools  یکی از مهم ترین و کاربردی ترین ابزارها در فتوشاپ است که بسیار زیاد مورد استفاده کدنویسان و برنامه نویسان عزیز قرار می گیرد و در طراحی قالب ورد پرس نیز کاربرد زیادی دارد. به عنوان مثال زمانی که شما می خواهید تصاویر موجود از یک طرح را کات کنید و در جاهای مختلف طرح تان مانند: آیکون ها، بک گراندها ، پترن ها و…. استفاده کنید. ابزار slice tools خیلی به کارتان می آید که در چندین مرحله و با چند کلیک ساده انجام می شود. در ادامه آموزش کار با ابزار slice tools را آموزش می دهیم.   روش استفاده از ابزار slice tools : روش استفاده از ابزار tools slice به این شکل است که ابتدا ابزار را انتخاب کرده و یک نقطه از تصویر را مشخص می نمایید و کلید موس خود را پایین نگه داشته (چپ کلیک کنید!) و نقطه دوم مورد نظر خود را انتخاب می کنید، سپس کلیک را رها کرده (چپ کلیک) تا این محدوده به عنوان محدوده ی برش شده انتخاب گردد. حال اگر خواستید می توانید چندین محدوده را به همین طریقی که گفته شد مشخص نمایید. سپس از گزینه فایل (file) ،گزینه save as for web را […]

نقش فیلد ها در طراحی سایت
مطالعه : 5 دقیقه

نقش فیلدها در طراحی سایت : نقش فیلدها در طراحی سایت یکی از بخش های مهم واساسی می باشد. ایجاد فیلدها در سایت دارای قواعد خاصی بوده و رعایت کردن قواعد آن در طراحی میتواند منجربه جذب کاربر و ثبت نام او در سایت گردد. فیلد های مختلفی در طراحی سایت وجود دارد. مانند فیلد ثبت نام، فیلد پرداخت ، فیلد تماس با ما، نمایندگی و… مدیر یک وب سایت باید قبل از ایجاد فیلد بداند هدف ازایجاد آن چیست؟ و در نهایت چه اطلاعاتی نیاز دارد. این گونه باعث می شود که بهترین فیلدها در طراحی سایت برای فرم مربوطه مشخص شود و از ایجاد فیلد های اضافی جلوگیری گردد. تیم طراحی سایت اصفهان وب یار با تجرباتی که دراین زمینه دارد، می تواند موارد فوق را به خوبی در سایت شما ایجاد نماید و منجربه افزایش فروش وبرندینگ وبسایت شما شود.   طراحی فرم: طراحی یک فرم و یک فیلد مناسب در یک وب سایت می تواند باعث جذب کاربر شود. فرمی که خوب طراحی نشده باشد تعاملی با کاربران نداشته ودر واقع نرخ تبدیل conversion rate  پایینی خواهد داشت. منظور از نرخ تبدیل ، به درصدی از کاربران گفته می شود که فرم را دیده و آن را تکمیل کرده اند. مثلا اگر سایت شما 200 بازدید کننده مراجعه کرده باشند و فقط 20 نفر از آن […]

مطالعه :

طراحی قالب ووکامرس امروزه برای توسعه ی کسب و کار و افزایش درآمد یکی از مطمئن ترین راه ها ورود به بازار اینترنتی می باشد. برای ورود به بازار اینترنتی شما نیازمند پیاده سازی فروشگاهی اینترنتی متناسب با نیازهایتان می باشید. در این صورت می توانید محصولاتتان را به صورت آنلاین به فروش برسانید و محدوده ی جغرافیای بزرگتری را شامل شوید. برای راه اندازی فروشگاه اینترنتی سیستم های فروشگاه ساز مختلفی وجود دارد اما در این مطلب قصد داریم شما را با چگونگی طراحی قالب ووکامرس آشنا کنیم. با توجه به این که در حال حاضر فروشگاه های اینترنتی بسیاری با استفاده از ووکامرس راه اندازی شده اند و به دلیل محبوبیت گسترده ای که این افزونه ی فروشگاه ساز در مقایسه با سایر افزونه های هم رده ی خود دارد، تیم طراحی سایت وب یار قالب های فروشگاهی خود را کاملا سازگار با ووکامرس برای شما طراحی و پیاده سازی می کند. از نمونه کارهای فروشگاهی ما دیدن کنید و  طراحی قالب ووکامرس خود را به ما بسپارید. افزونه فروشگاه ساز ووکامرس فروشگاه ساز ووکامرس یکی از افزونه های کاملا رایگان و حرفه ای وردپرس می باشد که به وسیله ی آن می توانید متناسب با هر نوع فعالیتی، فروشگاه اینترنتی خود را طراحی و ایجاد نمایید. با طراحی قالب ووکامرس شما قادر خواهید بود محصولات فیزیکی، دانلودی […]

معرفی ساختار و اجزای وب سایت
مطالعه : 6 دقیقه

آشنایی با ساختار و اجزاء سایت : سایت چیست؟ سایت به مکان و جایی در فضای اینترنت گفته می شود که یک صفحه و یا چند صفحه را در خود جای داده است. صفحه ی اول ساختار و اجزاء سایت شامل لوگو، منو، نوار جستجو، و محتوا می باشد. در ابتدا باید موضوع سایت طراحی شده کامل شفاف بوده به طوری که مخاطب و کاربر بتواند بعد از مراجعه به سایت بفهمد که سایت در چه رابطه ای است. در ادامه ساختار و اجزاء سایت با تیم طراحی سایت اصفهان وب یار همراه باشید.   اصول کلی برای جذب مخاطب به سایت در هدر سایت حتما باکس جستجو باشد. چرا که گاهی پیش می آید مخاطب و یا کاربر به سایت ما مراجعه نموده و به دنبال محصولی خاص می باشد که اگر باکس جستجو در سایت نباشد،مخاطب (مشتری) نمی تواند به خوبی از محصولات وخدمات ما استفاده کرده و بهره کافی را ببرد. نباید محتوای داخل سایت شبیه به هم باشد زیرا اگرمحتوا تکراری در سایت قرار گیرد باعث می شود که کاربر در سایت سردرگم شده و سریعا سایت ما را ترک کند. از طرفی تولید محتوای تکراری سئو سایت ما را از بین می برد. نوع برندینگ نوع برندینگ و خدماتی را که ما ارائه می دهیم حتما باید در همه ی بخش ها و ساختار و […]

دیدگاه ها

پاسخی بگذارید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *