Robot.txt چیست؟ اکثر صاحبان سایت تصور می نمایند که نمی توانند بر روی موتور های جستجوی گوگل اشراف داشته باشند؛ ولی این تصور خطا میباشد چون شما بیشتر از آن چه که میپندارید، میتوانید بر روی موتور های کاوش با یاری Robots.txt اشراف داشته باشید. درپی قصد داریم توضیحات مفصلی را درباره فولدر Robot.txt به شما بدهیم و کاربرد های آن را بگوییم. فولدر Robots.txt چیست؟ فولدر Robots.txt یک پوشه متنی به طور کامل بی آلایش میباشد؛ همان گونه که از اسم این فولدر پیداست، فرمت .txt دارااست و در دایرکتوری سایتتان قرار خواهد داشت. کلاس سئو مشهد شما با یاری این پوشه میتوانید به ربات های گوگل و کراولر ها دستورها دلخواه خویش را بدهید. از جمله میتوانید به ربات های گوگل بگویید که کدام صفحه ها تارنما شمارا ایندکس نمایند و در حاصل گوگل اکران دهند و کدام صفحه ها را در حاصل گوگل اکران ندهند و ایندکس نکنند.
Robots.txt
با توضیحاتی که تا به اینجا درباره پوشه Robot.txt داده شد، احتمالا متوجه عنایت آن گردیده اید؛ Robot.txt در واقع یک ابزار توانمند میباشد که به شما این قابلیت را میدهد تا سایت خویش را آن سیرتکامل که میخواهید، به گوگل اکران دهید. سئو کار خوب مشهد در صورتیکه که از این پوشه به صحت به کارگیری فرمایید، متوجه اثر آن بر سئوی تارنما خویش خواهید شد؛ اما بایستی مراقب بد افزار ها و ربات های خبرکش باشید که سوا قانون ها این فولدر کار می نمایند و ممکن میباشد جراحت های جبران ناپذیری را به وبسایت شما وارد نمایند.
پوشه Robots.txt در کجا قراردارد؟
پوشه Robot.txt در دایرکتوری روت وبسایت شما ذخیره میشود؛ برای کشف کردن آن میتوانید به دسترسی FTP در سی پنل یا این که دایرکت ادمین بروید. آنگاه میتوانید این پوشه را در public_html وبسایت خویش پیدا نمائید. این فولدر وسعت سنگینی ندارد و در اکثر مواقع نهایتاً تعدادی صد بایت خواهد بود.
چه گونه پوشه Robot.txt را ساخت و ساز کنیم؟
از آن جایی که پوشه Robot.txt یک پوشه متنی بی آلایش میباشد، ساخت کردن آن شغل دشواری وجود ندارد؛ برای اعمال این فعالیت نیاز به یک ویرایشگر متن معمولی مانند Notepad دارید. دراین ویرایشگر شیت ای را گشوده نمایید و یک شیت خالی را با اسم robots.txt ذخیره فرمائید؛ آنگاه وارد cPanel گردید و آنگاه public_html را برای دسترسی به دایرکتوری روت تارنما، گشوده فرمائید.
پس از اینکه public_html را گشوده کردید، فولدر را به درون آن بکشید؛ اعتنا داشته باشید که تحت عنوان صاحب تارنما، می بایست بتوانید به مجموع بخش های پوشه دسترسی داشته باشید و آن را بخوانید، بازنویسی نمایید و بنویسید. قابل ذکر میباشد کهاین دسترسی ها را هیچ فردی به غیر از صاحب وب سایت نباید داشته باشد. درپی ی نوشتهیعلمی طریق ایجاد کرد فولدر ربات را با امرها آن آورده ایم.
دستورهای Robots.txt امر های جان دار در پوشه Robot.txt در کل، دو نوع فرمان برای این پوشه ها داریم؛ اولی فرمان برای محصور کردن موتور های کاوش از کراول کردن میباشد و دومین امر هم برای اذن دادن به موتور های کاوش برای کراول کردن خواهد بود. همانگونه که گفته شد با به کار گیری از این پوشه و دو امر بالا، میتوانید به ربات های گوگل بگویید که ورقه متبوع شمارا ایندکس نمایند و یا این که ایندکس نکنند.
دقت داشته باشید که پیش از فرمان دادن، بایستی اولیه اسم ربات را بیاورید و بعد از آن فرمان متبوع را بدهید. برای جاری ساختن این شغل بایستی از فرمان پایین سود بگیرید:
User-agent: *
شاید برایتان پرسش پیش بیاید که ” * ” به چه ادله در اولِ عبارت آمده میباشد؛ این نشانه تک تک ربات های موتور کاوش را به نوعی صدا میزند. از آن جایی که ربات های موتور کاوش گونه های مختلفی داراهستند، برای خطاب قرار دادن آنان می بایست نامشان را بلد باشید. در حالی که نیازی به بلدن بودن نامشان وجود ندارد، با آوردن نشان ” * ” در اولِ امر ” User-agent: * “، تک تک ربات های موتور کاوش را خطاب قرار می دهید.
فرمان Disallow برای ایندکس نکردن کاربرد داراست؛ منتور سئو مشهد با این فرمان شما به ربات های موتور کاوش میگویید که نمیخواهید کاغذ یا این که نصیب متبوع در سایتتان، ایندکس خواهد شد. در بعضی حالت، مشکلاتی برای یکی صفحه ها شما پیش میاید که می بایست آن را برطرف فرمائید؛ پیش از برطرف کردن به طبع می بایست امر Disallow را در پوشه Robot.txt ایفا نمائید. در شرایطیکه که نقص ورقه را حل نکنید و فرمان دیس الو را هم جاری ساختن نکنید، کاغذ متبوع در گوگل ایندکس میگردد و ممکن میباشد به seo وبسایت شما ضربه بزند.
Robot.txt چیست؟ اکثر صاحبان سایت تصور می نمایند که نمی توانند بر روی موتور های جستجوی گوگل اشراف داشته باشند؛ ولی این تصور خطا میباشد چون شما بیشتر از آن چه که میپندارید، میتوانید بر روی موتور های کاوش با یاری Robots.txt اشراف داشته باشید. درپی قصد داریم توضیحات مفصلی را درباره فولدر Robot.txt به شما بدهیم و کاربرد های آن را بگوییم. فولدر Robots.txt چیست؟ فولدر Robots.txt یک پوشه متنی به طور کامل بی آلایش میباشد؛ همان گونه که از اسم این فولدر پیداست، فرمت .txt دارااست و در دایرکتوری سایتتان قرار خواهد داشت. کلاس سئو مشهد شما با یاری این پوشه میتوانید به ربات های گوگل و کراولر ها دستورها دلخواه خویش را بدهید. از جمله میتوانید به ربات های گوگل بگویید که کدام صفحه ها تارنما شمارا ایندکس نمایند و در حاصل گوگل اکران دهند و کدام صفحه ها را در حاصل گوگل اکران ندهند و ایندکس نکنند.
Robots.txt
با توضیحاتی که تا به اینجا درباره پوشه Robot.txt داده شد، احتمالا متوجه عنایت آن گردیده اید؛ Robot.txt در واقع یک ابزار توانمند میباشد که به شما این قابلیت را میدهد تا سایت خویش را آن سیرتکامل که میخواهید، به گوگل اکران دهید. سئو کار خوب مشهد در صورتیکه که از این پوشه به صحت به کارگیری فرمایید، متوجه اثر آن بر سئوی تارنما خویش خواهید شد؛ اما بایستی مراقب بد افزار ها و ربات های خبرکش باشید که سوا قانون ها این فولدر کار می نمایند و ممکن میباشد جراحت های جبران ناپذیری را به وبسایت شما وارد نمایند.
پوشه Robots.txt در کجا قراردارد؟
پوشه Robot.txt در دایرکتوری روت وبسایت شما ذخیره میشود؛ برای کشف کردن آن میتوانید به دسترسی FTP در سی پنل یا این که دایرکت ادمین بروید. آنگاه میتوانید این پوشه را در public_html وبسایت خویش پیدا نمائید. این فولدر وسعت سنگینی ندارد و در اکثر مواقع نهایتاً تعدادی صد بایت خواهد بود.
چه گونه پوشه Robot.txt را ساخت و ساز کنیم؟
از آن جایی که پوشه Robot.txt یک پوشه متنی بی آلایش میباشد، ساخت کردن آن شغل دشواری وجود ندارد؛ برای اعمال این فعالیت نیاز به یک ویرایشگر متن معمولی مانند Notepad دارید. دراین ویرایشگر شیت ای را گشوده نمایید و یک شیت خالی را با اسم robots.txt ذخیره فرمائید؛ آنگاه وارد cPanel گردید و آنگاه public_html را برای دسترسی به دایرکتوری روت تارنما، گشوده فرمائید.
پس از اینکه public_html را گشوده کردید، فولدر را به درون آن بکشید؛ اعتنا داشته باشید که تحت عنوان صاحب تارنما، می بایست بتوانید به مجموع بخش های پوشه دسترسی داشته باشید و آن را بخوانید، بازنویسی نمایید و بنویسید. قابل ذکر میباشد کهاین دسترسی ها را هیچ فردی به غیر از صاحب وب سایت نباید داشته باشد. درپی ی نوشتهیعلمی طریق ایجاد کرد فولدر ربات را با امرها آن آورده ایم.
دستورهای Robots.txt امر های جان دار در پوشه Robot.txt در کل، دو نوع فرمان برای این پوشه ها داریم؛ اولی فرمان برای محصور کردن موتور های کاوش از کراول کردن میباشد و دومین امر هم برای اذن دادن به موتور های کاوش برای کراول کردن خواهد بود. همانگونه که گفته شد با به کار گیری از این پوشه و دو امر بالا، میتوانید به ربات های گوگل بگویید که ورقه متبوع شمارا ایندکس نمایند و یا این که ایندکس نکنند.
دقت داشته باشید که پیش از فرمان دادن، بایستی اولیه اسم ربات را بیاورید و بعد از آن فرمان متبوع را بدهید. برای جاری ساختن این شغل بایستی از فرمان پایین سود بگیرید:
User-agent: *
شاید برایتان پرسش پیش بیاید که ” * ” به چه ادله در اولِ عبارت آمده میباشد؛ این نشانه تک تک ربات های موتور کاوش را به نوعی صدا میزند. از آن جایی که ربات های موتور کاوش گونه های مختلفی داراهستند، برای خطاب قرار دادن آنان می بایست نامشان را بلد باشید. در حالی که نیازی به بلدن بودن نامشان وجود ندارد، با آوردن نشان ” * ” در اولِ امر ” User-agent: * “، تک تک ربات های موتور کاوش را خطاب قرار می دهید.
فرمان Disallow برای ایندکس نکردن کاربرد داراست؛ منتور سئو مشهد با این فرمان شما به ربات های موتور کاوش میگویید که نمیخواهید کاغذ یا این که نصیب متبوع در سایتتان، ایندکس خواهد شد. در بعضی حالت، مشکلاتی برای یکی صفحه ها شما پیش میاید که می بایست آن را برطرف فرمائید؛ پیش از برطرف کردن به طبع می بایست امر Disallow را در پوشه Robot.txt ایفا نمائید. در شرایطیکه که نقص ورقه را حل نکنید و فرمان دیس الو را هم جاری ساختن نکنید، کاغذ متبوع در گوگل ایندکس میگردد و ممکن میباشد به seo وبسایت شما ضربه بزند.

نباید از رقبای خویش غافل گردید