سلام ببخشید با استفاده از این کد میشه هک هم کرد؟
من خیلی میترسم وبم اینجوری هک شه لطفا توضیح بدین

سلام

آیا میشه در robots.txt استثنا هم قرار داد. برای مثال ما خواستیم تمام صفحاتی که فاکتور خاصی در آنها هست کراول نشن ولی دو تا از فایل های جاوا و یک css هم همین آیتم رو در آدرسهاشون دارن. ایا میتونیم براشون تعریف کنیم که این 3 فایل رو استثنا کنن؟؟

سلام .روز تون بخیر
چند تا ساب دامین قبلا ایجاد کردم، و الان تعداد زیادی از صفحات این ساب دامین ها در گوگل ایندکس شدند، برای نو ایندکس کردن این صفحات و ساب دامین ها اگر بخوام از فایل روبوتس استفاده کنم کد دستوری آن به چه شکل هست،میخوام فقط با نوشتن یک دستور همه آنها نو ایندکس بشند چون یک سری از ساب دامین ها قبلا ایجاد شدند و دقیقا نمیدونم با چه اسمی بودند

مثلا اگر ساب دامینی به این صورت باشه

***

کدوم از این کد ها درست هست؟

با سلام و احترام
من به تازگی وارد مبحث سئو شدم. برای همین سوالی که برام توی این مقاله مطرح شد این است که آیا robot.txt که توسط افزونه سئو درست میشه رو میشه توی گوگل وبمستر استفاده کرد یا خیر؟ یا اینکه حتما باید تغییرش داد؟

سلام. سایت من وردپرس هست و فروشگاهی. صفحات زیر توسط گوگل ایندکس میشن و هرکدوم هم به خودشون کنونیکال شدن:
example.ir/shop
example.ir/shop/page/1
example.ir/shop/page/6

الان به همین صورت که هستند خوبه یا بهتره pageهای بعدی رو Disallow کنم؟

1- سلام من وردپرس دارم آیا به نظر شما گوگل نیازی به ایندگس این پوشه داره cache

2- /languages این پوشه را چطور آیا زمان خواندن مطلب سایت ما گوگل نیازی به ایندگس این داره

3- من سایتم تگ تایتلش به وصیله افزونه صفحه ساز گذاشته شده قالب آوادا اگر من افزونه را در حالت مسدود قرار دهم گوگل تگ h1 نوشته منو تشخیص نمیده درسته ؟ چون هرچیزی را مسدود کنیم گوگل نتونه بهش دسترسی داشته باشه ما متوجه میشیم ولی این تگ قالب را نمیدونم چطور متوجه بشیم

به نظر من هر چیزی که نیاز به ایندگس نداره را بهتره بلاک کرد

موافق هستید Disallow: /cache کنم این پوشه را ؟

سلام وقت بخیر. ممنون از مطالب همیشه خوبتون
من از یک فروشگاه ساز در حال مهاجرت به یک CMS دیگر هستم و به هاست قبلی دسترسی ندارم اما دامنه قبلی خودم به cms جدید متصل خواهد شد. حدود 300 صفحه در سایت قبلی به صورت داینامیک ساخته شده اند که هیچ ارزشی ندارند. آیا از این روش در هاست جدید استفاده کنم با توجه به اینکه این صفحات در این هاست وجود ندارد و صرفا در هاست قبلی باقی مانده اند، باز هم اثر بخش خواهند بود؟

سلام
در فایل robot.txt اگر بخواهیم دو دستور یا بیشتر بنویسیم باید چکار کنیم؟

مثلا دستور اول این باشد که پوشه فلان نادیده گرفته شود و دستور دوم فایلهای عکس jpg نادیده گرفته شود

در این صورت فرمت نوشتن چطور میشود؟

سلام من میخام کل سایتم توسط ربات های گوگل بررسی بشه

و فقط پوشه ادمین بررسی نشه
این دستور کافیه ؟

User-agent: *
Disallow: /wp-admin/

بعضی مواقع از سر اطمینان ادم سوال میپرسه به خاطر وسواس کاری که داریم
جناب اسماعیلی من قالب ایمپرزا روی سایتم نصب کردم تا اماده سازی محتوا و ویرایش قالب و قراردادن عکس ها و ازمون و خطا ممکنه یک ماه حتی بیشتر هم طول بکشه خوب البته طی این یکی دوماه ممکنه بارها رباتهای گوگل به سایت من سر بزنند برای جلوگیری از عدم دسترسی رباتها طبق توضیحاتی که در بالا دادید عمل کنیم کفایت میکنه ؟
یا اینکه باید اقدامات تازه ای انجام داد ؟
سپاسگذارم از صبر و حوصله شما
راه دیگه ای برای عدم دسترسی تمام رباتهای گوگل به سایت هست ؟
همچنانکه عرض کردم سایت خامه و فعلا کار داره

با سلام
از دو روز پیش در وب مستر برای هر دو تا سایتم قسمت robots اطلاعاتش پاک شده و هیچ لینکی دیگه ایندکس نمیشه وقتی هم میخام نوشته های فایل robots رو وارد کرده و submit کنم این خطا رو میده
It didn’t go through. Try again later.
باید چیکار کنم؟
با تشکر

با سلام
نمی دونستم این سوالا رو کجا بپرسم فقط ببخشید که زیاده من سیستم وبلاگ دهی میهن بلاگ استفاده می کنم و سوالام زیاده ببخشید
1- این قسمت که کلا برام ارور میده بعضی جاها هم میگه valid with warning سعی کردم کاری بکنم ولی نشد طبق گفته های شما پیامی به مدیریت زدم ولی جوابی بابت قسمت روبوت تکست دریافت نکردم
2- بیشتر مشکل روی disallow: /message هست و گیر میکنه گفتم شاید احتمالا با اضافه کردن یه کد دستوری توی قالب بشه یه قسمت برا message درست کرد تا این ارور برطرف بشه این ارور رو زده و تا این برطرف نشه گفته اندکس نمیشه
3-قسمت سایت مپ اصلا درست نمیشه با اینکه خیلی وقته مونده و ارورش به این شکله couldnt fetch و وقتی داخلش میری Sitemap could not be read ایا راه حلی براش هست؟
توی قسمت موبایل هم اذیت زیاد دارم ولی داره کم کم با اضافه کردن چیزا ها ارور ها پاک میشن
4- لینک ها هیچ پروسه ای توش وجود نداره و موندم چه کارش باید بکنم
5- توی coverage خیلی درگیری توش زیاده حدود بیش از 490 excluded وجود داره که نمیدونم باید باهاشون چیکار کنم بعضی هاشون رو زده ایندکس شدن ولی مشکل دارن و بعضی هاشون رو زده با فلان شرط ایندکس میکنیم
6- وبلاگ من بیش از 5 ساله که دارم توش مطلب میزارم ( 99 درصد دری وری و چرت و پرت نیازی به نگاه کردن نیست ) ولی در تعجبم که وبلاگ هایی وجود دارن که علارغم اینکه وبلاگشون کپی پیست هست و بعضی هاشون حدود بیش از چند ساله که اصلا فعالیتی توش نکردن توی سرچ گوگل وجود دارن ولی من حتی اسم وبلاگ خود رو میزنم ( اصلا به تگ هایی که میزنم اشاره نمیکنم که کلا تا 100 صفحه گوگل رو هم گشتم اصلا اسمی از وبلاگ من نیست ) فقط یه لینک میاره که اونم مال 2 یا خوش شانس باشم 1 سال پیشه این ها چطوریه؟
من سئو وارد نیستم ولی تا جایی که شده چیز ها رو رعایت کردم ولی باز هم هیچ وقت توی گوگل وجود نداشته
و در اخر من زیاد نیست که با اضافه کردن وبلاگ و یا سایت در گوگل اشنا شدم کلا 12 روز کم و بیش وبلاگ رو داخل گوگل سرچ اد کردم ولی خبری از هیچی وجود داره
ممنون و معذرت بابت این همه …

سلام
ممنونم از مطلب خوبتون
میخواستم بدونم اگر من تو robots ادرس ویژگی های محصولات مثل وزن و ابعاد و … رو بیارم که ایندکس نشن، به دلیل تعداد بالای اونها سرعت لودم پایین نمیاد.ایا اصلا این کار درستیه؟ از ووکامرس استفاده میکنم

با سلام سایت من با ASP mvc نوشته شده و سرور مجازی اختصاصی دارم حالا نمدونم چجوری ادرس با WWW روی بدون WWW و همچنین .ir ریدایرکت کنم…چون فایل httaccess پیدا نمیکنم..

سلام
میشه صفحات دارای خطا که به هر دلیل نمیشه درستشون کنیم را از طریق محدود کردن در فایل روبوت رفع خطا کنیم؟

سلام و درود، سایت بنده در سرچ گوگل نمیادش و یجای دیدم زیر لینک سایتم نوشته : No information is available for this page. وقتی learn more رو زدم دیدم مشکل از robot.txt هستش، بنده اصلاً نیازی به ایندکس نشدن ندارم و میخوام ریز و درشت سایتم ایندکس بشه توسط گوگل لطفاً راهنماییم کنید که بدجوری گیر این مسئله افتادم با تشکر.

سلام. من میخام داخل فایل robot.txt دستور زیر را وارد کنم
Disallow: /*?*
که دیگه اصلا دنبال آدرس هایی که دارای ؟ هست نگرده ولی آدرس لینک های سایتم به فارسی هستند و میخوام بدونم آیا مشکلی برای اون لینک ها به وجود میاره یا نه. چون وقتی کپی میکنیم آدرس فارسی را و جای دیگه ای پیست میکنیم با علامت سوال نشون میده آدرس را. ممنون میشم راهنمایی کنید

با سلام واحترام

تشکر از مقالات واقعا کاربردیتان
من در کنسول برای دسکتاپ وموبایل فیچ اند رندر زدم در پاسخ گوگل آدرس های زیر را نتوانسته بود بخواند به نظر شما من باید فایل روبوتس را اصلاح کنم . اگر اینطور است لطف کنید دستور را برای من بنویسید واگر راه حل دیگری دارد راهنمائیم کنید.
تشکر فراوان

آدرسها:
***

فایل روبوتس سایت ما
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /readme.html
Allow: /*.js$
Allow: /*.css$

سلام

من امروز فایل robots.txt رو ساختم و از عبارت Disallow: /tag استفاده کردم تا تگ های سایت ایندکس نشوند. اما از گذشته نزدیک به 600 تگ ایندکس شده اند و میخواهم این ایندکس ها حذف شوند. آیا باید کاری انجام بدم؟ یا این تگ ها با آپدیت robots.txt حذف می‌شوند از نتایج؟

سلام
افزونه All in One SEO pack نصب کردم.

دیروز هم سایت رو به گوگل معرفی کردم ، امروز دیدم Sitemaps ارور داده .

البته قبلش Disallow: /wp-* این رو تویه robots ثبت کرده بودم ، حذفش کردم ولی فایده نداره و همچنان این ارور میده/
پس از حذف هم فایل Robots از تب robots.txt Tester آپدیت زدم (Submit).
ولی همچنان Sitemap ارور میده که هنوز بلاک هست.
آیا زمان میبره این Robots اعمال بشه و سایت مپ بروزرسانی جدید دریافت کنه ؟
چون فایل Sitemap کامل حذف کردم ، تست گرفتم بازم همین ارور دریافت میکنم .

تصاویر :
***

ممنون میشم راهنمایی کنید .

سلام این فایل من است ایا این فایل مشکل دارد ؟

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

Sitemap: ***

ایا نیاز است که ادرس نقشه سایت در فایل robot وجود داشته باشد؟

سلام
من اخیرا یه فایل robots.txt جدید ساختم و اونو به سرچ کنسول هم معرفی کردم ولی وقتی ریقرش میکنم هنوز نسه قدیمی رو نشون میده که حاوی کد
User-agent: *
Disallow: /
و این یعنی سایت من ایندکس نخواهد شد چند روزی هست که هر بار که ریفرش میکنم بازم نسخه قدیمی که نمیدونم چجوری داخل سایت قرار گرفته رو نشون میده
میشه راهنمایی کنید که چه باید بکنم ؟؟
ممنون

سلام مثل همیشه از مقالات خوب شما تشکر میکنم
گوگل دائما پوشه های theme و plugins من را ایندکس میکند و بعد ارور 404 میدهد به نظر شما اگر از طریق robot.txt دسترسی گوگل به themes و plugins را ببندم این راه اصولی است ؟ یا بهتر است دسترسی باز باشد و به صورت دستی لینک های ایندکس شده را از گوگل حذف کنم ؟
از دیدگاه سئو و همچنین اصولی بودن یا اصولی نبودن خیلی محبت میکنید به سوال بنده پاسخ دهید.

با سلام و وقت بخیر
من در گوگل وب مستر خودم، در بخش گوگل ایندکس و زیرمجموعه blocked resources ، اروری دارم که میگه 9 صفحه با ریسورس های بلاک شده. در اون بخش تمام لینک هایی رو که نشون میده مربوط به فایل های js و css در بخش libraries می باشد. (من برای برخی از صفحه ها، مثلا صفحه اصلی، از صفحه ساز quix استفاده کردم)
Blocked resource
***
سایت من جوملایی هست و در فایل robot دسترسی libraries بسته شده. در گوگل وب مستر هم تو تستش گفته که باید به این بخش دسترسی داشته باشی. سوالم اینه اگه دسترسی این بخش باز بشه، از نظر امنیت، ساختار سایت با خطر بیشتری مواجه میشود؟ اگر خیر، باید کل دسترسی به بخش libraries رو باز کنم یا فقط به همین فایل های js و css?
با سپاس فراوان از مجموعه وب سیما

ضمن سلام.سایت من جوملا هست و فایل robots این هست بی زحمت ببینید مشکلی نداره از سایتها دانلود کردم.

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /DOW/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /logs/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/

شرمنده فکر کنم فایل robots رو خوب نگاه نکردید چون فایل css اینا Allow هستش
لطفا سوال اول هم جواب بدید ممنون

سلام خسته نباشید
تو بخش ارور 404 سایت چند تا ارور نمایش میده مثله این :
/wp-includes/js/mediaelement/mediaelement-flash-video.swf
تقریبا 200 مورد هستش من باید از ابزار Remove URLs این ارورها رو پاک کنم؟
فایل robots من به این صورت هستش
# All Bots
User-agent: *
Disallow: /cgi-bin/
Allow: /wp-includes/js/
Allow: /wp-includes/css/
Allow: /wp-content/uploads/
Disallow: /wp-admin/
Allow: /wp-content/plugins/
Disallow: /readme.html

لطفا راهنمایی کنید که این فایل robots به چه صورت تنظیم کنم تا این مشکل پیش نیاد
تشکر

سلام وبسایت من دانلود هستش
***
تازه رفتم روی https برای همین برای ثبت نقشه برای robots.txt چه مقادیری وارد کنم مناسب هست ؟
یکی از سایت های نوشته بود این ترکیب خوب هستش :

Disallow: /wp-content/plugins/
Disallow: /readme.html
Sitemap: http:// site .com/post-sitemap.xml

ممنون میشم راهنمایی کنید
Sitemap: http:// site .com/page-sitemap.xml

سلام خسته نباشید – خواهش میکنم جواب بدید ضروری هست
در سایت زیر برای هر محصول به صورت اتومات یک صفحه برای ویدیو ان محصول سلخته میشود و صفحات اضافی بدون محتوا و ویدیو ایندکس میشوند
در پنل سایت هم امکان غیر فعالسازی وجود ندارد
مانند نمونه زیر

***
ایا میشه از طریق ربات robots.txt میتوان درخواست کرد این صفحات بررسی نشوند این کار باعث مشکلاتی برای سایت نمیشود؟

من از ربات خواستم صفحات زیر را بررسی نکند ( Disallow: /video/ ) و پیغام زیر امده برای من

You requested that Google validate your fix of Index coverage issues on site https://www.***.com/; specifically pages affected by ‘Indexed, though blocked by robots.txt’. However, we found that some pages are still affected by this issue.

To examine full details on the validation progress, and to learn how to fix remaining pages, please follow this link.

با سلام .

این به چه معناست؟
/_/ :Disallow

متاسفانه تو هیچ سایت ایرانی و خارجی نتونستم که پیدا کنم .

با تشکر

درود
وقت بخیر

حدود دو ماه پیش متوجه شدم پیوند یکتا فروشگام مشکل داره که بجای product-tag شده tag
و بجای product-category شده category !
این رو درستش کردم و هر دو رو به product-category و product-tag ویرایش و ذخیره کردم

البته مشکل از زمانی شروع شد که طراح قالب با نصب قالب تمام محصولات دمو و دسته بندی هم فعال کرده بود … و این مورد به ربات های گوگل هم رسیده بود که محصول و تگ منتشر شده و بدبختی من از روزی شروع شده که قالب نصب شده …

محصولات دمو و دسته بندی رو حذف کردم ، بعد گوگل شروع کرد به دریافت خطا از دسته بندی و تگ ها
الان همون دسته بندی های که حذف کردم داره اخطار میاد و برام دردسر شده …
از وردپرس استفاده میکنم ، هر روز با این وجود ارور دریافت میکردم که شامل این ها بود
برای مثال :
category/farhang-o-honar/daneshgahi/
درصورتی که این دسته بندی دیگه وجود نداره .
اومدم تو فایل robots لینک های که به این دسته بندی های حذف شده اشاره میکرد بستم
حالا امروز همین دسته بندی ها اومده تو این مسیر 😐
product-category/farhang-o-honar/daneshgahi/

دیگه اگر مسیر product-category/ رو از robots ببندم کل دسته بندی هام بسته میشه
الان موندم چیکار کنم

ممنون میشم راهنمایی کنید
آدرس فروشگاه : ***

سپاس

سلام .ممنون از آموزش خوبتون .
سوال من اینکه من از افزونه های Google XML Sitemaps و Yoast استفاده میکنم .آیا اینها چیزی به صورت ربات مجازی می سازن؟
من با وجود این ها باز هم میتونم فایل robots.txt رو ایجاد کنم ؟

سلام. اگر بخواهیم یک صفحه یا برگه را برای همه ربات ها غیر از ربات گوگل و بینگ ببندیم چه کدی را باید به ROBOOTS.TXT باید اضاف کنیم؟

سلام
ممنون بابت مقالات کاربردی سایتتون.
من چند روزی هست که در قسمت crawl errors، ارور access denied برای فایل های درون پوشه آپلود ووکامرس دریافت میکنم.فایل های اونجا هم اکثرا پی دی اف و مربوط به آفیسه.هم برای وب و هم برای موبایل ارور های زیادی دریافت شده،افزونه ای هم برای حفاظت از مدیریت وردپرس داشتم که اونو غیر فعال کردم ولی باز هم ارور ها پابرجاست.دسترسی به روبات ها هم درسته در فایل robot.txt هر چی توی مقالات فارسی و انگلیسی هم جستجو میکنم کسی این مشکلو نداشته تا به حال.
میشه کمکم کنین مشکل حیاتیست.

سلام ببینید این کد برای ربات صحیحه؟
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
ممنون

در جواب شما .
من میخوام برچبب هام ایندکس بشن اما این برچسب ها که چند صفحه هستند ، هر صفحه جداگانه ایندکس میشه در اصل نیاز است تا یک صفحه از هر برچسب ایندکس بشه
مثلا برچسب کلمه کفش اسپرت” مثلا حدودا صد محصول این برچسب رو دارن و این صد محصول در این برچسب در ده صفحه نمایش داده میشه که
page1
با page 3 این تگ ، یک عنوان و یک متا دسکریپشن دارن که در اصل نباید صفحات این تگ ایندکس بشه
امیدوارم منظورم رو متوجه شده باشید

سلام
من یک مشکل دارم خواهش میکنم راه حلش رو بگین
قسمت Blocked Resources نزدیک به 9 هزار لینک بلاک شده و دلیلش رو این زده ***
چطور رفع کنم اینو؟
من تبلیغی از علی بابا تو سایتم ندارم!

سلام بر تیم وبسیما
یه سوال فنی دارم ، یه سایت وردپرسی من
صفحه تگ ها
***
تگ ها ، صفحاتی هم که دارند ایندکس میشه
این باعث شده که صفحاتی به وجود بیاد که عنوان متا و توضیحات متا ش تکراری باشه
حلا در فایل robot.txt چه عبارتی بنویسم که این صفحات ایندکس نشه

با سلام و تشکر از آموزش بسیار خوبتون. امکان داره robot.txt سایت ما رو هم چک کنید؟

اینکه انقدر روان و قدم به قدم آموزش میدید واقعا برام ارزشمنده ممنون از زحمات شما…

سلام و درود خدمت دوستان وبسیما
به جرات می تونم بگم بهترین آموزش در سطح وب رو قرار دادید . همه چیز رو به خوبی توضیح دادید واقعا عالی بود
من فقط یکی دو تا از بخش ها رو که دیفالت بهشون اشاره شده محدود کردم.
لطا سایت من رو ببینید ***
بنظر شما چطوره ؟ اگه داخل آموزش اشاره ای به بهترین نوع فایل روبوتس می کردید خیلی خوب میشد.

سلام

مگه نباید داخل فایل robots از تگ استفاده کنیم ؟

ممنون از مطلب خوبتون
ولی نمیدونم چرا من با اینکه ربوت رو بستم
باز هم ایندکس میکنه 😐

این سایته منه
***
برای این آدرس
***
باید بصورت جداگانه روبوت رو ببندم ؟

ممنون از مطلب خوبتون

با سلام من فایل ربات را در سرورم دارم اما در گوگل وب مستر خطای Shows any instances when the crawl was postponed because robots.txt was inaccessible را میدهد. چکار باید بکنم؟

سلام
ممنون از مقاله خوبتون.
یه مشکلی دارم. فایل روبوت در هاست خودم ساختم و در وبمستر گوگل هم ثبت شده و کلا فایل روبوت من شامل این دو خط هستش:
User-agent: *
Disallow: /cgi-bin/
ولی در قسمت سایت مپ گوگل وبمستر 62 تا اخطار ثبت شده با توضیح Sitemap contains urls which are blocked by robots.txt در صورتی که لینک هایی که اینجا معرفی کرده برای مثال چک میکنم توی گوگل ثبت شده. سایت تازه تاسیس هستش.
باید چیکار کنم این اخطار برطرف بشه ؟ اصلا توی فایل روبوت من جلوی چیزی گرفته نشده ولی این اخطارو میده. با تشکر

ممنون از مقاله خوبتون .
موفق باشيد.

سلام
سایت من به شدت داره ایندکس هاش کم میشه
کلا 1400 ایندکس داشت الان شده نزدیک 500 تا و کمترم میشه
من نه پوسته عوض کردم نه کدی ودستکاری کردم اما پوشه wp-includes همش ایندکس میدش و من تو robot جلوشو گرفتم و کل صفحاتی که Index of /wp-includes داشتن و تو وبمستر ریمو کردم – الان همش داره ایندکسا کم میشه و امار بازدید میاد پایین با اینکه به حالت قبل برگردوندم بازم داره کم میشه

تصویر ایندکسای الکی
***
البته همه تگ هایی که تا یه هفته پیش ایندکس بودن پاک شد (کل تگ های ایندکس شده پاک شدن و فقط دو سه دونه از 500 تگ باقی موندن)

تصویر robots
***

سلام
من سایتم تو سرچ اینترنت از وقتی براش فایل روبوت درست کرده بودم این پیغام رو میده
A description for this result is not available because of this site’s robots.txt
الان هم که کلا تو ربوتس همه چی رو باز گذاشتم بازم نرفته چکار کنم
***
یه مدتیه اصلا ورودی از گوگل ندارم دیگه
چطوری درست میشه ؟
با جستجوی “دانلود رایگان نرم افزار آژانس تاکسی تلفنی” قبلا لینک اول گوگل بود حالا اصلا نمیاد
لطفا کمکم کنید

سلام
یه سوال داشتم در مورد معرفی کردن نقشه سایت در فایل ربات
بنده
# Sitemap
***
رو تو آخر فایل ربات ازافه کردم

آیا تاثیر مثبت یا نفی دارد؟

آیا اصلا لازم است این کار یا خیر

مممنونم

خیلی ممنونم ازتون
الان در همینی که گفتین علامت * در آخرش به چه معنایی میشه؟
یا مثلا /*? که علامت * در وسطش قرار میگیره به چه معناست؟

سلام خیلی ممنونم.پس تقریبا درست نوشته بودم.
میخواستم جلوی ایندکس شدن فایلهای ضمیمه رو بگیرم چون به همین فولدر میخورد.مثل آدرس زیر هستش
***
فرض بفرمایید اسم فایل (عکس) ضمیمه شده filehazamimem هستش و فولدرش همون attachment و آدرس مطلب tasavire-baran به صورت زیر اگه عمل کنتم فولدر attachment از دسترس روباتها مخفی میمونه؟
Disallow: /../../../attachment/

سلام
این دستور چی میگه؟
Disallow: /../../attachment/

سلام و عرض ادب خدمت شما
ممنونم ب خاطر مقاله خوبتون
سوالی داشتم ممنون میشم راهنمایی کنید
بنده در سایتم دو بار وردپرس رو نصب کردم یکی در آدرس اصلی (site.com) و یکی در قسمت بلاگ سایتم (site.com/blog )
میخواستم ببینم آیا باید هر کاری در نگاه سئو برای سایت اصلی کردم برای سایت بلاگ هم بکنم؟ مثلا ثبت کردن در وبمستر گوگل و اضافه کردن آمار گوگل و همینطور سایت مپ ها رو غیره
سپاس

سلام .روز بخیر
در گوگل وب مستر سایتم، داخل فایل روبوت، در مورد Crawl-delay: 10 هشدار داده
این کد Crawl-delay: 10 در فایل روبوت به چه معنایی هست و آیا حتما باید باشه و از نظر سئو مفیده یا مضر؟

ممنون

ممنون خیلی مفید بود
از سایت خوبتون هم تشکر می کنم

سوال دوم من
Disallow: /*? کردم
آیا صفحاتی که از قبل ایندکس شدن خودشون حذف میشن؟

سلام و ممنون بابت این سایت خوبتون که در مورد همه چیز همه چیز میشه پیدا کرد
من اگه بخوام صفحاتی که ؟ (علامت سوال دارند رو اجازه ندم ایندکس کنه )
باید تو robot.txt بنویسم
Disallow: /?
?????
ممنون

با سلام. بنده چند وقت گذشته اودم تمام تگ هام رو پاک کردم، بعدش همه اون تگ هایی که پاک شدن، اومدن توی not found گوگل وبمستر. بعدش اومدم Disallow: /tag/ را به فایل robots.txt اضافه کردم، خیلی جالبه که حالا همه ی تگ ها ریدایرکت میشن به آخرین مطلب بنده. مشکل از کجاست؟

ممنون میشم بیشتر توضیح بدید . من چطوری میتونم این کارا انجام بدم اگه بشه دقیق بگید

https://msn.com /
http://msn.com/
وقتی سایت را با هر دو میزنیم نمایش داده میشه و ریدایرکت نیست در صورتی که داخل نتایج گوگل فقط میزنه http ها ایندکس شدند و https ها خیلی کم ایندکس شده من باید چکار کنم که به این شکل باشه سایتم و https ها ایندکس نشند و داخل نتایج جست و جو فقط http قرار بگیره
ممنون بابت جواب های به موقعتون

سلام . من الان برداشتم ریدایرکت کردم همه https ها را ولی میدونم که به این شکل تاثیری نداره برای سایتم. پس سایت msn.com چرا این کارا انجام داده ؟
چه کاری انجام داده که هم https را داره هم http و وقتی داخل گوگل سرچ کنیم فقط http را نمایش میده و ایندکس کرده . ممنون میشم زودتر راهنمایی کنیم چون واقعا نمیدونم چکار کنم

با سلام . من سایتم را به تازگی با توجه به اخبار گوگل https را فعال کردم ولی به خاطر یک سری مشکلاتی که داشتم http را غیر فعال نکردم ولی مشکلی که هست میخوام به صورتی به گوگل بفهمونم که https سایت من فعاله ولی نیاد اونا را ایندکس کنه و به کاربران نمایش بده و داخل موتورهای جست و جو http ها را بیاره. شبیه سایت msn.com
نمیدونستم سوالما دقیقا کجا بپرسم برای همین گفتم شاید چون باید داخل فایل ربوت بنویسم اینجا میخوره ممنون میشم زودتر راهنمایی ام کنید

با سلام و خسته نباشید .
احتمالا اینجا جای مناسبی نیست برای این سوالم اما مجبورم ازتون بپرسم . .
بنده سایت پربازدیدی داشتم اما مثل اینکه امروز متوجه شدم دیگه هیچ مطلب و ایندکسی در گوگل ندارم. یعنی فکرکنم گوگل سایت من را کلا حذف کرده .
آدرس سایتم موجوده . لطفا بررسی و پاسخی برای حذف کلی سایتم بدید.
ممنون.

هم با www که جواب نداد یکبار هم بدون www

پیشاپیش ممنون از راهنماییتان

سلام و خسته نباشید خدمت شما
بنده سایتم رو با ورد پرس ساختم
فایل robots.txt. نداشتم کلا
تو قسمت robots.txt که میرم میگه شما فایل رو تو سرور دارید و گوگل نمیتونه به سایت شما دسترسی داشته باشه
robots.txt fetch failed
You have a robots.txt file that we are currently unable to fetch. In such cases we stop crawling your site until we get hold of a robots.txt, or fall back to the last known good robots.txt file. Learn more.

فایل رو طبق اموزش ساختم و تو پوشه روت ذخیره کردم بازهم همین اررور رو میده
تو پنل مدیریت هم گزینه مربوط به موتورهای جستجو غیر فعاله
از سه افزونه فرم تماس 7 و امار ورد پرس و iThemes Security استفاده میکنم فقط
کلا گوگل بهش دسترسی نداره و هیچ صفحه ای هم fetch نمیشه
پیشاپیش ممنون از راهنماییتون

این درست شد خیلی ممنون. فقط الان که Site:empiremovie.in رو میزنم صفحه ها رو ایندکس کرده. این عادیه یا مشکل داره و باید جور دیگه ایندکس کنه؟؟؟؟ میشه شما یه نگا بندازید. خیلی ممنون.

پس این دستور الان درسته؟؟؟
User-agent: *
Disallow: /

والا با دقت مطالعه کردم ولی بازم سر اینکه از کدوم دستور برای ایندکس نشدن کل هاست دانلود استفاده کنم موندم!!!
اگه فقط Disallow: / رو تو فایل بنویسیم و آپلود کنم دیگه هاست دانلود ایندکس نمیشه؟؟؟

کدوم دستور رو قرار بدم؟؟؟؟

سلام خسته نباشید. واسه هاست دانلود که میخوام ایندکس نشه از کدوم دستور استفاده کنم و تو کجای هاست دانلود کپی کنم؟؟؟ راستی باید فایلش رو با چی بسازم؟؟؟ خیلی ممنون.

سلام ببخشید این دامنه من *** هستش بعد از گوگل دو سه روزی هس ک داخل گوگل نیس الان من جکا کنم؟میشه وبمسترشو بدم شما ی نگاهی بندازید ممنونتون میشم

سلام
من تازه سایتم رو راه انداختم
متوجه شدم ه قبلا یه نفر این دامنه رو خریده بوده و وقتی منقضی شده من خریدمش
بعد از این که تو گوگل اسم سایتو نوشتم و سرچ کردم سایت اومد و تو بخش متا اینو نوشته بود:
A description for this result is not available because of this site’s robots.txt
Learn more
بعد از اینکه روی Learn more کلیک کردم به لینک زیر رفتم:
***
تو اول صفحه گوگل ساپورت نوشته:
Block URLs with robots.txt
یعنی اینکه این دامنه بلاک شده!؟؟؟؟
ممنون میشم راهنمایی کنید
با تشکر از سایت خوبتون

سلام
خسته نباشید

ببخشید وبلاگم تو صفحه‌ی اول گوگل بود تا همین یه هفته پیش ولی به طور ناگهانی از گوگل و سایر موتورهای جستجو حذف شده تا اینکه تو وبمستر دیدم قسمت robots.txt ارور میده
کار خاصیم نکردم و نمیدونم دقیقا چیکار باید بکنم
فایل ربات هم که کلی دستورات داره و چون به سرور دسترسی ندارم نمی‌تونم درستش کنم و از طرفی مایلم که کل وبلاگم ایندکس بشه و محدودیتی نباشه برای موتورهای جستجو
***
لطفا اگه میشه راهنماییم کنید …

ضمن تشکر از مطلب مفید شما ، من سایتم رو در Mobile-Friendly Test گوگل آنالیز کردم و پیغام داد که 46 منبع توسط فایل ربات بلاک شدن ، سوالم اینجاست که باید بررسی کنم و تمام این منابع رو محدودیت هاشون رو باز کنم ؟
من ادمین و اینکلود و کش و فید و کانت و کتگوری و ترک بک ها رو محدود کردم ، اشتباه است ؟
واقعا سپسا گذارم که در این حد حرفه ای مطلب انتشار می دهید و به سوالات هم پاسخ میگویید.

سلام خدمت شما دوستان عزیز
متشکر از مطالب خوبتون خلی کمکم کردن

فقط یک سوال من چه چیزهایی رو باید غیر فعال کنم یا همون از چشم روبات مخفی کنم
چه چیزهایی رو به نمایش بزارم؟
ممنون میشم واضح راهنمایی کنید(مبتدی هستم)
از کجا ارور های سایتم رو ببنیم
من از اپن کارت فارسی استفاده میکنم
آدرس سایتم
pelikanshop.ir
با تشکر

سلام دوست عزیز شما در این مطلب لینک شکسته دارید Web Robots Database موفق باشید.

سلام
من حدود 500-600 تا از این ارور ها داشتم – فایل robots.txt رو درست کردم – چقدر طول میکشه تا در گوگل وب مستر این مورد تصحیح بشه و این 500-600 تا ارور برطرف و پاک بشه؟

با عرض سلام و خسته نباشید
ببخشید من یه سوال داشتم ؟ تیم برنامه نویس ما روبات تکستی که برای ما قرار داده به این صورت هستش

***

خواستم بدونم به نظر شما این روبات تکست اصولا درسته ؟ آیا با توجه به وب سایت و شرایط و محتوای اون درسته نوشتن این روبات تکست ؟

مآیا این روبات فعلی مستونه مشکلاتی برای وب سایت من داشته باشه ؟
ممنون میشم اگه بهم کمک کنید

بازهم سلام مجدد به شما.
مطالب دیگه سایتتون رو خوندم عالی بودن.
یه سوال داشتم گفتم چون مربوط به این مطلب میشه اینجا بنویسم.
صفحه اصلی سایت رو fetch and render زدم و وقتی وارد شدم نوشته بود این URl خونده نمیشه:
***
وقتی روی فایل robots.txt زدم این رو نمایش داد:
User-agent: *
Disallow: /
فایل robot من:
User-agent:*
Disallow: /admin/
Allow: /

خواستم بدونم منظورش اینه که صفحه اصلی من رو روبات ها میشناسن یا نه؟
ممنون وبسیمای عزیز.

سلام
چند روز پیش در یکی از مطالب دیگه سایتتون دیدگاه گذاشتم اما جوابی نگرفتم.
لطفا کمکم کنید.
من وقتی مطلبی رو انتشار میدم فقط صفحه اصلی سایتم توی نتایج گوگل میاد.
پس از 4 روز هم این اتفاق میفته.یعنی دیر ایندکس میشن مطالبم.
فایل htacces و robots.txt هم نذاشتم.

میشه راهنماییم کنید که مشکل من چیه؟؟
واقعا ممنون میشم.

با سلام
سایت ما وردپرس هستش و از yoast استفاده می کنیم، دوتا از ساب سایتمپ های ما ارور 403 forbiden می دن، در صورتی که هیچ مشکلی ندارند و کامل باز می شوند. یک هفته پیش هر دو ساب رو فچ کردیم یکیشون درست شده ولی دومی همچنان ارور میده با اینکه در فچ کردن سابمیت میشه کامل و فچ میشه باز هم ارور 403 میده مشکل از چی می تونه باشه؟ ایا با تغییر افزونه ممکنه مشکل حل بشه؟
سپاس از شما

در مورد اینکه سوال کردین آیا خود این صفحات در رزبلاگ ایندکس میشن اگه منظورتون ادرس وبلاگ هستش که باید بگم اولش ایندکس میشد ولی وقتی با خرید قسمت انتقال همه ادرسهای ربلاگ به ادرس اختصاصی تمامی ادرسها رو به ادرس اخصاصی انتقال دادم دیگه ایندکس نشدن در حقیقت اینکار واسه شناساندن ادرسم به عنوان ادرس اصلی بوده و فکر نمیکنم این کار باعث ایندکس نشده بوده باشه

سلام وب سیمای عزیز
فرمایش شما متین ولی من عین همین قالبو توی دوتا سایت دیگه هم دارم که خیلی خوب ایندکس میشن باز من ایرادات رو بررسی میکنم و رفع میکنم من از طریق قسمت تماس با ما براتون اطلاعات گوگل وبسترمو میفرستم بررسی کنید واقعا دیگه کلافه شدم موندم چیکار کنم

با سلام.خیلی خیلی از مطالب مفید و البته پیگیر بودنتون ممنونم,شاید باورتون نشه ولی ماشالله اینقدر تو کامنتها پیگیر بودید که من کل کامنتهارو خوندم و خیلی چیزها از همین کامنتها و جوابشون یاد گرفتم.جسارتا دوتا سوال دارم,ممنون میشم راهنماییم کنید.
1.چطور میشه کاری کرد که سایت فقط با یک آدرس ایندکس بشه یعنی یا با (www)و یا بدون (www)؟؟؟و اینکه با بهتره یا بدون؟؟؟
2.فرض کنید ما یک سایت خبری داریم که هر روز پستهای زیادی براش مینویسیم,خب قطعا به مرور فضای هاست پر میشه,اگه نخواهیم هاستمونو ارتقا بدیم,بهترین راهکار برای ایجاد فضا برای پستهای جدید چیه؟؟
با خودم فکر کردم بهتره پستهای قدیمی مثلا دو سال پیشو حذف کنیم تا فضا خالی بشه اما بعد فکر کردم خب اینجوری مطالبم هنوز تو ایندکس گوگل هست و وقتی کاربر با اون ایندکسها وارد سایت بشه و اون مطلب حذف شده باشه خیلی بد میشه واسه سایت.
یا فرض کنید یک فروشگاه همه جوره داریم که همه چیز توش هست ,حالا اگه خواستیم یک کالایی رو دیگه نیاریم و اونو از سایت حذف کنیم چیکار کنیم که با این مشکل رو به رو نشیم؟؟؟
راستی بابت زحماتی که برای این وبسایت میکشید سپاسگذارم ,به نظرم بهترین راه پیشرفت تو محیط وب پاکی ,صداقت و حرفه ای بودنه که اینا اعتبار به وجود میاره و اعتبار هم مادر تمام موفقیتها هست.احساس میکنم شما دارید در این راه قدم میذارید,امیدوارم همیشه شاد,سلامت و موفق باشید.

سلام به مدیر محترم خسته نباشید
من تمامی مقاله های شما رو راجع به ایندکس شدن سایت خوندم
راهنمایی های شما خیلی مفید بودن من پنج تا دامنه رنکدار دارم سه تا از سایتام به سرعت نور مطالبشون ایندکس میشن ولی دوتاشون مشکل ایندکس دارن تا حدی که صفحه اصلی سایت هم ایندکس نمیشه من تمامی مراحلی که توی مقالات توضیح دادین رو انجام دادم ولی باز این دو سایتم ایندکس نشدن الان یک ماهی میشه که میگذره ولی هیچ ایندکسی صورت نگرفته در صورتی که بقیه سایتهام روند رو به رشد چشمگیری داشتن همه سایتها طی بازه زمانی دوماهه راه اندازی شدن میخواستم ازتون خواهش کنم شما به صورت حرفه ای تر این دو سایت رو انالیز و کنید و کاری کنید مشکل من حل بشه هرجوری بخواید جبران میکنم لازم به ذکره تمامی سایتها به سیستم رزبلاگ متصل هستن البته با ابزارهایی که در قسمت خرید رزبلاگ بود دامنه های خودمو به عنوان دامین اصلی معرفی کردم و مشکلی بابت اینکه به دلیل ساب دامین بودن ایندکس نشه ندارم ازتون خواهش میکنم مشکل منو بررسی کنید بعد بگید چجوری جبران کنم
آدرس سایتهایی که مشکل ایندکس دارن
***
اینم یه نمونه از سایتم که خیلی خوب ایندکس میشه
***
منتظر جوابتون هستم ایمیلمو هم وارد کردم میتونید ایمیل بفرستید با تشکر فراوان

بله از ورد پرس استفاده می کنم، راهکار حل مشکلم رو میشه لطف کنین.

البته من واسه حل این مشکل یه فایل به نام robots.txt وبا محتوای
User-agent: *
Allow: /
تو هاست آپلود کردم، ولی بازم مشکلم حل نشد

سلام وقتی سایتم رو تو گوگل سرچ میکنم این پیامو میده :(به دلیل robots.txt این سایت، توضیحی برای این نتیجه وجود ندارد – بیشتر بیاموزید.) واسه حل این مشکل چیکار کنم، من میخوام گوگل سایتم و نشون بده، اصلا نمیدونم این روبات کجا هست..لطفا راهنماییم کنین

سلام و تشکر از پاسختون:
به فرموده شما خط دوم را حذف و لینک سایت مپ را ایتطور گذاشتم،درست است ؟
User-agent: *
Disallow: /http://www.bursiran.com/sitemap_index.xml
سایتم افزونه Yoast SEO دارد و اتفاقا لینک بالا را از Yoast گرفتم.
اما در مورد مشکل اصلی،واقعا نمی دانم چکار کنم،هاست من پارس دیتا است و برای چندمین بار پرسیدم میگه از ما نیست،و تا حالا حتی یک نفر گزارش نداده است. فرمودید اطلاعات دسترسی ! ،بفرمائید چه اطلاعاتی تقدیم کنم. و از چه طریق بفرستم ؟
بعضی دوستان می گویند احتمال دارد از نصب افزونه ای باشد مثلا می تواند از این دو اافزونه ها باشد :(wp-optimiez , و یا iThemes Securityion) – با احترام

سلام و خسته نباشید
واقعا از سایت خوب و کاربردی تون بی نهایت تشکر می کنم،هر کس بیاد یک سایت راه بندازه و بعد از یک هفته می فهمه ارزش سایت شما چقدره و چقدر براش زحمت کشیده میشه،امیدوارم دوستان ارزش و اهمیت کار شما را درک کنند و قدردان و قدرشناس خوبی برای نگاه و محبت شما باشند.
جناب وبسیما در رابطه بحث امروز سه تا سوال دارم،با اجازتون طرح می کنم:
1-صفحه ربات robots.txt من از اول راه اندازی سایت وردپرسی به شکل زیر است،سایتم است ( http://www.bursiran.com/ ) آیا این شکل از robots.txt درست است
User-agent: *
Disallow: /wp-admin/

2-از یک سال پیش که سایتم را به گوگل کنسول معرفی کردم عکس سایتم نمی آید،5-4 ماه پیش از شما پرسیدم فرمودید نگران نباشم خودش درست می شود ! اما نشد ! به نظر شما این مقدار طبیعی است ؟ ممنون می شوم اگر نگاهی بفرمائید.
3-حدود یک ماه است در Search Consol پیام زیر را دریافت می کنم:
http://www.bursiran.com/: Googlebot can’t access your site
آیا این موضوع به سوال اولم ربط دارد و اگر نه چکار کنم؟ هاستم می گوید از ما نیست !
4- طی یک ماه اخیر با وجود افزایش فعالیت سایتم (افزایش پستهای جدید و تولیدی حد اقل روز 5 پست ) روزی چند تا صفحه ایندکسم کم می شود ؟
پوزش می خوام اگر به ظاهر بعضی از سوالات ربطی به این بحث نداشته باشد،گفتم شاید مرتبط باشد،در هر صورت ممنون میشوم اگر راهنمایی شوم. با احترام شکرانه

سلام.ممنون از زحمات شما
مطالب من با دو لینک تو گوگل ایندکس میشه. لینک اصلی و لینک صفحه گوگل.
مثال :
http://www.molkaneh.com/surface-hub
http://www.molkaneh.com/surface-hub/?print=1
من میخوام از ایندکس شدن لینک صفحه پرینت همه مطالب جلوگیری کنم. البته از افزونه پرینت هم استفاده نمی کنم و قالب خودش این قابلیت رو داره.
میشه از طریق robots.txt این کار رو کرد. ممنون میشم راهنمایی کنید

سلام روزتون خوش
ببخشید من دو مشکل دارم که خیلی درگیرم کرده وبسایتم تو نتایج جستوجوی گوگل قرار نمی گیره تو webmaster هم dns و robots.txt ارور داده نمیدونم چیکار کنم والا
ممنون میشم کمکم کنید

خیلی ممنون از لطف شما

سایت باید راحتی داشته باشد

بله متاسفانه هیچ صفحه ی دیگری را نشان نمی دهد البته من تنها یک هفته است که صفحات سایتم را توسط ابزار fetch وب مستر ایندکس کرده ام اما چیزی که برام سوال است این است که چرا این پوشه را ایندکس می کند
چگونه می توانم دسترسی به این پوشه را محدود کنم؟
به طور کلی چه پوشه هایی در فایل robot قرار بگیرد بهتر است ؟
با تشکر

با سلام
ممنون از پاسخگوییتون
علت اینکه میخواهم wp-content را در robot.txt قرار دهم این است که هنگامی که برای بررسی ایندکس شدن یکی از وب سایت هایم عبارت site:نام دامنه را سرچ میکنم تنها این پوشه را به عنوان ایندکس شده نشان می دهد . که این از نظر امنیتی جالب نیست . بنظر شما مشکل از چه چیزی می تواند باشد؟
به طور کلی چه پوشه هایی در فایل robot قرار بگیرد بهتر است ؟
با تشکر

با سلام
بنده سایتی دارم که با وردپرس نوشته شده است یک سری صفحات وجود دارد که بنده نمیخواهم گوگل آنها را ایندکس کندو در نتایج گوگل نمایش دهدآیااگر آدرس آن صفحات را در این فایل قرار دهم مشکل حل می شود؟
همچنین برای امنیت بیشتر نمیخواهم به پوشه هایی همچون wp-content دسترسی داشته باشد آیا با قرار دادن آن در این پوشه مشکلی برای ایندکس شدن بقیه صفحات پیش نمی آید؟

ممنون از سایت بسیار خوبتون

سلام
امروز یه پیام از طرف گوگل اومد با این محتوا
http://uupload.ir/files/dp0p_firefox_screenshot_2015-10-13t20-32-47.152z.png
زیاد متوجه مشکل نشدم
ممنون میشم راهنمایی کنید

با سلام
علت دریافت Status : Temporarily unreachable در قسمت Fetch as Google هنگام Fetch یک آدرس چیست ؟

با تشکر فراوان

با سلام
همان طور که مستحضرید ، در سرویس جدید گوگل وب مستر ( سرچ کنسول ) ، دیگر آیتم Blocked urls وجود ندارد.
بنابراین بهتر است در متن این پست این نکته را نیز ذکر بفرمایید و اگر این ویژگی جایگزینی در ویرایش جدید سرچ کنسول دارد ، معرفی گردد.
با تشکر

سلام
من از وردپرس استفاده میکنم
سایتم به مدت یک روز از طرف هاست قطع بود
و با این خطا روبرو شدم
لطفا راهنمایی کنید
باتشکر
***

سلام
ببخشید من یه سوال داشتم شاید یکم بی ربط باشه
استفاده از رباتهای بازدید کننده از سایت برای بهبود سایت در نتایج گوگل چقدر مفیده؟
ممنون میشم اگه راهنمایی کنید

ممنون از راهنمایی های شما و ممنون از وبسایت بسیار زیبای شما

سلام . من سایتم قبلا دست یه نفر دیگه بوده … اون طرف یه کاری کرده که دیگه سایت داخل گوگل سرچ نمیشه …. نمیدونم چی کار کرده ..
راهنمایی کنید برای حل این مشکل ….
ممنون

ممنون از مطلب مفیدتون من میخواستم سایت برای بعضی از کلمات گوگل سایت رو بالا نیاره.من برای مشتری سایتی درست کردم که بهینه برای موتور ها است اون موقع از مشتری هزینه برای بهینه سازی درخواست کردم نداد .ولی من سایت را از اول درست کرده بودم . الان برای بعضی از کلمات سایت بالا اومده و اون کلمه ای که من نمیخواستم از سایت خود من زده بالا یه کدی میخواستم که گوگل برای اون کلمه سایت رو بالا نیاره ممنون میشم

1-سلام دوست عزیز لطفاً بهترین افزونه امنیتی وردپرس را معرفی کنید و آیا به نظر شما استفاده از این جور افزونه ها مفیده؟
دوست عزیز شما که خودتون از کاربران وردپرس هستین بهترنیست یه مقدار هم فعالیت روی مقاله های تخصصی وردپرس انجام بدید؟؟؟
باتشکر
خدانگهدار

سپاسگزارم مشکل من با fetch as google حل شد

عذرخواهی میکنم که منظورم رو بد بیان کردم متاسفانه به اشتباه از مشخصه noindex در متاتگ robots استفاده کردم و اسایت من در سرچ گوگل ناپدید گردید با حذف این تگ آیا دوباره سایت من مثل قبل در گوگل دیده خواهد شد؟ از ابزار fetch از گوگل برای صفحات اصلی سایت استفاده کردم

عالی بود با اینکه سایت من در صفحه اول گوگل است ولی این مطلب خیلی بدردم خورد

سلام عالی بود ممنون اما میشه بهم توو یک فایل تکست کدهای روبوت تکست رو بدید بذارم توو بخش روبوت تکست گوگل وبمستر؟؟برام ایمیل کنید لطفا ممنون

سلام استاد فکر نمی کنید که فایل روبات تکست خودتون ناقصه!(سواله بر نخوره بهتون!)

سلام. من یه سایت دارم که خودش روبات داره و داده ها رو می گیره. این صفحم با اینکه صفحه اصلیم هست اصلااا بازدید نداره ولی صفحه ی اخبارم که روبات نداره خیلی بازدید داره.میشه توضیح بدین؟
http://www.mihannerkh.ir (دارای روبات و بازدید کم درحد 10 یا 20 تا)
http://www.mihannerkh.ir/news(بدون روبات و سیستم دستی بازدید حدود 800 تا در روز)

واقعا کار این قسمت را هیچوقت نمیدونستم . منظورم وبمستر تولز بود

سلام
یه سوالی داشتم ، اگه صفحات سایت ما روبات رو ننوشته باشه توی گوگل ایندکس میشه؟ یا حتما باید توی سورس صفحه نشان داده شه
مثال توی صفحه خودم :فقط اینو نشون میده

<meta name="keywords" content="—-

ولی متا روبوت رو نشون نمیده ، لازم هست که حتما نشون بده؟
ممنون

عالی. ممنون که جواب گو هستید.

خب الان روبوتکست من اینه :
http://enterpc.ir/robots.txt
میشه چک کنید ببینید درست نوشته شده یا نه ؟ ممنون میشم.

بله درسته کاملا درست میگید. از دیروز خداروشکر درست شد
بی نهایت سپاسگزارم

سلام وبسمیا
اقا خیلی به کمکتون نیاز دارم
تو وبمستر همه وبلاگهام یه پیامی با این مظمون اومده:
Googlebot can’t access your site –
و توضیحاتش
Over the last 24 hours, Googlebot encountered 17 errors while attempting to access your robots.txt. To ensure that we didn’t crawl any pages listed in that file, we postponed our crawl. Your site’s overall robots.txt error rate is 100.0%.
نمیدونم چرا از دیروز اینطور شده.
باورتون نمیشه ولی بازدیدی هم از گوگل تقریبا میشه گفت ندارم
خواهش میکنم راهنماییم کنید تنها سایتی که میتونم جواب بگیرم شمایید.چون قبلا نتیجه اش رو دیدم
تورو خدا فقط لطفا زودتر راهنماییم کنید
مرسی

سلام با توجه به اینکه دوستمون در مورد وبلاگ رز بلاگ توضیح داد منم همون مشکل رو دارم نمیدونم باید چیکار کنم
چه جوری تموم اون ساب دامینها رو به یک دامنه انتقال بدم؟؟؟

سلام من سایتم اصلا این قسمت براش خالیه بهترین کدی که میتونم بزارم داخلش چی هست؟

Url blocked by robots.txt.
Sitemap contains urls which are blocked by robots.txt.

سلام.من در گوگل مپ در قسمت نقشه این warning را دریافت کرده ام…یعنی چی ؟ روبوت تکستمم چیز خاصی نداره…و اینه :البته اسم سایت رو عوض کردم اینجا..
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /cgi-bin/
Disallow: /wp-content/plugins/
Sitemap: http://example.com/sitemap_index.xml

حالا نظر شما چیه ؟

سلام
من سايت جديدي رو بالا اوردم كه بيشتر مطالبش عكس هست يكي از دوستانم براي ايندكس بهتر تصاوير سايت توصيه كردن اين كد رو در ربوت تكست قرار بدم
User-agent: Googlebot-Image
Allow: /

بعد گذاشتن اين كد گوگل وبمستر اين خطا رو نشون ميده
http://1moda.ir/: Googlebot can’t access your site

الان بايد چي كار كنم كه اين خطا رفع بشه؟

خيلي ممنون ميشم راهنماييم كنيد

مرسی عالی بود

با سلام
با توجه به دستور
Disallow: /wp-content
در وردپس ،پوشه هاي عكس ها جستجو نمي شود،حال براي جستجوي عكس ها و نمايش آنها در موتور جستجوي عكس گوگل بايد چه دستوري نوشت تا عكس ها در گوگل به نمايش در بيايند
در ضمن افزونه ،افاضه كردن خودكار (alt) به عكس ها نصب و فعال مي باشد

نه با زدن site:www.site.ir تو گوگل پست هام میاد نه با کپی کردن کامل عنوان پست ها.بعدش خود وبمستر گوگل زده 30 تا پست ایندکس شده الان 2 هفتس اینطوریه.100 درصد یه مشکلی هست که نمیدونم چیه…

اما در مورد اون قسمت که پیشنهاد شغل دائم ما به شما:حرف شما درسته که تو یه صفحه جدا باید بزارمش ملی من اونو برای نسبت متن به کد گذاشتم چون تو صفحه اول چیز زیادی نوشته نشده و نسبت مت به کد رعایت نشده.
بنظرتون خوبه که اونو از قسمت ادامه مطلب پستها پاک کنم فقط تو صفحه اصلی باشه یا کلا پاک کنم تو یه صفحه جدا بزارم.اخه اینطوری نمیدونم تو صفحه اصلی چی بنویسم که با اون کارم بتونم text ratio رو رعایت کنم

همچنان وبلاگ من مشکل ایندکس داره حدود 20 پست اخیری که گذاشتمو گوگل طی 3 هفته قبل تا الان ایندکس نکرده.آیا ممکنه از robots.txt باشه.تو رزبلاگ جدیدا امکانی اضافه شده که اختیار کامل به کاربرو میده تا robots.txt رو دستکاری کنه.بنظرتون مشکل از چیه ؟
هر کاری رو این وبلاگ انجام دادم ولی ایندکس نمیشه.CDN وصل کردم.محتوای تکراری به هیچ وجه تولید نکردم.80 درصد پست هامو خودم تایپ کردم.عنوان خوب و پیوند یکتای کوتاه و مناسب برای پستها گذاشتم.سرعت لودینگ رو بالا بردم برای عکس های آلت و سایز تعریف کردم.ارور های w3 رو به یکی کاهش دادم.تو گوگل وبمستر ثبت کردم وبلاگو سایتمپو معرفی کردم تو شبکه های اجتماعی فعالیت دارم میکنم.حتی بیشتر پست ها رو تو گوگل فتچ کردم.ولی بعد 2 هفته یه چندتایی بیشتر ایندکس نشده.

اگر در توانتونه یه نگاهی بندازید ببینید مشکل چیه.

ضمنا بنظرتون آیا این سایت خوبیست ؟ http://seositecheckup.com
فاکتور های فوق العاده زیادی رو اندازه گیری میکنه تا نمره آنالیز یک سایت رو در نظر بگیره…حتی فاکتور هایی بیشتر از woorank

یه سری میگن باید لینک روبات سایت رو تو سایت لینک کنی اینجوری گوگل راحت تر میتونه صفحات رو برسی کنه راسته بنظرتون؟

وبسیمای عزیز.من یه وب دارم ولی چندین آدرس دارم.اون ساب دامین ها مخصوص رزبلاگ هست که کاربرا بر اساس سلیقشون یکی رو انتخاب کنن.و من دامنه Ir رو که خریدم به همشون ترجیح دادم.در مورد کدی که گفتین پیداش کردم
جالبش اینجاس تو وبم بود کدش و من آدرس رو فقط تغییر دادم و روی دامنه ای که میخواستم گذاشتم.مقالشم تو نت خوندم.الان یعنی درست انجام دادم؟چون من تست میکنم ریدایرکت نمیشه رو اصلی.یا مدلش اینجوریه که گوگل میتونه بفهمه که اون آدرس اصلیمه و بقیه آدرسا ایندکس نمیشن.میشه شما یه سر بزنین از سورس کد نگا کنین ببینین مشکلی داره یا نه؟
واقعا ممنونتونم حرف ندارید شما

فوق العاده بود.سلام همینطور که میدونید رزبلاگ خودش دارای دامنه های زیادی هست حدودا ۵ ساب دامین داره.
site.rozblog.com
site.rozfa.com
site.rozfa.ir
site.rzb.ir
site.r98.ir
منم یه دامنه ir خریدم براش بعدش تک تک اینا رو من به گوگل معرفی کردم قدیما بدون www الان که نگا میکن ۶ دامنه بدون www ایندکس شده و ۶ دامنه با www ایندکس شده در گوگل دارم که سر جمع میشه ۱۲ تا که این خودش محتوای تکراری حساب میشه.یعنی فاتحه هی میبینم ایندکس نمیشه.ما که دسترسی به فایل Robots.txt نداریم چه کاری میتونیم بکنیم که فقط یک دامنه داشته باشیم بدون www بقیه از دید گوگل خارج شه.یا ردایرکت شه همه رو ir .ضمنا من مقاله “ثبت دامنه اصلی سایت” رو خوندم انجام هم دادم طبق روشتون نتیجه نگرفتم.آیا کدی هست اصولی که از لحاظ گوگل به وب لطمه نزنه ؟

سلام
از کاربران رزبلاگ هستم.وبسایتم هم با www و هم بدون www باز میشه
ازتون درخواست کد باز کردن سایت با www رو دارم(دایرکت) اگر ممکنه یک کدی که در رزبلاگ کار کنه و همین طور هنگام انتقال از حالت بدون www به حالت www ، بیننده وقفه و زمانی رو احساس نکنه دارم
با تشکر فراوان از شما

ممنون.

با سلام و درود
ممنون از راهنمایی های بسیار مفید و سازنده تون
چند وقتی هستش که من میخام محتوای صفحاتی که دارای فایلهای docxجهت دانلود هستند و آدرس اونها بضورت داینامیک تولید میشه رو از دید روباتها مخفی کنم.اما موفق نمیشم
سپاسگزار میشم راهنماییم کنید.
باعرض معذرت من این سوال رو اشتباها در قسمت سایت مپ نوشتم که همین جا به حاطرش پوزش میخام

جالب بود .ممنون از شما

عالی بود متشکر…
راستی اگر صفحه اصلی سایت با استفاده از تک noindex استفاده بشه چه اتفاقی میافته؟
کلا سایت در گوگل ایندکس نمیشه؟
حتی صفحه اول؟

جالب بود ممنون…