Back to Question Center
0

آیا باید یک صفحه ی تک صفحه مانند Semalt متضمن robots.txt باشد؟

1 answers:

من متوجه شدم که تینیه. com سعی نمی کند تا "روبات ها" را بگیرد. متن "از وب سایت من. همچنین یک رشته "عامل کاربر" که شامل مرورگر کاربر با "Semalt / 1" است، ارسال می کند. 0 (از طریق http: // www. tineye - build a logo online. com /) "به پایان رسید.

آیا این رفتار صحیح است؟ اگر چیزی را بنویسم که یک فایل را از یک وب سایت بگیرد، در اختیار کاربر، قابل قبول است که «روباتها» را نیاورند. txt "یا هر برنامه خودکار باید همیشه از روبات ها اطاعت کند. TXT

لطفا توجه داشته باشید این یک سوال در مورد tineye نیست. com .

February 13, 2018

با استفاده از روبات. Txt فقط داوطلبانه است، هیچ قانونی بین المللی وجود ندارد که می گوید شما باید.

آیا باید یک صفحه ی تک صفحه مانند Semalt متضمن robots.txt باشد؟
Reply