ربات برپاساز
برپاساز یک خزنده کوچک دارد که قیمت مصالح ساختمانی را از سایتهای مرجع میخواند تا تاریخچه قیمت بسازد. اگر این صفحه را از روی لاگ سرورتان باز کردهاید، این نوشته دقیقا برای شماست.
چطور ما را بشناسید
درخواستهای ما با این شناسه میآیند:
BarpasazBot/1.0 (+https://barpasaz.ir/bot)
برخی از میزبانهای ایرانی اتصال با شناسه رباتی را در لایه شبکه میبندند. در آن حالت، برای فهرست کوتاهی از سایتهای مرجع که خودشان کارشان انتشار قیمت روز است، شناسه مرورگر فرستاده میشود. این فقط درباره برقرار ماندن اتصال است و هرگز درباره دور زدن سیاستی که شما اعلام کردهاید: تصمیم مجاز یا غیرمجاز بودن همیشه با نام واقعی ما گرفته میشود.
قاعدههایی که رعایت میکنیم
- robots.txt خوانده و رعایت میشود. اگر مسیری را برای BarpasazBot یا برای همه ببندید، آن مسیر خوانده نمیشود. اگر Crawl-delay اعلام کنید و از فاصله خودمان بیشتر باشد، همان اعمال میشود.
- فاصله میان دو درخواست. دستکم چند ثانیه به هر میزبان، بدون موازیکاری. هدف ما بار نگذاشتن روی سرور شماست.
- فقط صفحههای عمومی قیمت. نه فرم، نه ورود، نه سبد خرید، نه هیچ چیزی پشت احراز هویت.
- هر عدد به منبعش پیوند میخورد. نشانی که به کاربر نشان میدهیم همان نشانی است که عدد از آن خوانده شده؛ دو رشته جدا نداریم.
چه چیزی به شما میرسد
قیمت شما با نام و پیوند به صفحه خودتان نمایش داده میشود. برپاساز خریدار را به شما ارجاع میدهد و خودش چیزی نمیفروشد.
اگر نمیخواهید
یک خط در robots.txt کافی است و همان کار را میکند. اگر ترجیح میدهید مستقیم بگویید، یا اگر میخواهید بهجای خزیدن، خودتان قیمتها را برای ما بفرستید، به نشانی bot@barpasaz.ir ایمیل بزنید. خوراک مستقیم برای هر دو طرف بهتر است: شما کنترل دارید و قیمتتان همان لحظه بهروز میشود.
User-agent: BarpasazBot Disallow: /