استخراج داده و کرال اطلاعات از ۲۷ سایت ایرانی🔸 پروژه ویژه#python, #web_scraping برای یک پروژه استخر…
انتشار: 2026/07/27 00:24 UTC
استخراج داده و کرال اطلاعات از ۲۷ سایت ایرانی🔸 پروژه ویژه#python, #web_scraping برای یک پروژه استخراج داده، به یک برنامهنویس یا تیم فنی مسلط به Web Crawling، Web Scraping و استخراج ساختاریافته اطلاعات نیاز داریم.دامنه کلی همکاری شامل استخراج اطلاعات از ۲۷ وبسایت ایرانی است. این وبسایتها عمدتاً ساختار سادهای دارند و پیچیدگی غیرمتعارفی از نظر رابط کاربری یا فناوری ندارند؛ بااینحال، برخی از سایتها دارای ورود کاربری، کپچا، نشست کاربری و محدودیتهای معمول دسترسی هستند.قیمت پیشنهادی برای 27 سایت میباشدهدف ما در این مرحله، انتخاب یک فریلنسر توانمند برای شروع همکاری و سپس واگذاری تدریجی کل ۲۷ سایت است.فرآیند انتخاب و همکاری:مرحله اول ـ ارزیابی فنی روی ۲ سایتدر ابتدای کار، آدرس ۲ سایت در اختیار متقاضیان قرار میگیرد.متقاضی باید برای این ۲ سایت یک کرال اولیه و محدود انجام دهد تا موارد زیر قابل ارزیابی باشد:توانایی تحلیل ساختار سایتروش استخراج اطلاعاتکیفیت و ساختار خروجیتمیزی و خوانایی کدمدیریت صفحات مختلفدقت استخراجسرعت و پایداری اجرای اسکریپتتوانایی توسعه استخراج در مراحل بعدیکرال اولیه صرفاً برای اطلاعات قابل دسترس عمومی انجام میشود و نیازمند دریافت نام کاربری و رمز عبور نخواهد بود.این مرحله بهعنوان دمو و ارزیابی فنی در نظر گرفته شده است و بابت آن هزینهای پرداخت نمیشود. بنابراین انتظار نمیرود متقاضی در مرحله دمو، کل سایت را بهصورت عمیق استخراج کند یا یک سامانه کامل عملیاتی تحویل دهد.هدف این مرحله صرفاً مشاهده یک نمونه واقعی و محدود از توانایی فنی متقاضی است.مرحله دوم ـ پروژه پرداختی برای کرال عمیق همان ۲ سایتپس از بررسی دموها، یک یا چند فریلنسر برتر انتخاب میشوند.برای فریلنسر منتخب، پروژهای جداگانه و پرداختی برای استخراج کامل و عمیق همان ۲ سایت تعریف خواهد شد.در این مرحله ممکن است موارد زیر موردنیاز باشد:ورود به حساب کاربریمدیریت نام کاربری و رمز عبورمدیریت Session و Cookieعبور از مراحل ورودمدیریت کپچااستخراج لیستها و جزئیاتپیمایش کامل Paginationدریافت فایلها و پیوستهااستخراج داده از صفحات داخلیذخیرهسازی خروجی ساختاریافتهمدیریت خطا، Timeout و Retryتهیه لاگ اجرای رباتاطلاعات ورود موردنیاز، پس از انتخاب فریلنسر و در قالب پروژه پرداختی ارائه خواهد شد.مرحله سوم ـ پروژه جدید برای ۲۵ سایت باقیماندهدر صورت رضایت از کیفیت، دقت، سرعت و نحوه همکاری فریلنسر در پروژه ۲ سایت اول، یک پروژه جدید برای استخراج ۲۵ سایت باقیمانده تعریف خواهد شد.بنابراین این آگهی صرفاً برای انجام یک دمو یا یک پروژه کوچک نیست و میتواند به همکاری مستمر و واگذاری پروژههای بیشتر از سمت مشتریان ما منجر شود.دامنه فنی مورد انتظار:فریلنسر میتواند متناسب با ساختار سایتها از ابزارهای مناسب استفاده کند.انتخاب ابزار بر عهده فریلنسر است؛ اما خروجی باید پایدار، قابل بررسی و قابل توسعه باشد.الزامات فنی:استخراج صحیح و کامل دادههای موردنظرپشتیبانی از صفحات لیست و جزئیاتمدیریت Pagination یا بارگذاری تدریجی اطلاعاتمدیریت ورود کاربریمدیریت Cookie و Sessionامکان مدیریت کپچامدیریت Timeout، Retry و خطاهای ارتباطیجلوگیری از ثبت داده تکراریارائه خروجی ساختاریافتهترجیحاً ارائه خروجی در قالب JSON، CSV یا پایگاه داده البته در یک UI باید نمایش بدیدکدنویسی خوانا و قابل نگهداریامکان اجرای مجدد اسکریپتارائه توضیحات لازم برای نصب و اجرارعایت محرمانگی اطلاعات وروددر مرحله دمو، ارائه یک نمونه محدود ولی واقعی و قابل ارزیابی کافی استتحت یک UI ساده. نیازی به استخراج کامل تمام صفحات، حل نه... توسط خریدار: محمد صالح سامعیاطلاعات بیشتر:parscoders.com/project/612870/%D8%A7%D8%B…