دنبال یک برنامهنویس Python با تجربه در حوزه Web Scraping هستیم برای ساخت یک سیستم اتوماسیون که به صورت Real-Time اطلاعات را از چند منبع آنلاین جمعآوری، پردازش و از طریق بات tg ارسال میکند.
سیستم شامل این بخشهاست:
ماژول Scraping: استخراج داده از چندین سایت (داخلی و بینالمللی) به صورت مداوم و زمانبندیشده دیتابیس: ذخیرهسازی و مدیریت دادههای استخراجشده (PostgreSQL یا MongoDB) ماژول تحلیل: پردازش و مقایسه دادهها با استفاده از OpenAI API برای تشخیص الگو/تطبیق موتور تطبیق (Matching Engine): منطق تجاری برای شناسایی موارد مرتبط بین منابع مختلف بات tg: اطلاعرسانی خودکار و real-time به کاربر نهایی سیستم روی VPS خارجی (اروپا) دیپلوی و اجرا میشود. برخی از سایتهای هدف دارای محافظت Cloudflare/Anti-bot هستند.
مهارتهای الزامی:
Python (سطح متوسط به بالا) Web Scraping با Playwright، Selenium یا Scrapy تجربه در عبور از Cloudflare، Captcha و مدیریت پروکسی (residential/datacenter) آشنایی با کار با API (بهویژه OpenAI API و Telegram Bot API) دیتابیس PostgreSQL یا MongoDB تجربه دیپلوی روی VPS خارجی (Linux, Docker مزیت محسوب میشود) مزیت محسوب میشود:
تجربه قبلی در پروژههای مشابه (price monitoring, arbitrage bots, price aggregators) آشنایی با Rate Limiting و طراحی سیستم پایدار برای اسکرِیپینگ بلندمدت توانایی نگهداری و بهروزرسانی اسکریپتها در صورت تغییر ساختار سایتهای هدف نوع همکاری:
پروژهای، با امکان همکاری بلندمدت برای نگهداری و توسعه پس از تحویل نسخه اول.
