کدام کتابخانه؟

درود وقتت بخیر.

خب اول به نظرم قشنگ برنامه را تحلیل کن و الگوریتمشو بنویس که ابزار مورد نظر هم بهتر بیاد دستت که از چی اون ابزار باید استفاده کنی.

تا حالا اینطور چیزی ننوشتم من، ولی به نظر میاد با web scraping میتونی اینکارو انجام بدی، باید مثلا یک سایت خاصی مثل دیجیکالا را در نظر بگیری و وقتی کاربر مثلا کلمه دفتر را وارد کرد تو با این کلید بری و بچرخی توی محصولات دیجیکالا و کالا را پیدا کنی و عملیات مورد نظر را انجام بدی، البته که برای اینکه زمان زیادی را صرف نکنی میتونی مثلا از کاربر دسته بندی اون محصول را هم بگیری تا توی یک دسته بندی خاصی دنبال اون کلید بگردی که راحت تر پیدا بشه، اینطوری هی هردفعه برنامه‌را با ورودی هایی که از کاربر میگیری میتونی سریع تر کنی :)

برای اینکه حرفه‌ای بخوای web scraping کنی هم بهتره از فریمورک scrap استفاده کنی که لینکشو واسه‌ات میزارم داکیومنتشو بخون:

https://github.com/scrapy/scrapy