Backend Developer Python - Amazon Parsing
Зіткнулися зі складністю при парсингу, потрібне рішення, і надалі додаткова робота з парсингу чи інших задач, яких вистачає.
Питання ось у чому: Що передавати в запит, щоб Амазон віддавав всю рекламу?
Amazon не завжди видавав рекламу коректно (порівнюючи з інкогніто) – причина була наче у відсутності *куків*.
Підставили свої *кукі*, внаслідок чого видача була правильною.
Потім усі позиції вручну перевіряли, щоб статистка 100% коректна збиралася. Все добре працювало.
Але коли почали варіювати хедерси, *кукі* перестали працювати і знову відсутність рекламних блоків.
Шукали якісь сутності прив'язує до себе *кукі* з хедерсів і це поки user agent. Швидше за все *кука* прив'язується щодо нього і коли приходить інший user agent - Амазон це детектить і не показує рекламу.
Потрібен фахівець із сильним бекграундом у парсингу, бажано досвідом саме з пошуковою видачею Amazon!
Є регулярний шматок роботи з парсингу та інiших задач.
Дякую