Python-розробник (Web Scraping)

EVA 🔥
$$$
Product

Шукаємо Middle Python Developer у команду розробки платформ.

Ти працюватимеш над системами збору даних із зовнішніх сайтів та їх інтеграцією у внутрішні бази й data-пайплайни.
 

Що потрібно робити:

  • Розробляти та підтримувати Web Scrapers для HTML, API та JS-сайтів.
  • Працювати з антибот-захистом, proxy, rate limits, retries та fingerprinting.
  • Обробляти й трансформувати дані та завантажувати їх у реляційні БД.
  • Розробляти рішення, які масштабуються на 50+ джерел і легко підтримуються.
  • Працювати з Git та code review.
     

Що важливо: 

  • Впевнений Python, asyncio.
  • requests / httpx, BeautifulSoup / lxml / parsel; бажано Scrapy.
  • Глибоке розуміння HTTP: headers, cookies, sessions, proxy.
  • SQL та практичний досвід роботи з реляційними БД: batch insert, транзакції, індекси.
  • Розуміння патернів проєктування та вміння застосовувати їх на практиці.
     

Буде плюсом:

curl_cffi, Playwright / Puppeteer, undetected-chromedriver, Docker, Celery / RQ, досвід роботи з proxy-провайдерами.

Якщо тобі цікаві Python, Web Scraping, робота з даними та складними web-системами — будемо раді познайомитися!

Required languages

Published 31 August
56 views
·
7 applications
See stats of candidates who applied for this job 👀
To apply for this and other jobs on Djinni login or signup.
Loading...