Data Scraping & API Engineer

Stanowisko: Data Scraping & API Engineer

Dołącz do naszego zespołu w Polskiej Wywiadowni Gospodarczej, gdzie będziesz tworzyć nowoczesne systemy do pozyskiwania i analizy danych biznesowych. Twoja praca będzie obejmować projektowanie i rozwój backendu, integracje z API oraz automatyzację procesów.

Zakres obowiązków

• Projektowanie i rozwój aplikacji backendowych w PHP/Node.js.
• Praca z bazami danych MySQL.
• Tworzenie, integracja i utrzymanie REST i SOAP API — zarówno po stronie klienta, jak i serwera.
• Projektowanie i dokumentowanie własnych endpointów API zgodnie z najlepszymi praktykami (autoryzacja, wersjonowanie, obsługa błędów).
• Scrapowanie danych ze stron internetowych i parsowanie dokumentów, w tym praca z serwisami wymagającymi logowania, obsługi sesji oraz wypełniania formularzy.
• Automatyzacja zapytań HTTP na poziomie protokołu z uwzględnieniem mechanizmów anti-bot (nagłówki, cookies, fingerprinting).
• Praca w środowisku Linux i systemie kontroli wersji GIT.
• Dokumentowanie kodu i współpraca z zespołem w metodologii Agile.

Wymagania

• Minimum 3 lata doświadczenia w programowaniu backendu.
• Dobra znajomość PHP/Node.js.
• Doświadczenie w pracy z MySQL.
• Umiejętność pracy na systemie Linux.
• Biegłość w tworzeniu i konsumowaniu API w technologii REST i SOAP — znajomość zagadnień takich jak OAuth, JWT, rate limiting i obsługa błędów HTTP.
• Doświadczenie w scrapowaniu stron internetowych, w tym serwisów z zaawansowanymi zabezpieczeniami: obsługa sesji i cookies, automatyzacja formularzy, integracja z serwisami do rozwiązywania CAPTCHA (np. 2Captcha, Anti-Captcha) oraz symulowanie ruchu przeglądarki (np. Puppeteer, Playwright, Selenium).
• Doświadczenie z headless browsers i technikami omijania fingerprintingu.
• Znajomość technik analizy ruchu HTTP (DevTools, Burp Suite lub podobne) w celu odwzorowywania zapytań i automatyzacji procesów.

Mile widziane (opcjonalnie)

• Znajomość CSS i HTML.
• Znajomość dodatkowych technologii i frameworków backendowych.
• Znajomość systemu kontroli wersji GIT.

Oferujemy

• Stabilne zatrudnienie i atrakcyjne wynagrodzenie.
• Możliwość pracy zdalnej lub hybrydowej.
• Współpracę w dynamicznym zespole i środowisku Agile.
• Możliwość rozwoju zawodowego i uczestnictwa w ciekawych projektach.