Data Engineer (Web Scraping & OSINT)
Everstar Kyiv, Kyiv, Ukraine
Technology, Information and Internet · 2-10 employees
Applying here? Try the free cover letter tool — paste this posting and your résumé, no account needed.
About the role
Build and maintain an OSINT infrastructure to automate the collection, storage, and analysis of public data. Develop ETL/ELT pipelines and conduct market research to transform raw data into strategic intelligence.
What they look for
Requirements
Requires practical experience in OSINT, data engineering, or cybersecurity with a focus on automated data collection. Proficiency in Python, database management (SQL/NoSQL), and understanding of data pipeline architecture is essential.
Benefits
Full description
Ми — EVERSTAR, перша рекрутингова агенція в MilTech для тих, хто готовий створювати технологічне майбутнє.
Але досить про нас, розказуємо вакансію.
У зв’язку з розширенням R&D-відділу відкрита позиція Data Engineer (Web Scraping & OSINT). Ми шукаємо технічно сильного інженера з мисленням розслідувача, який допоможе нам з нуля вибудувати інфраструктуру цифрової розвідки (OSINT). Якщо ваша амбіція — не просто писати код і «скрейпити пів інтернету», а перетворювати терабайти сирих даних з відкритих джерел на стратегічний інтелект, розплутувати глобальні ланцюги постачання та знаходити неочевидні зв'язки, ця роль саме для вас.
Що тебе чекає?
- Побудова OSINT-інфраструктури: З нуля вибудувати процеси системного збору, зберігання та оновлення публічних/напівпублічних даних (сайти, реєстри, звіти, соцмережі).
- Автоматизація (Data Engineering): Розробляти та підтримувати автоматизовані скрейпери/краулери та ETL/ELT-пайплайни (grab → extract → load), щоб повністю відійти від ручного пошуку.
- Проєктування сховищ: Створювати структуру для зберігання результатів із застосуванням time-series підходу (історичність даних), щоб відстежувати зміни у джерелах у часі.
- Аналіз ринків та трендів: Проводити глибокі дослідження локального та глобального ринків (виробники, ланцюги постачання, сировина, обладнання, технологічні тренди).
- Моніторинг сигналів: Відстежувати ризики та можливості (зміни в компонентній базі, дефіцити, поява нових гравців) та готувати регулярні аналітичні дайджести.
- Створення баз знань: Формувати контактні мапи (decision-makers), переліки компаній та аналізувати зв'язки між гравцями ринку для потреб сорсингу.
- Взаємодія з командою: Тісно працювати з командою: перетворювати high-level запити у чіткі плани збору даних, швидко перевіряти гіпотези.
- Підбір інструментів: Налаштовувати та використовувати необхідні OSINT tools, cloud-рішення, VPN для стабільності систем у межах правового поля та етичних стандартів.
Необхідні навички та досвід:
- Досвід роботи: Практичний бекграунд в OSINT, Data Engineering або кібербезпеці з жорстким фокусом на автоматизований, а не ручний збір даних.
- Програмування та скрейпінг: Вміння писати та підтримувати надійні скрейпери/краулери (на Python або інших релевантних технологіях).
- Робота з базами даних: Практичний досвід із реляційними (SQL) та/або нереляційними (NoSQL) БД. Розуміння time-series підходу для версіонування даних є значним плюсом.
- Розуміння ETL/ELT: Досвід нормалізації, збагачення, дедуплікації, логування та підготовки даних до подальшого аналізу.
- Системне мислення: Здатність самостійно побудувати процес від А до Я: збір → нормалізація → збереження → відстеження змін → зручний пошук результатів.
- Аналітичні навички: Висока увага до деталей, вміння верифікувати надійність джерел, відсіювати інформаційний шум і перетворювати «сирі» дані на практичні інсайти.
- Soft Skills: Готовність працювати в динамічному середовищі, здатність аргументувати висновки, вести прозору документацію та ефективно колаборувати з командою.
Простий і зрозумілий старт. Оформлення через Дія.City — без складних схем.
Баланс між роботою і життям. 24 дні відпустки, гнучкий графік і до 10 днів віддаленої роботи на рік.
Підтримка, коли вона потрібна. Медичне страхування та консультації з психологом.
Можливість вчитись і рости. Компенсація курсів і доступ до навчальних матеріалів. А також підтримка від команди, менторство та баді.
Гідна оплата. Ринкова компенсація та бонуси.
Культура, яку відчуваєш. Визнання досягнень, подарунки до важливих подій, додатковий вихідний у День народження, корпоративи та сильна внутрішня спільнота.
Команда поруч. Офіс у Києві (правий берег) з усім необхідним та людьми, з якими легко працювати.
Similar roles
-
Senior Data Engineer II
Oscar Health New York, New York, United States · $181K–$237K/yr
-
Data Engineer
AcuityMD $113K–$159K/yr
-
Staff Data Engineer, Analytics
Afresh San Francisco, California, United States · $168K–$250K/yr
-
Data Engineer - Agentic AI
Defense Unicorns Springfield, Virginia, United States · $149K–$201K/yr
-
Senior Data Engineer
Southend Pharmacy Houston, Texas, United States · €45K–€65K/yr
-
Senior Data Engineer (Talent Pool)
ioet San José de Alluriquín, Santo Domingo de los Tsáchilas, Ecuador