Data Engineer (Web Scraping & OSINT)
Everstar · Kyiv, Kyiv, Ukraine
Technology, Information and Internet · 2-10 employees
About the role
Build and maintain an OSINT infrastructure for systematic data collection, storage, and analysis from open sources. Develop automated scrapers and ETL pipelines to transform raw data into strategic intelligence and actionable insights.
What they look for
Requirements
Requires practical experience in OSINT, data engineering, or cybersecurity with a focus on automated data collection. Proficiency in Python, database management (SQL/NoSQL), and ETL processes is essential for this role.
Benefits
Full description
Ми — EVERSTAR, перша рекрутингова агенція в MilTech для тих, хто готовий створювати технологічне майбутнє.
Але досить про нас, розказуємо вакансію.
У зв’язку з розширенням R&D-відділу відкрита позиція Data Engineer (Web Scraping & OSINT). Ми шукаємо технічно сильного інженера з мисленням розслідувача, який допоможе нам з нуля вибудувати інфраструктуру цифрової розвідки (OSINT). Якщо ваша амбіція — не просто писати код і «скрейпити пів інтернету», а перетворювати терабайти сирих даних з відкритих джерел на стратегічний інтелект, розплутувати глобальні ланцюги постачання та знаходити неочевидні зв'язки, ця роль саме для вас.
Що тебе чекає?
- Побудова OSINT-інфраструктури: З нуля вибудувати процеси системного збору, зберігання та оновлення публічних/напівпублічних даних (сайти, реєстри, звіти, соцмережі).
- Автоматизація (Data Engineering): Розробляти та підтримувати автоматизовані скрейпери/краулери та ETL/ELT-пайплайни (grab → extract → load), щоб повністю відійти від ручного пошуку.
- Проєктування сховищ: Створювати структуру для зберігання результатів із застосуванням time-series підходу (історичність даних), щоб відстежувати зміни у джерелах у часі.
- Аналіз ринків та трендів: Проводити глибокі дослідження локального та глобального ринків (виробники, ланцюги постачання, сировина, обладнання, технологічні тренди).
- Моніторинг сигналів: Відстежувати ризики та можливості (зміни в компонентній базі, дефіцити, поява нових гравців) та готувати регулярні аналітичні дайджести.
- Створення баз знань: Формувати контактні мапи (decision-makers), переліки компаній та аналізувати зв'язки між гравцями ринку для потреб сорсингу.
- Взаємодія з командою: Тісно працювати з командою: перетворювати high-level запити у чіткі плани збору даних, швидко перевіряти гіпотези.
- Підбір інструментів: Налаштовувати та використовувати необхідні OSINT tools, cloud-рішення, VPN для стабільності систем у межах правового поля та етичних стандартів.
Необхідні навички та досвід:
- Досвід роботи: Практичний бекграунд в OSINT, Data Engineering або кібербезпеці з жорстким фокусом на автоматизований, а не ручний збір даних.
- Програмування та скрейпінг: Вміння писати та підтримувати надійні скрейпери/краулери (на Python або інших релевантних технологіях).
- Робота з базами даних: Практичний досвід із реляційними (SQL) та/або нереляційними (NoSQL) БД. Розуміння time-series підходу для версіонування даних є значним плюсом.
- Розуміння ETL/ELT: Досвід нормалізації, збагачення, дедуплікації, логування та підготовки даних до подальшого аналізу.
- Системне мислення: Здатність самостійно побудувати процес від А до Я: збір → нормалізація → збереження → відстеження змін → зручний пошук результатів.
- Аналітичні навички: Висока увага до деталей, вміння верифікувати надійність джерел, відсіювати інформаційний шум і перетворювати «сирі» дані на практичні інсайти.
- Soft Skills: Готовність працювати в динамічному середовищі, здатність аргументувати висновки, вести прозору документацію та ефективно колаборувати з командою.
Простий і зрозумілий старт. Оформлення через Дія.City — без складних схем.
Баланс між роботою і життям. 24 дні відпустки, гнучкий графік і до 10 днів віддаленої роботи на рік.
Підтримка, коли вона потрібна. Медичне страхування та консультації з психологом.
Можливість вчитись і рости. Компенсація курсів і доступ до навчальних матеріалів. А також підтримка від команди, менторство та баді.
Гідна оплата. Ринкова компенсація та бонуси.
Культура, яку відчуваєш. Визнання досягнень, подарунки до важливих подій, додатковий вихідний у День народження, корпоративи та сильна внутрішня спільнота.
Команда поруч. Офіс у Києві (правий берег) з усім необхідним та людьми, з якими легко працювати.