Компания Mindrift ищет специалистов по вайбкодингу для проекта Tendem. Роль называется AI Pilot: вы будете работать вместе с агентами Tendem, которые выполняют повторяющиеся задачи, а вы обеспечиваете критическое мышление, экспертизу и контроль качества. Это частичная занятость, полностью удалённо, для технических специалистов с опытом веб-скрапинга, извлечения и обработки данных.
Задачи
- Управление сквозными процессами извлечения данных с сложных сайтов: полное покрытие, точность и надёжная поставка структурированных наборов данных.
- Использование внутренних инструментов (Apify, OpenRouter) и собственных подходов для ускорения сбора, валидации и выполнения задач.
- Обеспечение надёжного извлечения данных с динамических и интерактивных веб-источников, включая JavaScript-рендеринг и изменяющееся поведение сайтов.
- Контроль качества данных: проверки валидации, контроль согласованности между источниками, соблюдение форматов и систематическая верификация перед сдачей.
- Масштабирование операций скрапинга для больших наборов данных: эффективная пакетная обработка или параллелизация, мониторинг сбоев, устойчивость к изменениям структуры сайтов.
Требования
- Желателен опыт от 1 года в анализе данных, AI-автоматизации, инженерии данных или разработке ПО.
- Плюс — степень бакалавра или магистра в инженерии, прикладной математике, компьютерных науках или смежных областях.
- Python-скрапинг: создание надёжных скриптов с использованием BeautifulSoup, Selenium (или аналогов) для многоуровневых сайтов, динамического JS-контента (бесконечная прокрутка, AJAX) и API-эндпоинтов через предоставленный прокси.
- Экспертиза в извлечении данных: работа со сложными иерархическими структурами (регионы → компании → детали), архивными страницами и различными HTML-форматами.
- Обработка данных: очистка, нормализация, валидация; поставка качественных наборов данных в структурированных форматах (CSV, JSON, Google Sheets).
- Практический опыт с LLM и AI-фреймворками для автоматизации и решения задач.
- Внимание к деталям и точности данных.
- Самостоятельность и способность независимо устранять неполадки.
- Английский от Upper-Intermediate (B2) и выше — обязательно.
Условия
- Частичная занятость, полностью удалённо, свободный график; нужны ноутбук и стабильный интернет.
- Оплата за экспертизу: до $32/час в зависимости от навыков, опыта и потребностей проекта. Также указана годовая вилка $64 000–66 560.
- Опыт в гибридной среде, где человеческая экспертиза и AI-агенты работают совместно.
- Участие в бонусных программах, основанных на качестве и стабильности работы.