About the companyScano специализируется на комплексном мониторинге и анализе медиа, охватывая онлайн-новости, социальные сети, печатные издания, телевидение и подкасты. Наши передовые инструменты отслеживают ключевые слова, релевантные вашим интересам, агрегируя публичный онлайн и редакционный контент, чтобы держать вас в курсе. Известная тем, что захватывает наибольшее количество контента и обсуждений в отрасли, компания Scano помогает клиентам опережать конкурентов. Мы стремимся предоставлять точные и действенные инсайты, которые способствуют принятию лучших решений.
Роль
Это полная занятость на месте для Python-разработчика (сбор данных и веб-интеллект) в Шымкенте, Казахстан. Основные обязанности включают разработку и поддержку бэкенд-компонентов, создание эффективных инструментов сбора данных и внедрение решений для веб-интеллекта. Роль также предполагает оптимизацию производительности, обеспечение масштабируемости, отладку и сотрудничество с кросс-функциональными командами для инноваций в области сервисов, основанных на данных.
Ключевые обязанности
- Разработка и поддержка систем автоматического извлечения данных с новостных сайтов и платформ социальных сетей
- Проектирование масштабируемых решений для непрерывного сбора и обработки данных
- Работа с API, а также с источниками данных без API
- Обработка динамического контента, механизмов защиты от ботов и задач обеспечения согласованности данных
- Обеспечение качества, полноты и своевременности данных
- Сотрудничество с командами продукта и аналитики для улучшения охвата данных
Требования
- Высокий уровень владения Python
- Подтверждённый опыт извлечения данных из веба / сбора данных с медиа или социальных платформ
- Опыт работы с библиотеками и инструментами, такими как BeautifulSoup, Scrapy, Selenium, Playwright или аналогичными
- Понимание принципов работы современных сайтов (HTML, DOM, рендеринг JS, сетевые запросы)
- Опыт работы с API (REST, GraphQL)
- Знание особенностей работы с ограничениями по частоте запросов, прокси и защитой от скрапинга
- Способность работать самостоятельно и решать сложные задачи
В сопроводительном письме, пожалуйста, расскажите, почему именно вас стоит выбрать
