1. Junior Big Data Engineer
Работает с базами данных и выполняет простые запросы. Пишет скрипты для автоматизации задач. Помогает поддерживать ETL-процессы.
Навыки: основы Python, Java, Scala; знание SQL и баз данных; базовое понимание Hadoop, Spark, и других Big Data технологий; опыт работы с Linux и системами контроля версий (Git), базовые навыки в ETL-процессах.
Опыт: от 0 до 2 лет
2. Big Data Engineer
Разрабатывает и поддерживает архитектуру больших данных. Оптимизирует ETL-процессы. Управляет потоками данных в реальном времени.
Навыки: опыт работы с облачными платформами (AWS, Google Cloud, Azure); оптимизация производительности системы
Опыт: от 2 до 5 лет
3. Senior Big Data Engineer
Руководит проектами по обработке и анализу данных. Разрабатывает стратегии и архитектуры для новых проектов. Обучает младших инженеров.
Навыки: опыт работы с Big Data технологиями; разработка масштабируемых систем; управление командами.
Опыт: от 5 до 8 лет
4. Lead Big Data Engineer или архитектор данных
Руководит большими проектами и внедряет стратегии по обработке данных в компании; определяет стандарты работы с данными; близко взаимодействует с руководством компании, чтобы цели отдела совпадали с бизнес-целями компании.
Навыки: идеальное владение инструментами Big Data; разработка комплексных решений для больших данных; понимание, как принятые решения влияют на бизнес.
Опыт: от 8 лет