Матрица компетенций: Data Engineering
Матрица показывает, что нужно знать на каждом грейде, и открыта полностью. Как мы её составили и как считаем грейд — в методологии.
Hard skills
Skill Passport — Data Science и Machine Learning
Требования и data contractsОбъясняет основные semantics, guarantees и failure modes для «Требования и data contracts».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Ingestion, CDC и streamingОбъясняет основные semantics, guarantees и failure modes для «Ingestion, CDC и streaming».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Хранение и моделирование данныхОбъясняет основные semantics, guarantees и failure modes для «Хранение и моделирование данных».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Трансформации и оркестрацияОбъясняет основные semantics, guarantees и failure modes для «Трансформации и оркестрация».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Качество, metadata и lineageОбъясняет основные semantics, guarantees и failure modes для «Качество, metadata и lineage».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Надёжность и восстановлениеОбъясняет основные semantics, guarantees и failure modes для «Надёжность и восстановление».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Производительность и стоимостьОбъясняет основные semantics, guarantees и failure modes для «Производительность и стоимость».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Data governance и platform enablementОбъясняет основные semantics, guarantees и failure modes для «Data governance и platform enablement».; Различает event time/processing time, retry/replay, duplicate/loss и source/derived evidence.; Понимает границы production access и обязательность review.
Soft skills
Skill Passport — Автономность и глубина
Автономность и масштаб задачОписывает задачи, которые выполнял по чёткой постановке от старшего коллеги или тимлида — конкретные тикеты с готовой декомпозицией. Роль в рассказе — исполнитель отдельных задач; не называет случая, где сам отвечал за результат целой фичи или модуля, а не за один тикет внутри неё.
Глубина технических решенийОписывает ситуацию выбора, но воспроизводит готовое решение (предложенное старшим коллегой, документацией или очевидное по шаблону) — либо называет только один рассмотренный вариант без реального сравнения, либо не может объяснить, почему выбран именно он, а не альтернатива.