Azure Databricks 및 Unity 카탈로그를 사용하여 엔드 투 엔드 데이터 엔지니어링을 마스터합니다. 이 과정은 환경 구성 및 엔터프라이즈급 거버넌스를 다루는 기본 설정에서 프로덕션 배포로 이동합니다. 강력한 수집 파이프라인을 빌드하고, Unity 카탈로그를 사용하여 보안을 구현하고, 최적화된 워크로드를 배포하는 방법을 알아봅니다. 결국, 엄격한 엔터프라이즈 요구 사항을 충족하는 확장 가능한 Lakehouse 솔루션을 구현, 보안 및 유지 관리하는 실용적인 기술을 갖출 수 있습니다.
관객 프로필
대상 그룹은 데이터 분석 개념에 대한 기본적인 지식, 클라우드 스토리지에 대한 기본적인 이해 및 데이터 조직 원칙에 대한 지식이 있는 데이터 엔지니어입니다. SQL로 작업하는 것은 편안해야 하며, 데이터 엔지니어링 작업을 위해 Notebook을 포함한 Python 사용한 경험이 있어야 합니다. 학습자는 데이터 액세스 패턴 및 핵심 데이터 엔지니어링 및 데이터 웨어하우스 개념에 대한 지식과 함께 Azure Databricks 작업 영역 및 Unity 카탈로그를 잘 이해해야 합니다. 또한 Microsoft Entra ID 포함하여 Azure 보안에 대한 기본 지식이 있어야 하며 Git 버전 제어 기본 사항을 잘 알고 있어야 합니다.