데이터의 민족
< 데이터 엔지니어(Data Engineer) >
댕구리댕댕구리
2022. 3. 18. 18:46
728x90
반응형
SMALL
<역할>
- 데이터 자체와 데이터를 둘러싼 시스템을 책임
- 데이터 관리, 수집/보관/처리 시스템 개발/구조 설계
- 파이프 라인 구축, 관리 및 유지보수 관리
- 데이터 파이프 라인 관리, AWS/애저/GCP 등 클라우드 백엔드 개발, 하둡, 스파크 등을 이용한 대용량 데이터 분산 처리 시스템 개발
<필요 역량>
- 컴퓨터의 동작과 분산 처리의 원리, 네트워크/클라우드 시스템 ,파일 시스템과 관련 지식
- 코딩 능력
- 머신러닝 개발 지식
- Google certified professional data engineer 자격증 공부 권유
728x90
반응형
LIST