Memo
메모) 인프콘 2024
팅리엔
2024. 9. 7. 23:05
[지금 무료] 인프콘 2024 다시보기 강의 | 인프런 - 인프런
인프런 | 성장하는 IT인들의 축제, 인프콘 2024에서 진행된 오프닝 및 발표 세션을 영상으로 다시 보실 수 있습니다., ✅ 확인해주세요이 콘텐츠는 2024년 8월 2일 금요일 진행된 인프콘 2024 발표 녹
www.inflearn.com
# 혹시 당신은 데이터를 모르는 백엔드 개발자인가요?
- 데이터 엔지니어는 데이터를 열 중심으로 본다.
- 데이터 카탈로그 - 데이터 맥락 공유 위해 사용 (문서, 코멘트, 검색), 데이터허브(오픈소스)
- 대용량 트래픽... 대용량 데이터 - 분산 처리
- 분석 환경은 분리 운영 - apache spark, hadoop (파일 단위 시스템), s3 적재
- 애플리케이션을 거치지 않고 디비 데이터를 직접 조작하는 경우가 많아 - 데이터 유효성 훼손
- 데이터를 그냥 모두 저장하는 게 나중을 위해 낫다.