'data engineering' 카테고리의 글 목록

다음과 같은 지식을 학습하고 정리합니다 벌크형, 스트리밍 형 데이터 전송 스트리밍형의 데이터 전송인 메시지 배송 구조와 트레이드오프 성능을 얻고 신뢰성이 희생되는 경우 등 메시지 배송에 있어서 프로세스 시간과 이벤트 시간의 구별 이벤트 시간을 고려한 최적화 데이터 색인을 통한 최적화 NoSQL 데이터베이스의 몇 가지 특성과 구분 데이터 축적의 전반적인 플로우 4-1 벌크 형 스트리밍 형의 데이터 수집 데이터 전송에는 벌크 형과 스트리밍 형의 두 종류가 있음 각각의 방법으로 분산 스토리지에 데이터가 저장될 때까지의 흐름을 살펴보자. 객체 스토리지와 데이터 수집 빅데이터는 대부분의 경우 확장성이 높은 분산 스토리지에 저장됨 분산 형의 데이터베이스가 이용되는 경우도 있지만 대량으로 파일을 저장하기 위한 객체 ..

data engineering 2024. 1. 21. 16:07

이전 1 다음