DEA-C01(14)
-
Storage
Amazon S3개요Amazon S3는 AWS의 핵심 요소무한 확장 가능한 스토리지로 홍보됨많은 웹사이트가 SE를 백본 스토리지로 사용많은 AWS 서비스가 S3와 통합 연계됨사용 사례백업 및 스토리지재난 복구아카이브하이브리드 클라우드 스토리지애플리케이션 호스팅미디어 호스팅데이터 레이크 & 빅 데이터 분석소프트웨어 배포정적 웹사이트BucketsS3는 객체(파일)을 “버킷”(디렉토리)에 저장할 수 있게 함버킷 이름은 전 세계적으로(모든 리전, 모든 계정 포함) 유일해야 함버킷은 리전 단위로 정의됨S3는 전역 서비스처럼 보이지만, 특정 리전에서 생성됨네이밍 규칙대문자, 밑줄(_) 사용 불가3~63자IP 형식 불가소문자 알파벳 또는 숫자로 시작해야 함접두사 xn-- 불가접미사 -s3alias 불가Object객체..
2025.09.30 -
Data Engineering Fundamentals
데이터의 종류정형 데이터비정형 데이터반정형 데이터정형 데이터정의정의된 방식이나 구조로 구성된 데이터관계형 데이터베이스특징질의가 쉬움행과 열로 구성됨일관된 구조를 가짐예데이터베이스 테이블일관된 컬럼을 가지는 CSV 파일엑셀 스프레드 시트비정형 데이터정의사전에 정의된 구조나 틀이 없는 데이터특징사전 처리 없이 질의하기 쉽지 않음다양한 형식으로 제공됨예고정된 형식이 없는 텍스트 파일비디오, 오디오 파일이미지이메일, 워드 처리 문서반정형 데이터정의정형 데이터처럼 구조화되지는 않지만 태그, 계층, 기타 패턴의 형태로 어느 정도 구조화된 데이터구조는 있지만 문서 전체에서 일관성을 갖지 않음특징어떤 방식으로 태그되거나 분류된 요소정형 데이터보다는 유연하지만 비정형 데이터만큼 무질서하지 않음예XML, JSON이메일 헤..
2025.09.28