목록빅데이터분석기사 정리 (1)

영보의 SystemOut.log

빅데이터 분석기사 필기 요약 : 1과목 (2)

1. 빅데이터 플랫폼의 요소 기술 - 데이터 생성 기술 - 수집 기술 - 저장 기술 - 공유 기술 - 처리 기술 - 분석 기술 - 시각화 기술 2. ETL (Extract, Transform, Load) - 원천 데이터로부터 필요한 데이터를 추출하여 적재하고자 하는 데이터 웨어하우스에 맞게 변환하여 적재하는 과정 3. 빅데이터 수집 기술 - 크롤링 - 로그 수집기 - 센서 네트워크 - RSS Reader/Open API - ETL 4. 맵 리듀스의 데이터 처리과정 Split (분할) - Map(맵 처리) - Shuffle(셔플) - Reduce(리듀스) 5. 빅데이터 플랫폼의 등장 배경 - 비즈니스 요구사항 변화 - 데이터 처리 복잡도 증가 - 데이터 규모 증가 - 데이터 구조의 변화 - 데이터 분석 유..
자기계발/빅데이터분석기사 2021. 3. 31. 01:36
이전 Prev 1 Next 다음