뚠뚠 뚠뚠

가상화와 컨테이너(+도커)에 관심이 있어서 쉽게 읽어보기 좋은 게 없을까 하던중에 구매했던 도서인데 이제 구매한지 1년이 지남을 곁들인... 개인적으로 읽고 + 기억에 남는대로 아카이빙하는 용도의 글입니다.(개인 사족 2줄 정도..) 1.1 가상화란?실체가 없는 것을 존재하는 것처럼 보이게 하는 기술. 사실 가상화는 'virtualization' 영문으로 봤을 때 더 익숙하게 느껴지지 않을까 싶다. 개인적으로 가장 먼저 연성되었던 건 VM(Virtual Machine). 그리고 뜬금없을 수 있지만 개념이 와닿지 않는다면 버튜버나 버츄얼 아이돌같은 종류를 생각해봐도 좋을듯하다. (맥락 혹은 기반 개념은 결국 동일하기에..)다시 돌아와서 이런 가상화 기술을 통해서 하나의 물리 서버를 가지고 여러 대의 가상 ..

안녕하세요 둔:둔입니다.이제 '스파크 완벽 가이드(Spark The definitive Guide)' 읽기 PART2.구조적API: DataFrame, SQL, Dataset 부분을 보고 있습니다.내용이 많고 이해가 필요한 부분이있어 이제는 Chapter 단위로 끊어보려고합니다.  구조적 API 란?데이터 흐름을 정의하는 기본 추상화 개념배치(Batch)와 스트리밍(Streaming) 처리에서 사용 가능하다3가지 분산 컬렉션 API DatasetDataFrameSQL 테이블과 뷰 DataFrame 과 Dataset잘 정의된 로우와 컬럼을 가지는 분산 테이블 형태의 컬렉션각 컬럼은 다른 컬럼과 동일한 수의 로우를 가져야합니다(값이 없는 경우는 null 표시)컬렉션의 모든 로우는 같은 데이터 타입 정보를 가..

안녕하세요 둔:둔입니다.요즘 스파크를 따로 공부하려고 '스파크 완벽 가이드(Spark The definitive Guide)'를  읽고 있는데요. 오늘은 책의 PART1 부분 내용을 좀 정리해보고자 합니다.(아주 약간의 제 코멘트를 버무린) 앞으로도 종종 파트 단위 혹은 챕터 단위로 스파크 완벽 가이드를 읽으면서 글을 올리려고 해요! 목표는 완독..ㅋㅋㅋㅋ참고로, 제가 읽고 있는 스파크 완벽 가이드는 스파크 2.0 버전을 기반으로 하고 있습니다. 현재 최신 버전은 3.x 대 버전으로 중간중간 공식 문서 내용을 함께 확인해야 할 듯합니다:) 스파크 완벽 가이드 : 네이버 도서네이버 도서 상세정보를 제공합니다.search.shopping.naver.com CHAPTER1. 아파치 스파크란아파치 스파크는 통합..