탐비의 개발 낙서장

SQL 구조 표준 SQL 문법 데이터 조회 SELECT ex) SELECT 컬럼명1, 컬럼명2 FROM 테이블명; ex) SELECT * FROM 테이블명; 테이블 구조 참조하기 (DESC) ex) DESC 테이블명; 검색 조건 지정하기 WHERE ex) SELECT * FROM 테이블명 WHERE no = 2; //no열의 값이 2인 경우만 조회 ex) SELECT * FROM 테이블명 WHERE name='홍길동'; ex) SELECT * FROM 테이블명 WHERE no 2; //no열의 값이 2가 아닌 경우만 조회 ex) SELECT 열1, 열2 FROM 테이블명 WHERE 조건식; WHERE절 조건 조합하기 ex) SELECT * FROM 테이블명 WHERE 조건1 OR 조건2; ex ) SEL..

1. 아파치 스파크(Apache Spark)란? - 빅데이터 처리를 위한 오픈소스 병렬 분산 처리 플랫폼- 인메모리 기반의 대용량 데이터 고속 처리 엔진- 범용 분산 클러스터 컴퓨팅 프레임워크- 빅데이터에 관심있는 여러 개발자와 데이터 과학자에게 표준 도구가 되어가는 중 2. 스파크의 특징 A. 인메모리 기반의 빠른 처리 맵리듀스를 활용한 데이터 처리 과정의 경우에는 중간 결과도 저장소에 보관하므로 데이터 크기가 커져도 문제없이 작동하며, 복구도 비교적 쉬우나, 특정 데이터의 부분 집합에 대해 반복해서 쿼리를 발생하는 등의 연속해 이루어지는 데이터의 분석 처리 시 디스크와 네트워크 I/O 발생으로 작업 속도에 제약이 있습니다. 반면 스파크의 경우에는 연속으로 이루어지는 처리 전체를 검토한 뒤에 그에 맞는..