My Environment

OS : Ubuntu 16.04

GPU : GT 940MX (2G)

파이썬 언어를 이용하여 네이버에서 특정 영화와 관련된 뉴스 컨텐츠들의 갯수를 크롤링하는 방법에 알아봅시다.

Data Definition Language (DDL)

다음은 HIVE 데이터베이스의 핵심 DDL이다.

앞서 Linux상에서의 Jupyter 서버 설치에 관해 설명드렸는데 이번에는 Windows 상에서 간단하게 Docker를 이용한 서버설치를 설명드리겠습니다.

Anaconda3+ 버전을 이용한 설치방법도 있지만
Docker만의 컨테이너를 이용한 이미지 관리의 편리함을 느껴보시길 바랍니다.

My Environment

모든 과정은 root계정으로 진행을 권장합니다.

Prerequisits :

1. Linux (Ubuntu, Centos)
2. JAVA 설치된 상태
3. SSH 설치
4. SPARK 다운로드
5. Master PC, Slave PC