NVIDIA 드라이버 설치 및 설정을 마치면 정상적으로 X Windows 환경을 사용할 수 있게 되는데, X Windows가 그래픽 카드를 사용하면서 메모리를 조금 잡아먹게 된다.
Apache Zeppelin 공홈
wget 명령어로 아파치 미러사이트에서 다운로드 받습니다.
1 | wget http://apache.mirror.cdnetworks.com/zeppelin/zeppelin-0.8.2/zeppelin-0.8.2-bin-all.tgz |
전 회사에서 다뤘던 Apache NiFi 와 TensorflowOnSpark를 활용해서 이미지 프로세싱까지 해보는 내용을 다루겠습니다.
| SW dependencies |
|---|
| NVIDIA Graphic Driver |
| CUDA-Toolkit >= 7.5 (GPGPU 연산) |
| 5.x <= cuDNN <= 7.x (DL 고성능 연산용) |
| 3.x <= OpenCV <= 3.4.0 (미디어 포맷 인식 및 결과 Grid 그리기) |
| CMake >= 3.8 (C++ 소스코드 빌드) |
오픈소스 Hadoop 배포판을 다운로드하여 설치 및 설정에 대해서 알아보겠습니다.
아래는 Apache Hadoop 배포판 한국 미러링 사이트입니다.
앞으로 진행할 내용은 6개의 node로 구성된 multi-node distributed Hadoop cluster 를 구성하는 것입니다.
HDP, CDH와 같은 Hadoop 배포판을 사용하지 않고 aphache.org의 Native Hadoop 배포판으로 설치를 진행합니다.
