일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 | 31 |
- r
- BigData
- 그래프 질의언어
- Cypher
- 그래프 에코시스템
- GSQL
- SparkML
- spark
- 그래프 데이터베이스
- graph database
- Federated Learning
- RStudio
- Graph Ecosystem
- Python
- Neo4j
- 그래프
- SQL
- GDB
- 딥러닝
- DeepLearning
- TigerGraph
- GraphX
- Graph Tech
- 인공지능
- TensorFlow
- 연합학습
- graph
- 분산 병렬 처리
- RDD
- 빅데이터
- Today
- Total
목록BigData/Hadoop (10)
Hee'World
-- 출처 http://blrunner.com/18 -- 하둡은 비즈니스에 효율적으로 적용할 수 있도록 다양한 서브 프로젝트가 제공됩니다. 이러한 서브 프로젝트들이 상용화되면서, 하둡 에코 시스템(Hadoop ECO system)이 구성됐습니다. 참고로 하둡 에코 시스템은 하둡 생태계라고 표현되기도 합니다. 아래 그림은 하둡 에코 시스템을 나타낸 것입니다. 분산 데이터를 저장하는 HDFS와 분석 데이터를 처리하는 MapReduce가 하둡 코어 프로젝트에 해당하며, 나머지 프로젝트는 모두 하둡의 서브 프로젝트입니다. 아파치 하둡 프로젝트에 속하는 프로젝트도 있지만, 업체에서 자사의 솔루션으로 이용하다가 오픈 소스로 공개한 프로젝트도 있습니다. 각 각의 서브 프로젝트들의 특징은 다음과 같습니다. 1. Zoo..
먼저 저는 VMware에 CentOS 6.4 버전으로 4대의 가상 머신을 만들어서 설치를 하였습니다. 1번 머신은 NameNode 2번 머신은 DataNode01, SecondaryNode 3번 머신은 DataNode02 4번 머신은 DataNode03 이렇게 구성을 하였습니다. 바로 설치에 들어가겠습니다. 먼저 하둡 설치 전에 해야 할 설정 및 설치가 있습니다. OraclJDK설치와 SSH 설정, hosts파일 설정 ,profile설정 입니다. CentOS6.4를 설치하면 디폴트로 OpenJDK가 설치되어 있습니다. 자세히 아는 것은 아니지만 OpenJDK는 오픈소스로 구현된 JDK 입니다. 자주 업데이트도 되고 안정성 또한 떨어진다고 알고 있습니다. 반면 OracleJDK는 OpenJDK보다는 안정성..