일상의 영감, Nomad-engHu

  • 홈
  • 태그
  • 방명록

HDFS 1

[Bigdata] MapReduce구현 완벽정리

1. 구성요소 HDFS의 구성요소는 클라이언트,네임 노드,데이터 노드 3가지가 있다. 클라이언트는 아시다시피 데이터 송수신을 요청하는 곳이고, 네임노드는 config, mongos같은 역할을 하고 데이터노드는 shard처럼 실제 데이터 저장역할을 한다. (저번에 올린 글에서 config,mongos,shard의 역할을 다루었습니다) *노드=컴퓨터 2. Finalize & 맵리듀스(mapReduce) 하나의 key,value방식으로 다 나누는 것을 맵 리듀스라고 한다 key값이 같은 것들을 모아서=> map( )함수단계 key별로 계산한다=>reduce( )함수단계 다음 mongodb쿼리를 cmd창에 하나씩 입력해준다(//는 설명) use test db.words.save({text:'read a book..

IT 프로그래밍/빅데이터 2021.03.10
1
더보기
프로필사진

Git> https://github.com/hyojeongpark Theme> 영화,책, IT 리뷰

  • 분류 전체보기 (62)
    • IT 프로그래밍 (59)
      • Java 자바 (0)
      • 빅데이터 (25)
      • Golang (9)
      • 하이퍼레저 패브릭 (3)
      • 블록체인 (12)
      • 개발일지 (4)
    • 지원&합격후기 (1)
    • 경제금융상식 (1)
    • 일상의 영감 (0)
      • 영화,책 리뷰 (0)

Tag

파이썬데이터분석, mongodb사용법, 로닌지갑, NoSQLdb, NoSQL종류, 콰이어트 플레이스2, 콰이어트 플레이스2개봉, 몽고디비다운로드, mongodb다운로드, MongoDB, 몽고디비사용법, 빅데이터기초, 영화추천, 하이퍼레저 패브릭, Golang, 빅데이터시각화, 넷플릭스영화추천, 영화리뷰, 넷플릭스추천, 빅데이터,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Calendar

«   2025/07   »
일 월 화 수 목 금 토
1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31

방문자수Total

  • Today :
  • Yesterday :

Copyright © Kakao Corp. All rights reserved.

  • Github

티스토리툴바