하둡 개념

Question

HDFS 특징에서 스트리밍 방식으로 데이터에 접근한다고 되어있는데이게 무슨뜻인지 알수 있을까요데이터 처리는 배치 작업에 최적화돼있다고 알고 있는데데이터 접근을 스트리밍 방식으로 한다는게 어떤 방식인지 잘 모르겠네요/

하두 · Accepted Answer

랜덤~특정부분만 인식할수 있다.index화일 필요.스트리밍~처음부터 전체를 별도의 가공없이 읽어들이는 방식.빠른 응답이 아닌, 많은 량의 데이터처리

호후히후이 · Answer

하두//감사합니다 !

하두 · Answer

블록크기로 io가 발생할겁니다.

호후히후이 · Answer

하두// 감사합니다 !~!~

하마 · Answer

RPC 통신 아시죠? 하둡에서는 RPC를 이용해서 어떤 정보를 단순 요청 응답식으로 호출하고, 그 결과에 따라 진짜(?) 데이터 즉 분산된 파일을 전송합니다. RPC가 단답느낌이라면 , 그런 데이터 전송은 뭔가가 흐르는 느낌을 주지 않겠습니까? 따라서 스트리밍이라고 합니다.하둡코어를 보면 내부에 RPC 클래스와 스트리밍클래스가 따로 존재하며 위에 설명한것을 지원하기위한 유틸리티로 존재합니다.

하둡 개념

5개의 답변

#hdfs 목록