빅데이터 이해하기
초보자를 위한 빅데이터 이해하기
실시간 분석 IoT 빅데이터 발표자료
데이터 사이언티스트의 역할
성공적인 빅데이터 활용 3대요소
R, 그리고 빅데이터 | R 시각화 1, 2, 3
하둡 플랫폼의 활용 | 이교수의 멘붕하둡
블록체인 이해하기
블록체인 2019
비트코인, 블록, 체인, 분산장
블록체인 비즈니스 모델
문과생 블록체인 이해하기 도서
스톡옵션 관련 정리 1
창업자 필수 성장통 13가지
블록체인 DApp 서비스 UX 개선을
[강의]빅데이터의 소스 유형 정리

빅데이터 활용방향과 인사이트 도출
데이터 3대 분석기법간 관계



 
작성일 : 12-03-02 11:13
대표적 분석기술 `하둡` `R` `NoSQL` 주목
 글쓴이 : 빅데이터
조회 : 3,141  
   http://news.naver.com/main/read.nhn?mode=LSD&mid=sec&sid1=105&oid=029&… [263]
오픈소스SW 기반 공통점

최근 적용기업 크게 늘어

최근 빅 데이터 분석을 위한 대표적인 기술로 분산처리 기술 프로젝트인 `하둡(Hadoop)', 분석엔진인 `R', 비관계형 데이터베이스관리시스템(DBMS)인 `NoSQL'이 꼽힌다. 이들 기반기술은 오픈소스 소프트웨어(SW)라는 공통된 특징이 있다.

하둡은 오픈소스 분산처리 기술 프로젝트로, 정형과 비정형의 빅 데이터 분석에서 가장 선호되고 있다.

이 프로젝트는 대량의 자료를 처리할 수 있는 대규모의 컴퓨터 클러스터에서 동작하는 분산 응용 프로그램을 지원하는 기술이다. 야후, 페이스북 등에 사용되고 있으며, 최근 이를 적용하는 기업이 크게 늘어나고 있다.

기본적으로 비용효율적인 x86 서버로 가상화된 대형 스토리지를 구성하고, 저장된 거대한 데이터 세트를 간편하게 분산처리 할 수 있는 자바 기반의 프레임워크를 제공한다.

R은 주로 대학, 연구소, 바이오산업을 중심으로 사용돼왔다. 하지만 최근 구글, 페이스북, 아마존 등이 기본 분석 플랫폼으로 사용하는 것이 알려지면서 많은 기업이 분석 업무에 R을 도입하기 시작했다.

R은 통계 계산과 시각화를 위한 언어와 개발환경을 제공한다. R 언어와 개발환경을 통해 기본적인 통계 기법부터 모델링, 최신 데이터 마이닝 기법까지 구현하고 개선할 수 있다. 자바나 C, 파이썬(Python) 등의 다른 프로그래밍 언어와 연결하는 것도 쉽다.

NoSQL은 전통적인 관계형 DBMS(RDBMS)와는 다르게 설계된 비관계형 DBMS로, 대규모의 데이터를 유연하게 처리할 수 있는 것이 강점이다.

RDBMS의 경우 일관성(모든 노드는 같은 시간에 같은 데이터를 보여줘야 한다)과 유효성(일부 노드가 다운돼도 다른 노드에 영향을 주지 않아야 한다)에 중점을 두고 있다. 반면, NoSQL기술은 분산가능성(네트워크 전송 중 일부 데이터를 손실하더라도 시스템은 정상적으로 동작해야 한다)에 중점을 두며, 일관성과 유효성은 보장하지 않는다.

오픈소스 진영에서 HBase, 카산드라, 몽고DB 등과 같은 대표적인 NoSQL 프로젝트가 큰 관심을 모으고 있다. [이 게시물은 빅데이터님에 의해 2018-03-09 22:10:33 개발자토크에서 이동 됨]
게시글을 twitter로 보내기 게시글을 facebook으로 보내기 게시글을 Me2Day로 보내기 게시글을 요즘으로 보내기
 
 

전체 238 건
번호 제목 작성자 작성 조회
208 하둡으로 가는 길 | 제1부 기술과 훈련 빅데이터 01-11 1536
207 아파치 하둡, 마침내 정식 버전 출시 빅데이터 01-05 1362
206 주목! 9가지 오픈소스 빅 데이터 기술 (1) 빅데이터 06-12 2134
205 [적용사례] 네이버 라인은 왜 카카오톡보다 병목현상이 적을까? (6) 빅데이터 05-14 11303
204 어제 얘길하면서 많이 논의되었는 NoSQL에 대한 부분에 있어 참… (7) chiro 05-10 3116
203 No-SQL? Non-SQL? (4) 시나브로 04-30 3333
202 하둡을 활용해 스토리지의 한계를 극복하는 방법 리절트 04-20 1872
201 트위터, 빅데이터 처리 노하우 공개 빅데이터 04-10 2013
200 "하둡 전문가 어디 없소?"…속타는 기업들 (3) 빅데이터 04-10 2342
199 아파치, 하둡 관련 스쿱 프로젝트 전력 지원 빅데이터 04-03 3402
198    스쿱 사용자/개발자 가이드 번역본 (5) 전두엽 04-25 2451
197 DB툴 ‘토드’와 ‘NoSQL’이 만나면? (1) 빅데이터 04-01 2131
196 “몽고DB 쓰지 마세요”…왜? (4) 빅데이터 04-01 5221
195 빅데이터 응용 개발 경진대회 PDPARK 03-26 1541
194 "데이터 과학자가 되려면..." 빅데이터 03-19 2792
 1  2  3  4  5  6  7  8  9  10