빅데이터 이해하기
초보자를 위한 빅데이터 이해하기
실시간 분석 IoT 빅데이터 발표자료
데이터 사이언티스트의 역할
성공적인 빅데이터 활용 3대요소
R, 그리고 빅데이터 | R 시각화 1, 2, 3
하둡 플랫폼의 활용 | 이교수의 멘붕하둡
블록체인 이해하기
블록체인 2019
비트코인, 블록, 체인, 분산장
블록체인 비즈니스 모델
문과생 블록체인 이해하기 도서
스톡옵션 관련 정리 1
창업자 필수 성장통 13가지
블록체인 DApp 서비스 UX 개선을
[강의]빅데이터의 소스 유형 정리

빅데이터 활용방향과 인사이트 도출
데이터 3대 분석기법간 관계



 
작성일 : 12-03-02 11:13
대표적 분석기술 `하둡` `R` `NoSQL` 주목
 글쓴이 : 빅데이터
조회 : 3,327  
   http://news.naver.com/main/read.nhn?mode=LSD&mid=sec&sid1=105&oid=029&… [387]
오픈소스SW 기반 공통점

최근 적용기업 크게 늘어

최근 빅 데이터 분석을 위한 대표적인 기술로 분산처리 기술 프로젝트인 `하둡(Hadoop)', 분석엔진인 `R', 비관계형 데이터베이스관리시스템(DBMS)인 `NoSQL'이 꼽힌다. 이들 기반기술은 오픈소스 소프트웨어(SW)라는 공통된 특징이 있다.

하둡은 오픈소스 분산처리 기술 프로젝트로, 정형과 비정형의 빅 데이터 분석에서 가장 선호되고 있다.

이 프로젝트는 대량의 자료를 처리할 수 있는 대규모의 컴퓨터 클러스터에서 동작하는 분산 응용 프로그램을 지원하는 기술이다. 야후, 페이스북 등에 사용되고 있으며, 최근 이를 적용하는 기업이 크게 늘어나고 있다.

기본적으로 비용효율적인 x86 서버로 가상화된 대형 스토리지를 구성하고, 저장된 거대한 데이터 세트를 간편하게 분산처리 할 수 있는 자바 기반의 프레임워크를 제공한다.

R은 주로 대학, 연구소, 바이오산업을 중심으로 사용돼왔다. 하지만 최근 구글, 페이스북, 아마존 등이 기본 분석 플랫폼으로 사용하는 것이 알려지면서 많은 기업이 분석 업무에 R을 도입하기 시작했다.

R은 통계 계산과 시각화를 위한 언어와 개발환경을 제공한다. R 언어와 개발환경을 통해 기본적인 통계 기법부터 모델링, 최신 데이터 마이닝 기법까지 구현하고 개선할 수 있다. 자바나 C, 파이썬(Python) 등의 다른 프로그래밍 언어와 연결하는 것도 쉽다.

NoSQL은 전통적인 관계형 DBMS(RDBMS)와는 다르게 설계된 비관계형 DBMS로, 대규모의 데이터를 유연하게 처리할 수 있는 것이 강점이다.

RDBMS의 경우 일관성(모든 노드는 같은 시간에 같은 데이터를 보여줘야 한다)과 유효성(일부 노드가 다운돼도 다른 노드에 영향을 주지 않아야 한다)에 중점을 두고 있다. 반면, NoSQL기술은 분산가능성(네트워크 전송 중 일부 데이터를 손실하더라도 시스템은 정상적으로 동작해야 한다)에 중점을 두며, 일관성과 유효성은 보장하지 않는다.

오픈소스 진영에서 HBase, 카산드라, 몽고DB 등과 같은 대표적인 NoSQL 프로젝트가 큰 관심을 모으고 있다. [이 게시물은 빅데이터님에 의해 2018-03-09 22:10:33 개발자토크에서 이동 됨]
게시글을 twitter로 보내기 게시글을 facebook으로 보내기 게시글을 Me2Day로 보내기 게시글을 요즘으로 보내기
 
 

전체 239 건
번호 제목 작성자 작성 조회
239 빅데이터 & 머신러닝 국비지원 무료교육 아이티윌교육 09-29 362
238 [빅데이터 아카데미] 금융·의료·유통 빅데이터 분석 전문가/빅… RWDAS 07-29 1214
237 [빅데이터 아카데미] 제1회 빅데이터 제조·기획 분야 전문가 과… RWDAS 06-23 1759
236 ★★★ 2019년~ 최고의 웹사이트와 모바일앱을 찾습니다 ★★★ 한국인터넷전… 10-22 2390
235 시각화 비즈니스 대시보드를 시작하는 비기너를 위한 가이드 올리비아 09-23 2125
234 빅데이터 및 블록체인 교육 안내 행복만땅 07-24 2302
233 [기상청X다음소프트XGS25·랄라블라] 2019 날씨 빅데이터 콘테스… 다우 05-31 1702
232 SK(주) C&C | 직무소개 영상 4편 [빅데이터] 와리바시 05-27 1743
231 [데이터랩] 현직개발자의 드립력으로 배우는 쉽고 재미있는 빅데… (1) findme 01-15 1623
230 "빅데이터 비즈니스 멘토링" BIGTORY 4기 예비창업자과정 참가자… 빅데이터팀 03-21 1737
229 EMC, 클라우드 교육·자격증 과정 신설 빅데이터 12-28 5011
228 구글, 연구용 하둡 클러스터 서비스 중단 빅데이터 12-28 2358
227 “향후 5년 간 데이터 과학자 수요 폭발적으로 늘어날 것” 빅데이터 12-06 2499
226 대한민국 SW개발자여 "다시 일어나라" (1) 빅데이터 11-25 3666
225 페이스북-트위터 DB기술 핵심 NoSQL ‘카산드라 완벽 가이드’ (1) 빅데이터 11-25 7306
 1  2  3  4  5  6  7  8  9  10