빅 데이터에 대한 통찰력, '스파크' 성공비결
상태바
빅 데이터에 대한 통찰력, '스파크' 성공비결
  • 박유환
  • 승인 2019.04.08 17:32
  • 댓글 0
이 기사를 공유합니다

▲아파치 스파크는 오늘날 가장 큰 빅 데이터 플랫폼 중 하나다(사진=123rf)

하둡의 후속작으로 언급된 아파치 스파크는 오늘날 가장 큰 빅 데이터 플랫폼 중 하나다. 오랜 시간 동안 빅 데이터에는서 큰 진보를 이뤘고 2017년도 마찬가지다.

스파크의 채택은 주요 데이터 플랫폼이 스파크와 연동해 상호 운용돼 커뮤니티가 기하 급수적으로 성장함에 따라 갈수록 유명해지고 있다. 주 계약자와 프로젝트 관리 위원회(PMC)는 이미 유명한 IBM, 페이스북 및 마이크소로프트다.

최신 데이터브릭스 기술에 추가 된 델타는 모든 데이터 프로세싱이 클라우드의 모든 부분과 스케일에서 처리되도록 AWS S3 스토리지보다 상위의 스마트 캐시 레이어며 구글과 Azure도 곧 뒤따를 예정이다.

스파크의 성공 비결은 간단하다. 유용성과 성능에 중점을 둔 통합 프레임 워크, 강력한 오픈 소스 기반과 커뮤니티는 모두 현재의 성공에 기여한다.


댓글삭제
삭제한 댓글은 다시 복구할 수 없습니다.
그래도 삭제하시겠습니까?
댓글 0
댓글쓰기
계정을 선택하시면 로그인·계정인증을 통해
댓글을 남기실 수 있습니다.
주요기사
이슈포토
  • 광주‧전남 신재생에너지산업 도약의 날개 달다
  • ㈜ 해양에너지, 신재생에너지 발전사업 추진 MOU 체결
  • 효성, 한전과 '차세대 전력시장' 공략
  • 해줌, 충북 진천에 800kW급 태양광 발전소 준공
  • 충남도, 당진시에 ‘신재생에너지 융복합 혁신벨트’ 조성
  • Gwangju signe des accords d'investissement avec 10 entreprises