데이터 활용을 위해서는 데이터 파이프라인을 구축하고 운용할 수 있는 능력이 필요하다.
데이터 파이프라인을 제대로 구축하기 위해서는 빅데이터를 이해하고 데이터 수집, 저장, 처리, 분석에 필요한 주요 시스템 및 기술들을 이해하고 활용할 수 있어야 한다.
또한, 데이터를 분산처리 할 수 있는  Hadoop 기본 기능과 역할을 이해하여 데이터 수집 시스템을 구성하고, Flume/Kafka, Nifi와 같은 툴을 활용하여 데이터 수집 방법을 학습한다.
데이터 저장과 처리를 위해서 SQL On Hadoop 기술을 이해하여 Hive, Impala를 실습하고, 실시간 데이터 분석을 위한 Spark의 기본적인 사용법 및 배운 내용을 기반으로 &#160;데이터 수집, 처리, 분석까지&#160;빅데이터 분석 전과정을 다루는 실습을 수행한다.