Big Data Management and Application Laboratory

빅데이터 및 데이터 수집/저장/분석에 관심있는 석 박사 또는 학부생 인턴 연구원을 모집하고 있습니다. 관심있는 학생은 1) 이력서, 2) 자기소개서를 간단히 작성하여 hyukyoon.kwon [at] seoultech.ac.kr로 연락주세요.

We are looking for the students who are interests in Big data and its collection, management, and analyzation. If you are interested in joining our Lab, please send email to hyukyoon.kwon [at] seoultech.ac.kr including 1) a CV and 2) a cover letter.

연구분야 소개


  • 본 연구실에서는 빅데이터에 대한 관리 및 응용에 대한 연구를 수행합니다.
  • 본 연구실의 가장 큰 특징은 빅데이터 수집에서 부터 수집된 데이터를 분산 시스템이나 데이터베이스를 이용하여 잘 저장 및 관리하고 이를 분석 및 활용하는 전 과정을 다루고 있다는 점입니다.
  • 본 연구실에서는 실용적인 연구를 바탕으로 졸업 이후 실제 활용 가능한 기술을 습득하는 것을 목표로 합니다.

분야 상세 설명


빅데이터 수집

다양한 소스로부터 다양한 유형의 데이터를 수집합니다. 웹, 모바일 기기, IoT 장비 등 다양한 환경으로부터 대용량의 데이터를 빠른 속도로 수집하는 것이 목표입니다.

  • 관심 데이터 유형: 위치정보, 텍스트, 관계형 데이터, SNS, 웹데이터, 그래프 데이터, 이미지, 오디오/악보, 로그 데이터
  • 활용기술: 웹 크롤링, 분산/병렬 크롤링, 데이터 추출 및 변환

빅데이터 저장 및 관리

대용량의 데이터를 데이터베이스 및 분산 스토리지 기술을 활용하여 저장하고 효과적으로 관리합니다.

  • 활용기술: 데이터베이스 (Oracle, MySQL), 분산 데이터베이스, 병렬 검색 엔진, Distributed File System (HDFS), Key-Value Store (Redis, RocksDB, LevelDB, BerkeleyDB), Document Store (MongoDB), 검색엔진 (ElasticSearch)

빅데이터 분석 및 활용

빅데이터로부터 유용한 정보를 검색하고, 서로 다른 유형의 데이터들을 연결하여 새로운 가치의 정보를 발견합니다.

  • 활용기술: 데이터 통합 처리 기술, 정보검색, 병렬/분산 처리 기술, MapReduce (Apache Spark), Machine Learning