用MATLAB处理大数据

교육과정세부정보

본1일교육과정은메모리에불러오기힘들정도로큰사이즈의데이터파일들을기존알고리즘에적용하는방법을다룹니다。MATLAB에서빅데이터를표현하는방법과이에맞춰기존코드가효율적으로작동하도록조정하는방법을알아봅니다。또한대규모분석을위해사용자의컴퓨터리소스및클라우드를활용하는방법을알아봅니다。본과정의주본과정의주。

  • 데이터소스에서읽어오기위한데이터저장소생성
  • 高형배열을사용한빅데이터현및조작
  • 사용자지정데이터가져오기및高형배열에사용자지정함수적용
  • 컴퓨터클러스터및클라우드환경에서작업

第一天


빅데이터알고리즘프로토타이핑

摘要目的:메모리에들어가지않는데이터세트에기존알고리즘을적용합니다。

  • 데이터저장소를사용하여데이터가져오기
  • 高형배열생성
  • 高형배열에서알고리즘실행
  • 高형배열에대해코드최적화
  • 클라우드환경에서데이터읽어오기

사용자지정데이터와알고리즘처리

摘要目的:사용자지정형식의데이터를가져오고,高형배열에대해구현되지않은알고리즘을적용합니다。

  • 파일데이터저장소와사용자지정데이터저장소를사용하여사용자지정형식의데이터가져오기
  • 단일파일을부분적으로가져오기
  • 高형배열에변환,축소,이동윈도우연산적용

클러스터및클라우드활용

摘要目的:컴퓨터로구성된클러스터나클라우드환경에서빅데이터알고리즘을실행합니다。

  • 로컬및원격클러스터
  • 클러스터검색및연결
  • 클라우드환경에서클러스터설정
  • 파일액세스관련고려사항

수준:중급

수강자필수조건:

기간:1일

언어:德语,英语,한국어