• 발표자: 유기성(아하랩스)

요구조건 분석

• SNS
  • 컨텐츠
  • 컨텐츠 업로드
  • 컨텐츠 확인하는 사용자
  • 통계정보 확인 어드민
    • 사용자 통계정보
    • 컨텐츠 통계정보

기술선택

• Hadoop, Spark 대신 ELK 도입한 이유?

  • NodeJS
  • search, aggregation 필요성
  • 빅데이터 프로세싱보단 Analytics, 시각화에 집중

• Input: Logstash / Processing: ES / Output: Kibana

• 서버 다운될 경우

  • LB에서 서비스 중단 안내페이지로 리다이렉션시키고, 오류 해결

Q&A

Q. input, processing, output 중에서 에러 발생 시 유실되는 데이터 백업 방법?

A. 아직 발생하지 않아 고려를 못함

Q. ES 사용 시 문의 및 비용절감 방법?

A. 아직 CBT 단계.

Q. 이벤트성 로그, 애플리케이션 로그 분리?