- 문피아에서 파이썬을 이용해 데이터 수집
- 수집한 데이터는 hdfs로 저장
- 분석 결과를 확인하기 위해 zepplin_notebook 폴더를 확인해주세요.
- data_analysis: 데이터 분석 관련
- etc: 기타 내용
- data_sample: 데이터 형식과 데이터 샘플
- error_case: 코드 작성시 주의사항
- sources: 코드 작성에 참고한 참고사항
- testing: 코드 작성시 testing한 코드들
- web_crawler: 크롤링 관련 코드
- zeppelin_notebook: 분석 결과 zeppelin notebook 코드