동시발생 행렬과 하둡 분산처리를 이용한 추천시스템에 관한 연구A Study On Recommend System Using Co-occurrence Matrix and Hadoop Distribution Processing
- Other Titles
- A Study On Recommend System Using Co-occurrence Matrix and Hadoop Distribution Processing
- Authors
- 김창복; 정재필
- Issue Date
- 2014
- Publisher
- 한국항행학회
- Keywords
- Co-occurrence matrix; Collaborative filtering; Hadoop; Matrix factorization; Recommender system
- Citation
- 한국항행학회논문지, v.18, no.5, pp.468 - 475
- Journal Title
- 한국항행학회논문지
- Volume
- 18
- Number
- 5
- Start Page
- 468
- End Page
- 475
- URI
- https://scholarworks.bwise.kr/gachon/handle/2020.sw.gachon/13899
- DOI
- 10.12673/jant.2014.18.5.468
- ISSN
- 1226-9026
- Abstract
- 추천시스템은 선호 데이터가 대형화, 컴퓨터 처리능력과 추천 알고리즘 등에 의해 실시간 추천이 어려워지고 있다. 이에 따라 추천시스템은 대형 선호데이터를 분산처리 하는 방법에 대한 연구가 활발히 진행되고 있다. 본 논문은 하둡 분산처리 플랫폼과 머하웃 기계학습 라이브러리를 이용하여, 선호데이터를 분산 처리하는 방법을 연구하였다. 추천 알고리즘은 아이템 협업필터링과 유사한 동시발생 행렬을 이용하였다. 동시발생 행렬은 하둡 클러스터의 여러 노드에서 분산처리를 할 수 있으며, 기본적으로 많은 계산량이 필요하지만, 분산처리과정에서 계산량을 줄일 수 있다. 또한, 본 논문은 동시발생 행렬처리의 분산 처리과정을 4 단계에서 3 단계로 단순화하였다. 결과로서, 맵리듀스 잡을 감소할 수 있으며, 동일한 추천 파일을 생성할 수 있었다. 또한, 하둡 의사 분산모드를 이용하여 데이터를 처리하였을 때 빠른 처리속도를 보였으며, 맵 출력 데이터가 감소되었다.
- Files in This Item
- There are no files associated with this item.
- Appears in
Collections - IT융합대학 > 전자공학과 > 1. Journal Articles
- IT융합대학 > 에너지IT학과 > 1. Journal Articles
![qrcode](https://api.qrserver.com/v1/create-qr-code/?size=55x55&data=https://scholarworks.bwise.kr/gachon/handle/2020.sw.gachon/13899)
Items in ScholarWorks are protected by copyright, with all rights reserved, unless otherwise indicated.