제목 | 소셜네트워크 데이터에서의 분산 그래프 파티션 |
학회 기간 | 2015.06.24. ~ 2015.06.26 |
역할 | 제 2저자, 하둡 환경 세팅, 번역 |
요약 (내용) | 본 논문에서는 빅데이터 처리 기반의 Spark를 활용한 그래프 파티셔닝 알고리즘의 효율성을 제안한다. 이에 따라 Hadoop 클러스터에서 Spark를 구동하여 유사한 개체간의 그룹을 형성하는 그래프 파티셔닝 알고리즘을 구현하였으며, 결론적으로 본 논문에서 제안하는 알고리즘과 Hadoop에서 구현된 다른 알고리즘의 성능을 비교분석하였다. 실험에 사용된 데이터로써 페이스북 프로필의 그래프 구조를 사용하였으며 이를 통해 알고리즘의 실용성을 확인하였다. 실험에 사용된 소스코드는 Spark에서 지원하는 Scala로 구현하였고 빠른 처리를 위해 로컬 Hadoop 클러스터에서 진행하였다. |
발표기관 | 한국정보과학회 |
석사과정 연구생 Wasiq라는 친구의 영어논문을 한글로 번역해주었다.
그리고 나도 Spark를 하게 되었다.
'Paper' 카테고리의 다른 글
지식기반 경로 빅데이터를 이용한 웹 내비게이션 시스템 구현 (0) | 2015.12.28 |
---|---|
지식기반 경로 빅데이터를 이용한 내비게이션 시스템 (0) | 2015.12.28 |
이미지 검색을 이용한 사진입력 게임 인터페이스 구현 (0) | 2015.12.28 |
대용량 경로데이터 분류에 기반한 경험적 최선 경로 추천 (0) | 2015.12.28 |
Classifying Big Trajectory Data using K-means Clustering Algorithm with MapReduce (0) | 2015.12.28 |