지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers Journal of KIISE Journal of KIISE Vol.48 No.5
- 발행연도
- 2021.5
- 수록면
- 479 - 485 (7page)
- DOI
- 10.5626/JOK.2021.48.5.479
이용수
초록· 키워드
오류제보하기
인-메모리 데이터 분석 프레임워크에서 성능 개선을 위해 계산된 중간값을 캐시하는 기능을 제공한다. 애플리케이션에서 보다 효과적으로 캐싱하기 위해서는 이로 인한 성능 이득이 고려되어야 한다. 기존 프레임워크는 분산 작업 수준의 실행 시간만을 측정하기에 애플리케이션의 캐시 성능 이득을 예측하기에는 제약이 있다. 본 논문에서는 기존의 task 수준 실행 시간 측정법을 병합한 연산자 수준의 시간 측정법과 인풋 데이터 크기에 따라 함수 비용을 예측하는 모델을 제안한다. 또한, 제안한 모델과 애플리케이션의 실행 흐름을 기반으로 캐싱된 데이터셋으로 인한 성능 이득 예측법도 제안한다. 제안한 모델과 예측법은 캐시 성능 이득을 고려한 캐싱 최적화의 기회를 제공한다. 제안한 연산비용모델은 10x 인풋 데이터에서 평균 7.3%의 오차를 보였으며, 모델을 통해 예측한 성능 이득은 실제 성능 이득과 24% 이내의 차이를 보였다.
목차
요약
Abstract
1. 서론
2. 관련 연구
3. 기존 프레임워크 시간 측정의 한계점
4. 연산비용모델 기반 캐시 성능 예측
5. 정확도 평가
6. 결론 및 향후 계획
References
참고문헌 (13)
참고문헌 신청
Apache Spark. Available: http://spark.apache.org/
Apache Tez. Available: http://tez.apache.org
A. Shinnar, D. Cunningham, V. Saraswat, and B. Herta, "M3r: Increased performance for in-memory hadoop jobs," Proc. VLDB Endow., Vol. 5, No. 12, pp. 1736-1747, Aug. 2012.
J. D. T. X. Shengsheng Huang, Jie Huang, and B. Huang, "The hibench benchmark suite: Characterization of the mapreduce-based data analysis," IEEE 26th International Conference on Data Engineering Workshops, pp. 41-51, Mar. 2010.
Vinicius M. Gottin, Edward Pacheco, Jonas Dias, Angelo E. M. Ciarlini, Bruno Costa, Wagner Vieira, Yania M. Souto, Paulo Pires, Fabio Porto, and Joao G. Rittmeyer, "Automatic Caching Decision for Scientific Dataflow Execution in Apache Spark," Proc. of the 5th ACM SIGMOD Workshop on Algorithms and Systems for MapReduce and Beyond, pp. 1-10, Jun. 2018.
J. D. T. X. Shengsheng Huang, Jie Huang, and B. Huang, "The hibench benchmark suite: Characterization of the mapreduce-based data analysis," IEEE 26th International Conference on Data Engineering Workshops, pp. 41-51, Mar. 2010.
Vinicius M. Gottin, Edward Pacheco, Jonas Dias, Angelo E. M. Ciarlini, Bruno Costa, Wagner Vieira, Yania M. Souto, Paulo Pires, Fabio Porto, and Joao G. Rittmeyer, "Automatic Caching Decision for Scientific Dataflow Execution in Apache Spark," Proc. of the 5th ACM SIGMOD Workshop on Algorithms and Systems for MapReduce and Beyond, pp. 1-10, Jun. 2018.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
인메모리 분석 프레임워크의 캐시 성능 이득 예측 모델
한국정보과학회 학술발표논문집
2020 .07
-
빈번한 참조 패턴의 공격적인 데이터를 사용하여 저전력 L1 캐시 시스템 설계
한국컴퓨터정보학회논문지
2022 .07
-
Study on the Performance Evaluation and Analysis of Mobile Cache Memory
한국컴퓨터정보학회논문지
2020 .06
-
사용자의 동적인 요청을 고려한 소형셀 캐시 전략
한국통신학회논문지
2018 .10
-
사운드 렌더링에 적합한 캐시 성능 측정을 위한 캐시 시뮬레이션
컴퓨터그래픽스학회논문지
2017 .07
-
상이한 메모리 크기를 가지는 분산 환경에서 부하 분산을 위한 캐시 관리 기법
정보과학회 컴퓨팅의 실제 논문지
2015 .08
-
동적 이기종 캐시 서버 네트워크에서의 내결함성 캐싱 시스템 설계 및 구현
전기전자학회논문지
2024 .09
-
FPGA를 이용한 32-bit RISC-V RV32I 기반 최적화된 캐시 구조 설계 및 분석 연구
전자공학회논문지
2025 .04
-
선택적 캐시 플러시를 위한 캐시 구현
대한전자공학회 학술대회
2015 .11
-
A Reinforcement Learning-Based Cache Partitioning Scheme for Multi-Core Environments
Journal of KIISE
2021 .06
-
캐시 이미지의 동적 관리 방법을 이용한 명령어 캐시 성능 개선
정보과학회 컴퓨팅의 실제 논문지
2017 .09
-
소형셀 환경에서 코어망 오프로딩을 위한 캐시 알고리즘
전자공학회논문지
2015 .03
-
LVS-Cache: Low-Degree Vertex Static Cache를 통한 디스크 기반 그래프 엔진 성능 향상
정보과학회 컴퓨팅의 실제 논문지
2018 .11
-
추천 시스템의 데이터 이동 최적화를 위한 임베딩 캐시 모델의 성능 분석
한국정보과학회 학술발표논문집
2023 .06
-
웹 환경에 적합한 보관수명 기반 캐시 교체정책
한국통신학회논문지
2015 .06
-
소형셀 환경에서 사용자 컨텍스트 기반 무선 캐시 알고리즘
한국통신학회논문지
2016 .07
-
FPGA 기반 실시간 영상 워핑을 위한 영상 캐시
전자공학회논문지
2016 .06
-
When Learning-Based Caching at the Edge Meets Data Market
한국정보과학회 학술발표논문집
2021 .06
-
Dynamic Probabilistic Caching Algorithm with Content Priorities for Content-Centric Networks
[ETRI] ETRI Journal
2017 .10
-
콘텐츠의 기대 퀄리티를 최대화하는 디바이스 캐싱 기법
한국컴퓨터정보학회논문지
2021 .01
이 논문의 저자 정보
최근 본 자료
댓글(0)
0