지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2024.11
- 수록면
- 832 - 841 (10page)
- DOI
- 10.5909/JBE.2024.29.6.832
이용수
초록· 키워드
오류제보하기
최근 초해상화 연구에서 생성적 적대 신경망을 활용한 모델들이 높은 성능을 보이며 주목받고 있다. 그러나 이러한 모델들은 복잡한 구조와 다수의 파라미터로 인해 제한된 환경에서의 적용이 어려운 문제가 있다. 이러한 문제를 해결하기 위해 본 연구에서는 생성적 적대 신경망 기반 초해상화 모델의 경량화를 목표로 가지치기와 지식 증류 기법을 결합한 새로운 방법을 제안한다. 제안된 방법은 교사 모델에 가지치기를 적용하여 불필요한 가중치를 제거하고, 중요한 지식만을 학생 모델에 전달함으로써 모델 크기를 교사 모델의 39%까지 줄이면서도 성능 저하를 최소화한다. 실험 결과, 테스트 데이터셋에서 PSNR에서 최대 1.2dB, SSIM에서 최대 0.04의 향상을 기록하였으며, FID와 LPIPS 지표에서도 기존 모델과 유사한 성능을 유지하였다. 본 연구는 제한된 자원 환경에서도 고품질의 초해상화 이미지를 생성할 수 있는 생성적 적대 신경망 모델 경량화의 실용적 가능성을 제시한다.
목차
요약
Abstract
Ⅰ. 서론
Ⅱ. 관련 연구
III. 제안 방법
Ⅳ. 모델 실험
Ⅴ. 결론
참고문헌 (References)
참고문헌 (22)
참고문헌 신청
Hu, T., Lin, M., You, L., Chao, F., & Ji, R. “Discriminator-Cooperated Feature Map Distillation for GAN Compression,” IEEE/CVF Conference on Computer Vision and Pattern Recognition, Vol. 20351, No. 20360, pp. 20351-20360, June 2023. doi: https://doi.org/10.1109/cvpr52729.2023.01949
Li, S., Wu, J., Xiao, X., Chao, F., Mao, X., & Ji, R. “Revisiting Discriminator in GAN Compression: A Generator-Discriminator Cooperative Compression Scheme,” Advances in Neural Information Processing Systems, Vol. 34, pp. 28560-28572, 2021.
He, Y., Zhang, X., & Sun, J. “Channel Pruning for Accelerating Very Deep Neural Networks,” IEEE International Conference on Computer Vision, Vol. 1389, No. 1397, pp. 1389-1397, 2017. doi: https://doi.org/10.1109/iccv.2017.155
Gou, J., Yu, B., Maybank, S. J., & Tao, D. “Knowledge Distillation: A Survey,” International Journal of Computer Vision, Vol. 129, No. 6, pp. 1789-1819, June 2021. doi: https://doi.org/10.1007/s11263-021-01453-z
Dong, C., Loy, C. C., He, K., & Tang, X. “Learning a Deep Convolutional Network for Image Super-Resolution,” Computer Vision –ECCV 2014: 13th European Conference, Springer International Publishing, Zurich, Switzerland, pp. 184-199, 2014.
Li, S., Wu, J., Xiao, X., Chao, F., Mao, X., & Ji, R. “Revisiting Discriminator in GAN Compression: A Generator-Discriminator Cooperative Compression Scheme,” Advances in Neural Information Processing Systems, Vol. 34, pp. 28560-28572, 2021.
He, Y., Zhang, X., & Sun, J. “Channel Pruning for Accelerating Very Deep Neural Networks,” IEEE International Conference on Computer Vision, Vol. 1389, No. 1397, pp. 1389-1397, 2017. doi: https://doi.org/10.1109/iccv.2017.155
Gou, J., Yu, B., Maybank, S. J., & Tao, D. “Knowledge Distillation: A Survey,” International Journal of Computer Vision, Vol. 129, No. 6, pp. 1789-1819, June 2021. doi: https://doi.org/10.1007/s11263-021-01453-z
Dong, C., Loy, C. C., He, K., & Tang, X. “Learning a Deep Convolutional Network for Image Super-Resolution,” Computer Vision –ECCV 2014: 13th European Conference, Springer International Publishing, Zurich, Switzerland, pp. 184-199, 2014.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
GAN 압축 기법을 활용한 효율적인 ESRGAN 가지치기 기법
한국방송미디어공학회 학술발표대회 논문집
2024 .06
-
대조 학습 기반 자가증류를 이용한 단일 영상 초해상화 모델 경량화 기법
방송공학회논문지
2023 .11
-
지식 증류 기법을 사용한 트랜스포머 기반 초해상화 모델 경량화 연구
방송공학회논문지
2023 .05
-
초해상도 이미지 생성을 위한 SE Block과 Inception 모듈 기반 ESRGAN 판별자
컴퓨터그래픽스학회논문지
2024 .12
-
교사 답변 엔트로피 기반 적응적 지식 증류
한국지능시스템학회 논문지
2024 .12
-
이질적 지식증류를 활용한 텍스트 분류 방법론
한국컴퓨터정보학회논문지
2022 .10
-
딕셔너리 증류 기법을 적용한 얼굴 초해상화
한국방송미디어공학회 학술발표대회 논문집
2021 .06
-
초해상화 모델 경량화를 위한 지식 증류 방법의 비교 연구
융합신호처리학회 논문지
2023 .03
-
맥락화 능력 모방을 통한 과제 적합 지식 추출
한국정보과학회 학술발표논문집
2021 .12
-
ESRGAN을 활용한 일사량 데이터 초해상화 모델 설계
한국통신학회 학술대회논문집
2025 .02
-
다중 스케일 얼굴 영역 딕셔너리의 적대적 증류를 이용한 얼굴 초해상화
방송공학회논문지
2021 .09
-
Efficient Visual Sentiment Detector using Knowledge Distillation
한국정보기술학회논문지
2021 .11
-
합성곱 신경망 모델의 가지치기 알고리즘 분석 기법
한국정보과학회 학술발표논문집
2022 .06
-
다시점 동영상의 초고해상도화를 위한 다시점 퓨전 모델
한국방송미디어공학회 학술발표대회 논문집
2024 .06
-
인공신경망 모델 압축을 위한 적응적 양자화 기반 지식 증류 기법
전자공학회논문지
2020 .09
-
경량화된 딥러닝 모델의 성능 보완을 위한 지식 증류 기반의 미세 조정 기법
대한전자공학회 학술대회
2022 .06
-
적대적 활성화도 기반 심층신경망 가지치기 보정 기법
한국정보과학회 학술발표논문집
2022 .06
-
레이어 프루닝을 이용한 생성적 적대 신경망 모델 경량화 및 성능 분석 연구
한국방송미디어공학회 학술발표대회 논문집
2021 .11
-
생성적 적대 신경망 기반의 딥 러닝 비디오 초 해상화 모델 경량화 및 최적화 기법 연구
한국방송미디어공학회 학술발표대회 논문집
2022 .06
-
위성 이미지 초해상화를 위한 ESRGAN 적용 및 성능 평가
한국항공우주학회 학술발표회 초록집
2023 .04
이 논문과 함께 이용한 논문
A Study on the Vulnerability of Semantic Segmentation Model to Data Transformation
Chaewon Moon
,
Dong-hwi Kim
,
Dabin Kang
외 2명
방송공학회논문지
2024
.12
향상된 흉부 엑스레이 진단을 위한 멀티 클래스 토큰 기반 하이브리드 트랜스포머 모델
이창민
,
신호경
,
남우정
전자공학회논문지
2024
.11
NTN에서 조건부 핸드오버 실패율 감소를 위한 최적의 저궤도 위성 선정 알고리즘
서경희
,
권진솔
,
백호기
한국통신학회논문지
2024
.11
eBPF와 AdaBoost를 사용한 컨테이너 공격의 정확한 탐지 기법
신현석
,
조민정
,
유호상
외 2명
한국컴퓨터정보학회논문지
2024
.06
R/Shiny를 활용한 금융 조기경보시스템 개발
이용주
,
김영민
한국정보기술학회논문지
2024
.05
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-151-25-02-091184912