본문 바로가기 대메뉴 바로가기
닫기

반도체 정밀 공정 흐린 영상 복원 가능하다​
조회수 : 2891 등록일 : 2024-11-26 작성자 : 홍보실

(뒷줄 좌측부터) 바이오및뇌공학과 이승민 석사과정, 이찬석 박사과정, 삼성전자 DS부문 반도체연구소 차세대공정개발실 임예니 연구원, 강철무 파트장 (앞줄 좌측부터) 바이오및뇌공학과 장무석 교수, 삼성전자 DS부문 반도체연구소 차세대공정개발실 이명준 상무

< (뒷줄 좌측부터) 바이오및뇌공학과 이승민 석사과정, 이찬석 박사과정, 삼성전자 DS부문 반도체연구소 차세대공정개발실 임예니 연구원, 강철무 파트장 (앞줄 좌측부터) 바이오및뇌공학과 장무석 교수, 삼성전자 DS부문 반도체연구소 차세대공정개발실 이명준 상무 >

생물학 연구에 사용되는 형광 현미경이나 반도체 산업에 사용되는 주사전자현미경의 공통점은 불안정성으로 인해 흐려진 영상(블러, blur)을 보정하는 과정이 반드시 필요하다는 점이다. 우리 연구진이 굉장히 강한 잡음에 의해 손상된 왜곡 영상에 대해 적응형 필터와 생성형 인공지능 모델을 융합해 영상을 복원하는 데 성공했다. 

우리 대학 바이오및뇌공학과 장무석 교수 연구팀이 삼성전자 DS부문 반도체연구소 차세대공정개발실과 공동 연구를 통해 왜곡 및 강한 잡음이 존재하는 의료·산업 영상을 복원하는 기술을 개발했다고 26일 밝혔다. 

스마트폰 카메라 사진에 영상의 흐림·왜곡이 생겼을 때 보정하는 문제를 디컨볼루션(deconvolution) 또는 디블러링(deblurring)이라고 하며, 흐려진 영상 정보만 이용해 선명한 영상을 복원하는 기술을 블라인드 디컨볼루션(blind deconvolution)이라고 한다. 흥미롭게도 디컨볼루션 문제는 일상뿐만 아니라 생물학 연구, 반도체 산업 등 다양한 분야에서 공통적으로 발생한다. 

예를 들어, 형광 현미경은 세포와 분자 수준의 미세 구조를 시각화하기 때문에 측정된 형광 신호는 산란이나 회절, 수차 등의 효과로 인해 흐려지기 때문에 디컨볼루션 기법을 통해 보정하는 과정이 반드시 필요하다. 

또한, 반도체 산업에서는 수천 개의 생산 공정 중간에 검사·계측 기술을 통해 발생할 수 있는 미세 공정 오류를 감지하고, 공정 수율 개선을 위한 프로세스 개선 과정에 사용되는 주사전자현미경이 전자 빔의 불안정성으로 인해 영상이 흐려지기 쉬우며, 이를 보정하는 과정이 반드시 필요하다. 

연구팀은 이처럼 영상이 흐려지는 원인은 움직임, 빛의 산란, 전자의 불안정성 등과 같이 다양하지만, 공통적으로 ‘영상의 흐려짐을 없앤다’라는 점에서 수학적으로 동일한 접근 방법이 활용될 수 있다고 생각했다. 

특히 잡음 수준이 높은 영상의 경우, 영상의 잡음을 효과적으로 억제함과 동시에 블러 효과가 제거된 선명한 영상을 복원하는 과정의 균형을 맞추는 것이 매우 중요하다는 점을 착안했다. 

연구팀은 위너 디컨볼루션*을 기반으로 영상을 복원하는 접근법을 개발했다. 이를 적응형 잡음 억제 변수, 영상 생성형 인공지능 모델과 결합해 영상 복원 과정에서 발생할 수 있는 잡음을 억제하고 영상 선명도도 높였다.

*위너 디컨볼루션(Wiener deconvolution)은 왜곡된 영상을 역 필터(inverse filter)를 기반으로 깨끗한 영상으로 복원하는 전통적인 방식임.

연구팀은 잡음 민감도가 높은 주사전자현미경으로부터 측정된 왜곡된 영상으로부터 깨끗하고 초점이 맞는 나노미터 단위의 반도체 구조에 대한 영상을 성공적으로 복원해 냄으로써 반도체 검사·계측에 매우 효과적으로 적용할 수 있음을 실험적으로 증명했다.

그림 1. 영상의 블러링 및 잡음에 의한 손상 과정과 연구진이 제안한 잡음 적응형 블러 제거 기술이 적용되는 과정

< 그림 1. 영상의 블러링 및 잡음에 의한 손상 과정과 연구진이 제안한 잡음 적응형 블러 제거 기술이 적용되는 과정 >

바이오및뇌공학과 이찬석 연구원은 “이번 연구를 통해 강한 잡음 속에서 왜곡된 영상을 복원하는 난제를 해결했다ˮ며, 이어 "이번 연구에서는 무작위적 잡음을 극복하는 영상 복원 기술을 개발하는 데에 집중했고, 향후 비균일 영상 복원 및 다양한 손상 형태를 극복하는 영상 복원 기술 개발에 주력할 것이다ˮ라고 밝혔다. 

바이오및뇌공학과 이찬석 박사과정이 제1 저자로 참여한 이번 연구는 컴퓨터 비전 분야 최고 학회인 ‘제18회 유럽 컴퓨터 비전 학회(The 18th European Conference on Computer Vision)’ 에서 지난 10월 1일에 이탈리아 밀란에서 발표됐고, Springer Nature에서 출판하는 Lecture Notes in Computer Science의 ECCV 2024 프로시딩 집에 게재될 예정이다. (논문명: Blind image deblurring with noise-robust kernel estimation).

그림 2. 주사전자현미경으로 측정된 흐린 반도체 시료 및 테스트 타겟 영상으로부터 잡음 적응형 영상 블러 제거 기술을 적용한 결과

< 그림 2. 주사전자현미경으로 측정된 흐린 반도체 시료 및 테스트 타겟 영상으로부터 잡음 적응형 영상 블러 제거 기술을 적용한 결과 >

반도체블러블러제거인공지능적응형필터생성형인공지능ECCV2024 장무석 공과대학 바이오및뇌공학과
목록
관련뉴스