[Paper Review] TransFusion -- A Transparency-Based Diffusion Model for Anomaly Detection
Paper Review
작성자
Woojun Lee
작성일
2025-02-05 01:25
조회
1124
논문 제목: TransFusion -- A Transparency-Based Diffusion Model for Anomaly Detection
Venue: ECCV 2024
인용 수: 6회 (25.01.08 google scholar 기준)
Official Code: https://github.com/MaticFuc/ECCV_TransFusion
요약
해당 논문은 기존 Reconstruction Based AD 계열 논문(DRÆM, 3DRÆM, 3DSR) 을 작성한 Vitjan.Z 저자가 작성한 논문으로 기존의 Two-stage(Reconstruction,Segmentation)기반의 구조에서 벗어나 Diffusion Model을 활용해 One-stage Recon AD를 제안했습니다.
기존의 Gaussian Noise 대신 다양한 deterministic transformation(예: blurring, masking 등)을 forward process에 사용하는 Cold Diffusion (NeurIPS 2023) 방식을 기반으로 ,가우시안 노이즈를 제거하는 Diffusion Process를 진행하는 것이 아닌 투명도(transparency) 기반의 anomaly 제거 및 복원 과정을 iterative하게 수행하는 새로운 diffusion 방식을 제안하였습니다.
기존의 Noise Prediction에서 벗어나, 세개의 projection head를 통해 동시에 정상 이미지, 이상 영역(Mask), 이상 내용(Appearance)을 동시에 추론합니다.
이외 Positional Encoding 적용, 실제 Inference 시 Mask의 오차를 고려한 Simulated Previous Mask를 활용해 학습 과정을 더 강건하게 만들어 MVTecAD, VisA, MVTec3D (현 SoTA)에 모두 높은 성능을 보였습니다
발표 자료 및 발표영상
발표자료: 첨부 파일
발표영상:
전체 12
Junyeong Son
2025-02-05 13:15
이번 세미나는 합성 이상 이미지를 활용한 Reconstruction과 Localization을 동시에 수행하는 이상치 탐지 방법론인 TransFusion이라는 방법론을 제안한 “TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection”라는 논문에 대한 내용을 중심으로 진행되었습니다. 해당 방법론은 기존 Reconstruction 및 Localization 모델로 구성된 2-Stage 구조를 가지고 있는 방법론들이 두가지 모델이 모두 정상적으로 작동해야 이상 탐지에 성공할 수 있다는 것을 문제점으로 지적합니다. 이를 개선하기 위해 TransFusion에서는 비정상 영역의 투명도를 점진적으로 증가하여 최종적으로 정상 영역으로 복원하는 투명도 기반 Diffusion Process를 도입합니다. 이를 통해 하나의 프로세스를 통해 Reconstruction 및 Localization을 수행할 수 있으며, 이후 3개의 Prediction Head를 통해 예측을 수행하게 됩니다. 이전 Reconstruction 기반 AD 방법론들은 가우시안 노이즈를 기반으로 합성 이미지를 활용했는데, 이를 투명도라는 개념을 도입해서 수행한다는 아이디어가 매우 흥미로웠고, 세미나에서 이에 대한 예시를 잘 제시해주셔서 이해하는 데 매우 큰 도움이 되었습니다. 좋은 발표 해주셔서 감사합니다.
Minjeong Ma
2025-02-05 17:57
이번 세미나에서는 기존 Reconstruction 기반 이상 탐지 방법의 한계를 극복하기 위해 투명도 기반의 Diffusion 모델을 활용하는 새로운 접근법을 제안한 ‘A Transparency-Based Diffusion Model for Anomaly Detection’ 논문에 대해 발표해 주셨습니다. 기존의 Two-stage 방식과는 다르게 TransFusion은 투명도를 기반으로 이상 영역을 점진적으로 제거하며 정상 이미지를 복원하는 과정에서, Reconstruction과 Localization을 동시에 수행하는 One-stage 방식을 도입하였다. 또한 기존의 Noise Prediction 방식에서 벗어나, 정상 이미지, 이상 영역, 이상 내용을 각각 추론하는 세 개의 Projection Head를 도입하여 이상 탐지 성능을 극대화하였습니다. 특히, Gaussian Noise를 사용하는 전통적인 Diffusion 모델 대신, Deterministic transformation을 활용하는 Cold Diffusion 방식을 적용한 점이 흥미로웠습니다. 이를 통해 Diffusion 기반 AD 모델 중 가장 빠른 추론 속도를 달성하였으며 단 20-step 만으로도 높은 성능을 보였다는 점에서 효율성 또한 인상깊었습니다. 다만 최신 Diffusion 기반 AD 연구들과의 비교가 일부 누락되었으며, Two-stage 방식 대비 줄어든 연산량이나 학습 파라미터 수에 대한 구체적인 분석이 보완되었다면 더욱 명확한 장점을 입증할 수 있었을 것으로 보입니다. 흥미로운 주제로 좋은 발표해 주셔서 감사합니다.
SangMin Lee
2025-02-06 16:01
이번 세미나에서는 이상 탐지 방법론인 TransFusion에 대해 발표되었습니다. TransFusion은 기존의 Two-stage 방식에서 발생하는 문제를 해결하기 위해, Reconstruction과 Localization을 동시에 수행하는 One-stage 방식을 제안합니다. 이 방법은 투명도 기반 Diffusion 모델을 활용하여 이상 영역을 점진적으로 복원하며, 세 개의 Projection Head를 통해 각각 정상 이미지, 이상 영역, 이상 내용을 예측합니다. 특히, Cold Diffusion 방식을 채택하여 기존 Diffusion 모델에 비해 빠른 추론 속도와 뛰어난 효율성을 자랑하는 점이 인상 깊었습니다. 다만, 다른 최신 Diffusion 기반 AD 방법들과의 비교나 연산량, 학습 파라미터 수에 대한 분석이 추가되었다면 더 강력한 비교가 가능했을 것 같습니다. 매우 유익한 발표였습니다.
Kiyoon Jeong
2025-02-07 18:11
이번 세미나에서는 Reconstruction과 Localization을 동시에 수행하는 One-stage 이상 탐지 모델인 TransFusion이 소개되었습니다. 투명도를 점진적으로 조정하는 Cold Diffusion 방식을 도입해 기존 Gaussian Noise 기반 방식보다 효율적인 이상 탐지를 가능하게 했습니다. 또한, 세 개의 Prediction Head를 활용해 정상 이미지, 이상 영역, 이상 내용을 동시에 예측하며, 단 20-step 만에 빠르고 높은 성능을 달성한 점이 인상적이었습니다. 다만, 최신 Diffusion 기반 AD 연구와의 비교 및 연산량 분석이 보완되었다면 더 강한 차별점을 보여줄 수 있었을 것 같습니다. 좋은 발표 감사합니다!
Jaehyuk Heo
2025-02-10 13:32
이번 세미나는 "TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection" 논문에 대해서 소개해주셨습니다. 본 논문에서 제안하는 TransFusion은 synthetic anomaly image를 활용하여 diffusion process 과정에 reconstruction, mask prediction, anomaly region prediction 을 함께 수행하는 세 가지 head를 적용했다는 점에서 인상 깊게 보았습니다. 해당 방법은 기존 DRAEM과 같은 reconstruction and localization 으로 구성된 two-stage 방식에서 문제가 되는 overgeneralization과 두 과정의 interaction이 없이 순차적으로 학습되어 상호 보완적으로 정보를 교류할 수 없는 문제점을 잘 풀어준 방식이라 생각됩니다. 또한 방법론의 이름과 같이 synthetic region에 대한 투명도를 조절하여 학습에 활용한다는 점에서 인상깊에 보았습니다. 다만, 속도 측면에서 diffusion model 이기 때문에 손실이 생긴다는 점에서는 아쉬움도 남아 있습니다. 좋은 발표 감사합니다.
Woongchan Nam
2025-02-10 16:49
이번 세미나에서는 “TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection” 논문을 기반으로, 기존의 Two-stage 방식에서 발생하는 문제점을 극복하기 위한 새로운 접근법이 소개되었습니다. 해당 논문에서는 synthetic anomaly image를 활용하여, 투명도 기반의 Diffusion Process를 통해 reconstruction과 localization을 동시에 수행하는 One-stage 방식을 제안하고 있습니다. 또한 기존에 Gaussian Noise에 의존했던 방식과 달리, 투명도 조절을 통해 점진적으로 이상 영역을 복원하는 Cold Diffusion 기법을 도입함으로써, 추론 속도와 효율성에서 큰 향상을 이루었다는 점이 돋보였습니다. 해당 논문에서 주장하는 바와 동일하게 저 또한 복원된 이미지를 Segmentation-subnetwork에 주입하는 Two-stage 과정에서는 정보의 공유가 불가능하여 이를 해결한 연구는 없을까라고 생각이 들었는데 해당 연구에서 One-stage로 해결한 점이 인상적이었던 것 같습니다. 향후 Diffusion 기반 AD 모델들이 갖고 있는 문제점인 많은 Training Time 소요를 해결할 수 있는 방법론까지 접목이 된다면 실제 산업 현장에서도 활용될 수 있는 좋은 연구라고 생각이 들었습니다. 좋은 발표 감사합니다.
Doyoon Kim
2025-02-10 20:17
이번 세미나는 이미지 이상치 탐지를 주제로 진행되었습니다. 소개해주신 방법론인 TransFusion은 이상 이미지의 투명도를 이용하여 여러 스텝에 걸쳐 학습하는 과정을 시도하고 있습니다. 즉, 정상, 비정상, 비정상 mask 이미지 세 가지를 이용해 이전 시점의 데이터를 이용해 현 시점의 데이터를 예측하는 학습을 거치게 됩니다. 더불어 localization과 reconstruction의 두 과정을 한 번에 진행한 점도 저자들은 강조하고 있지만, 이에 대한 실험 또는 정확한 비교는 없었던 것이 아쉽게 느껴집니다. Loss를 설정하는 부분에서 전체 이미지에 대한 복원을 추가한 점도 의문이 들지만 수식적으로 보았을 때 나름의 의미가 있는 것으로 보여집니다. 쉬운 설명과 좋은 발표 감사합니다.
Jaewon Cheon
2025-02-14 11:18
이번 세미나에서는 TransFusion: A Transparency-Based Diffusion Model for Anomaly Detection 논문을 중심으로 진행되었습니다. 기존의 이상 탐지 기법들은 Reconstruction과 Localization을 별도의 네트워크에서 수행하는 Two-Stage 방식이었으며, 이로 인해 네트워크 간 정보 교환 부족과 Overgeneralization 문제가 발생했습니다. 이를 해결하기 위해 TransFusion은 투명도 기반 Diffusion Process를 도입하여 비정상 영역의 투명도를 점진적으로 증가시키는 방식으로 정상 영역을 복원하는 접근법을 제안했습니다. Diffusion 모델의 Reverse Process를 활용하여 비정상 부분을 제거하고 점진적으로 정상화하는 구조를 갖추었으며, Reconstruction과 Localization을 통합한 단일 모델 내에서 Anomaly Appearance, Anomaly Mask, Normal Appearance의 세 가지 요소를 동시에 예측하는 Multi-Head 아키텍처를 설계하였습니다. 실험 결과, MVTec 및 VisA 데이터셋에서 기존 Diffusion 기반 이상 탐지 모델 대비 높은 성능을 기록했으며, PatchCore 및 Memory Bank 기반 방식보다 일반화 성능이 우수한 것으로 나타났습니다. 다만, 기존의 Embedding 기반 모델 대비 추론 속도가 다소 느리다는 한계가 있으며, 최적의 Diffusion Step 수를 조정하는 것이 성능 향상에 중요한 영향을 미치는 것으로 분석되었습니다. 이번 발표를 통해 Diffusion 모델을 활용한 이상 탐지에서 Reconstruction과 Localization을 통합하는 방식의 가능성을 확인할 수 있었습니다.
Hun Im
2025-02-14 18:38
이번 세미나에서는 "TransFusion: A Transparency-Based Diffusion Model for Anomaly Detection" 논문을 중심으로 발표가 진행되었습니다. 본 연구는 기존 재구성 기반 이상 탐지 기법에서 발생하는 과도한 일반화와 세부 정보 손실 문제를 효과적으로 극복하기 위해, 이상 영역의 투명도를 점진적으로 조절하는 혁신적인 확산 과정을 제안합니다. 발표자는 이 새로운 접근법이 단일 프로세스 내에서 이상 영역을 점진적으로 정교하게 복원하는 동시에 정상 영역은 원래의 세부 정보를 최대한 보존할 수 있도록 설계되었음을 명확하게 전달하였습니다. 특히, 모델 내부에서 이상 영역과 정상 영역의 경계를 명시적으로 구분하고, 이를 통해 두 영역 간의 상호 보완적 정보를 활용하는 방법론이 인상적이었습니다. 좋은 발표 감사합니다!
Jaehee Kim
2025-02-16 16:01
금일 세미나는 객체와 배경을 별도로 활용하여 Diffusion 모델을 학습하는 이상치 탐지 방법론인 "“TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection”을 중심으로 진행되었습니다. 기존 연구들의 경우 전체 이미지를 이용하여 Diffusion 모델을 학습하는 과정에서 노이즈 주입 및 복원 과정이 이상치 탐지와 잘 align되지 않는 문제점이 존재하였습니다. 이에 해당 연구에서는 이상치로 여길 수 있는 마스크를 생성하고 해당 영역과 타 영역에 대한 보간을 통해 노이즈를 주입하는 방식을 사용하고 있습니다. 또한, localization과 detection 모두 잘 수행할 수 있도록 localization을 위한 head 두개와 detection을 위한 Head 하나를 활용하여 학습하게 됩니다. 이를 통해 기존 방법론 대비 anomaly mask 자체를 잘 탐지할 뿐만 아니라 이상 이미지 자체도 잘 탐지하는 모습을 보이고 있습니다. diffusion 모델이 image anomaly detection 분야에서 꾸준히 좋은 성능을 보이고 있는데, 데이터 측면에서 기존 diffusion 방법론의 한계점을 극복하는 합리적인 시도를 제안한 논문인 것 같습니다. 좋은 발표 감사드립니다.
Hyeongwon Kang
2025-02-18 01:25
이번 세미나에서는 “TransFusion: A Transparency-Based Diffusion Model for Anomaly Detection” 논문이 발표되었습니다. 기존 Two-stage 이상 탐지 방식의 한계를 극복하기 위해 Reconstruction과 Localization을 동시에 수행하는 One-stage Diffusion 모델을 제안한 연구입니다. TransFusion은 투명도 기반의 Diffusion Process를 활용하여 이상 영역을 점진적으로 제거하며 정상 이미지를 복원하는 방식을 적용하였으며, Gaussian Noise 대신 Cold Diffusion을 도입해 빠른 추론 속도를 달성하였습니다. 특히, Multi-Head Projection 구조를 활용하여 정상 이미지, 이상 영역, 이상 내용을 동시에 추론하는 방식이 인상적이었으며, 실험 결과 MVTec 및 VisA 데이터셋에서 높은 성능과 효율성을 입증하였습니다. 다만, 기존 Diffusion 기반 AD 연구들과의 비교 분석이 일부 부족했으며, 연산량 감소 효과에 대한 추가적인 실험이 있었다면 더욱 설득력 있는 연구가 되었을 것으로 보입니다. Diffusion 기반 이상 탐지의 효율성을 극대화한 연구로, 향후 실제 산업 적용 가능성도 기대됩니다. 좋은 발표 감사합니다.
Jinwoo Park
2025-02-19 17:58
금일 세미나는 "TransFusion A Transparency-Based Diffusion Model for Anomaly Detection" 연구를 바탕으로 진행되었습니다. 제안 연구에서는 기존의 Reconstruction과 Localization을 Two-stage로 진행할 경우, 각 네트워크 간 정보 교환의 부재로 인하여 서로 다른 정상 특징을 학습하여 Reconstruction 네트워크가 실패(/성공)해도 Localization네트워크가 이상을 찾을 수 있는(/없는) 경우에서 발생하는 문제점을 해결하고자 합성 이상 이미지를 활용한 Reconstruction과 Localization을 동시에 수행하는 이상 탐지 방법론을 제안하고 있습니다. 이를 위하여 투명도 기반의 Diffusion Process를 도입하여, 비정상 영역의 투명도를 점진적으로 증가시켜 정상 영역으로의 복원을 진행시키며, Two-stage를 하나의 프로세스로 통합한 Transfusion 구조를 제안합니다. 해당 구조에서는 하나의 모델을 바탕으로 Anomaly Appearance, Anomaly Mask, Normal Appearance를 동시에 예측하며 이상을 탐지하고자 하고 있습니다. 발표자분이 상세하게 설명해주셔서 이해가 수월했습니다. 좋은 발표 정말 감사드립니다.
이번 세미나는 합성 이상 이미지를 활용한 Reconstruction과 Localization을 동시에 수행하는 이상치 탐지 방법론인 TransFusion이라는 방법론을 제안한 “TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection”라는 논문에 대한 내용을 중심으로 진행되었습니다. 해당 방법론은 기존 Reconstruction 및 Localization 모델로 구성된 2-Stage 구조를 가지고 있는 방법론들이 두가지 모델이 모두 정상적으로 작동해야 이상 탐지에 성공할 수 있다는 것을 문제점으로 지적합니다. 이를 개선하기 위해 TransFusion에서는 비정상 영역의 투명도를 점진적으로 증가하여 최종적으로 정상 영역으로 복원하는 투명도 기반 Diffusion Process를 도입합니다. 이를 통해 하나의 프로세스를 통해 Reconstruction 및 Localization을 수행할 수 있으며, 이후 3개의 Prediction Head를 통해 예측을 수행하게 됩니다. 이전 Reconstruction 기반 AD 방법론들은 가우시안 노이즈를 기반으로 합성 이미지를 활용했는데, 이를 투명도라는 개념을 도입해서 수행한다는 아이디어가 매우 흥미로웠고, 세미나에서 이에 대한 예시를 잘 제시해주셔서 이해하는 데 매우 큰 도움이 되었습니다. 좋은 발표 해주셔서 감사합니다.
이번 세미나에서는 기존 Reconstruction 기반 이상 탐지 방법의 한계를 극복하기 위해 투명도 기반의 Diffusion 모델을 활용하는 새로운 접근법을 제안한 ‘A Transparency-Based Diffusion Model for Anomaly Detection’ 논문에 대해 발표해 주셨습니다. 기존의 Two-stage 방식과는 다르게 TransFusion은 투명도를 기반으로 이상 영역을 점진적으로 제거하며 정상 이미지를 복원하는 과정에서, Reconstruction과 Localization을 동시에 수행하는 One-stage 방식을 도입하였다. 또한 기존의 Noise Prediction 방식에서 벗어나, 정상 이미지, 이상 영역, 이상 내용을 각각 추론하는 세 개의 Projection Head를 도입하여 이상 탐지 성능을 극대화하였습니다. 특히, Gaussian Noise를 사용하는 전통적인 Diffusion 모델 대신, Deterministic transformation을 활용하는 Cold Diffusion 방식을 적용한 점이 흥미로웠습니다. 이를 통해 Diffusion 기반 AD 모델 중 가장 빠른 추론 속도를 달성하였으며 단 20-step 만으로도 높은 성능을 보였다는 점에서 효율성 또한 인상깊었습니다. 다만 최신 Diffusion 기반 AD 연구들과의 비교가 일부 누락되었으며, Two-stage 방식 대비 줄어든 연산량이나 학습 파라미터 수에 대한 구체적인 분석이 보완되었다면 더욱 명확한 장점을 입증할 수 있었을 것으로 보입니다. 흥미로운 주제로 좋은 발표해 주셔서 감사합니다.
이번 세미나에서는 이상 탐지 방법론인 TransFusion에 대해 발표되었습니다. TransFusion은 기존의 Two-stage 방식에서 발생하는 문제를 해결하기 위해, Reconstruction과 Localization을 동시에 수행하는 One-stage 방식을 제안합니다. 이 방법은 투명도 기반 Diffusion 모델을 활용하여 이상 영역을 점진적으로 복원하며, 세 개의 Projection Head를 통해 각각 정상 이미지, 이상 영역, 이상 내용을 예측합니다. 특히, Cold Diffusion 방식을 채택하여 기존 Diffusion 모델에 비해 빠른 추론 속도와 뛰어난 효율성을 자랑하는 점이 인상 깊었습니다. 다만, 다른 최신 Diffusion 기반 AD 방법들과의 비교나 연산량, 학습 파라미터 수에 대한 분석이 추가되었다면 더 강력한 비교가 가능했을 것 같습니다. 매우 유익한 발표였습니다.
이번 세미나에서는 Reconstruction과 Localization을 동시에 수행하는 One-stage 이상 탐지 모델인 TransFusion이 소개되었습니다. 투명도를 점진적으로 조정하는 Cold Diffusion 방식을 도입해 기존 Gaussian Noise 기반 방식보다 효율적인 이상 탐지를 가능하게 했습니다. 또한, 세 개의 Prediction Head를 활용해 정상 이미지, 이상 영역, 이상 내용을 동시에 예측하며, 단 20-step 만에 빠르고 높은 성능을 달성한 점이 인상적이었습니다. 다만, 최신 Diffusion 기반 AD 연구와의 비교 및 연산량 분석이 보완되었다면 더 강한 차별점을 보여줄 수 있었을 것 같습니다. 좋은 발표 감사합니다!
이번 세미나는 "TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection" 논문에 대해서 소개해주셨습니다. 본 논문에서 제안하는 TransFusion은 synthetic anomaly image를 활용하여 diffusion process 과정에 reconstruction, mask prediction, anomaly region prediction 을 함께 수행하는 세 가지 head를 적용했다는 점에서 인상 깊게 보았습니다. 해당 방법은 기존 DRAEM과 같은 reconstruction and localization 으로 구성된 two-stage 방식에서 문제가 되는 overgeneralization과 두 과정의 interaction이 없이 순차적으로 학습되어 상호 보완적으로 정보를 교류할 수 없는 문제점을 잘 풀어준 방식이라 생각됩니다. 또한 방법론의 이름과 같이 synthetic region에 대한 투명도를 조절하여 학습에 활용한다는 점에서 인상깊에 보았습니다. 다만, 속도 측면에서 diffusion model 이기 때문에 손실이 생긴다는 점에서는 아쉬움도 남아 있습니다. 좋은 발표 감사합니다.
이번 세미나에서는 “TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection” 논문을 기반으로, 기존의 Two-stage 방식에서 발생하는 문제점을 극복하기 위한 새로운 접근법이 소개되었습니다. 해당 논문에서는 synthetic anomaly image를 활용하여, 투명도 기반의 Diffusion Process를 통해 reconstruction과 localization을 동시에 수행하는 One-stage 방식을 제안하고 있습니다. 또한 기존에 Gaussian Noise에 의존했던 방식과 달리, 투명도 조절을 통해 점진적으로 이상 영역을 복원하는 Cold Diffusion 기법을 도입함으로써, 추론 속도와 효율성에서 큰 향상을 이루었다는 점이 돋보였습니다. 해당 논문에서 주장하는 바와 동일하게 저 또한 복원된 이미지를 Segmentation-subnetwork에 주입하는 Two-stage 과정에서는 정보의 공유가 불가능하여 이를 해결한 연구는 없을까라고 생각이 들었는데 해당 연구에서 One-stage로 해결한 점이 인상적이었던 것 같습니다. 향후 Diffusion 기반 AD 모델들이 갖고 있는 문제점인 많은 Training Time 소요를 해결할 수 있는 방법론까지 접목이 된다면 실제 산업 현장에서도 활용될 수 있는 좋은 연구라고 생각이 들었습니다. 좋은 발표 감사합니다.
이번 세미나는 이미지 이상치 탐지를 주제로 진행되었습니다. 소개해주신 방법론인 TransFusion은 이상 이미지의 투명도를 이용하여 여러 스텝에 걸쳐 학습하는 과정을 시도하고 있습니다. 즉, 정상, 비정상, 비정상 mask 이미지 세 가지를 이용해 이전 시점의 데이터를 이용해 현 시점의 데이터를 예측하는 학습을 거치게 됩니다. 더불어 localization과 reconstruction의 두 과정을 한 번에 진행한 점도 저자들은 강조하고 있지만, 이에 대한 실험 또는 정확한 비교는 없었던 것이 아쉽게 느껴집니다. Loss를 설정하는 부분에서 전체 이미지에 대한 복원을 추가한 점도 의문이 들지만 수식적으로 보았을 때 나름의 의미가 있는 것으로 보여집니다. 쉬운 설명과 좋은 발표 감사합니다.
이번 세미나에서는 TransFusion: A Transparency-Based Diffusion Model for Anomaly Detection 논문을 중심으로 진행되었습니다. 기존의 이상 탐지 기법들은 Reconstruction과 Localization을 별도의 네트워크에서 수행하는 Two-Stage 방식이었으며, 이로 인해 네트워크 간 정보 교환 부족과 Overgeneralization 문제가 발생했습니다. 이를 해결하기 위해 TransFusion은 투명도 기반 Diffusion Process를 도입하여 비정상 영역의 투명도를 점진적으로 증가시키는 방식으로 정상 영역을 복원하는 접근법을 제안했습니다. Diffusion 모델의 Reverse Process를 활용하여 비정상 부분을 제거하고 점진적으로 정상화하는 구조를 갖추었으며, Reconstruction과 Localization을 통합한 단일 모델 내에서 Anomaly Appearance, Anomaly Mask, Normal Appearance의 세 가지 요소를 동시에 예측하는 Multi-Head 아키텍처를 설계하였습니다. 실험 결과, MVTec 및 VisA 데이터셋에서 기존 Diffusion 기반 이상 탐지 모델 대비 높은 성능을 기록했으며, PatchCore 및 Memory Bank 기반 방식보다 일반화 성능이 우수한 것으로 나타났습니다. 다만, 기존의 Embedding 기반 모델 대비 추론 속도가 다소 느리다는 한계가 있으며, 최적의 Diffusion Step 수를 조정하는 것이 성능 향상에 중요한 영향을 미치는 것으로 분석되었습니다. 이번 발표를 통해 Diffusion 모델을 활용한 이상 탐지에서 Reconstruction과 Localization을 통합하는 방식의 가능성을 확인할 수 있었습니다.
이번 세미나에서는 "TransFusion: A Transparency-Based Diffusion Model for Anomaly Detection" 논문을 중심으로 발표가 진행되었습니다. 본 연구는 기존 재구성 기반 이상 탐지 기법에서 발생하는 과도한 일반화와 세부 정보 손실 문제를 효과적으로 극복하기 위해, 이상 영역의 투명도를 점진적으로 조절하는 혁신적인 확산 과정을 제안합니다. 발표자는 이 새로운 접근법이 단일 프로세스 내에서 이상 영역을 점진적으로 정교하게 복원하는 동시에 정상 영역은 원래의 세부 정보를 최대한 보존할 수 있도록 설계되었음을 명확하게 전달하였습니다. 특히, 모델 내부에서 이상 영역과 정상 영역의 경계를 명시적으로 구분하고, 이를 통해 두 영역 간의 상호 보완적 정보를 활용하는 방법론이 인상적이었습니다. 좋은 발표 감사합니다!
금일 세미나는 객체와 배경을 별도로 활용하여 Diffusion 모델을 학습하는 이상치 탐지 방법론인 "“TransFusion - A Transparency-Based Diffusion Model for Anomaly Detection”을 중심으로 진행되었습니다. 기존 연구들의 경우 전체 이미지를 이용하여 Diffusion 모델을 학습하는 과정에서 노이즈 주입 및 복원 과정이 이상치 탐지와 잘 align되지 않는 문제점이 존재하였습니다. 이에 해당 연구에서는 이상치로 여길 수 있는 마스크를 생성하고 해당 영역과 타 영역에 대한 보간을 통해 노이즈를 주입하는 방식을 사용하고 있습니다. 또한, localization과 detection 모두 잘 수행할 수 있도록 localization을 위한 head 두개와 detection을 위한 Head 하나를 활용하여 학습하게 됩니다. 이를 통해 기존 방법론 대비 anomaly mask 자체를 잘 탐지할 뿐만 아니라 이상 이미지 자체도 잘 탐지하는 모습을 보이고 있습니다. diffusion 모델이 image anomaly detection 분야에서 꾸준히 좋은 성능을 보이고 있는데, 데이터 측면에서 기존 diffusion 방법론의 한계점을 극복하는 합리적인 시도를 제안한 논문인 것 같습니다. 좋은 발표 감사드립니다.
이번 세미나에서는 “TransFusion: A Transparency-Based Diffusion Model for Anomaly Detection” 논문이 발표되었습니다. 기존 Two-stage 이상 탐지 방식의 한계를 극복하기 위해 Reconstruction과 Localization을 동시에 수행하는 One-stage Diffusion 모델을 제안한 연구입니다. TransFusion은 투명도 기반의 Diffusion Process를 활용하여 이상 영역을 점진적으로 제거하며 정상 이미지를 복원하는 방식을 적용하였으며, Gaussian Noise 대신 Cold Diffusion을 도입해 빠른 추론 속도를 달성하였습니다. 특히, Multi-Head Projection 구조를 활용하여 정상 이미지, 이상 영역, 이상 내용을 동시에 추론하는 방식이 인상적이었으며, 실험 결과 MVTec 및 VisA 데이터셋에서 높은 성능과 효율성을 입증하였습니다. 다만, 기존 Diffusion 기반 AD 연구들과의 비교 분석이 일부 부족했으며, 연산량 감소 효과에 대한 추가적인 실험이 있었다면 더욱 설득력 있는 연구가 되었을 것으로 보입니다. Diffusion 기반 이상 탐지의 효율성을 극대화한 연구로, 향후 실제 산업 적용 가능성도 기대됩니다. 좋은 발표 감사합니다.
금일 세미나는 "TransFusion A Transparency-Based Diffusion Model for Anomaly Detection" 연구를 바탕으로 진행되었습니다. 제안 연구에서는 기존의 Reconstruction과 Localization을 Two-stage로 진행할 경우, 각 네트워크 간 정보 교환의 부재로 인하여 서로 다른 정상 특징을 학습하여 Reconstruction 네트워크가 실패(/성공)해도 Localization네트워크가 이상을 찾을 수 있는(/없는) 경우에서 발생하는 문제점을 해결하고자 합성 이상 이미지를 활용한 Reconstruction과 Localization을 동시에 수행하는 이상 탐지 방법론을 제안하고 있습니다. 이를 위하여 투명도 기반의 Diffusion Process를 도입하여, 비정상 영역의 투명도를 점진적으로 증가시켜 정상 영역으로의 복원을 진행시키며, Two-stage를 하나의 프로세스로 통합한 Transfusion 구조를 제안합니다. 해당 구조에서는 하나의 모델을 바탕으로 Anomaly Appearance, Anomaly Mask, Normal Appearance를 동시에 예측하며 이상을 탐지하고자 하고 있습니다. 발표자분이 상세하게 설명해주셔서 이해가 수월했습니다. 좋은 발표 정말 감사드립니다.