復旦團隊AI4S造“實驗神器”

中國教育報-中國教育新聞網訊（記者 任朝霞 通訊員 李怡潔）近年來，面對人們快速增加的影像清晰度需求，眾多手機、數(shù)碼相機廠商不斷探索如何在控制成本的情況下，使用AI模型進一步提升像素級。同樣的技術理念被復旦大學計算機科學技術學院教授顏波帶領的研究團隊遷移到了生命科學實驗室里的常用研究工具“熒光顯微鏡”上，他們發(fā)明的跨任務、多維度圖像增強基礎AI模型（UniFMIR），實現(xiàn)了對現(xiàn)有熒光顯微成像極限的突破。4月12日，相關研究成果發(fā)表在科學期刊《自然-方法》。

由于顯微鏡光學硬件和生物樣本光敏感性（在熒光照射下，生物活性降低）帶來的挑戰(zhàn)，過去幾年中，生命科學和計算機領域的科學家們開始攜手探索用AI的路徑來增強圖像質量的辦法。然而，成像模式多樣、降質類型復雜、增強過程迥異等一系列問題，使得這一任務極具挑戰(zhàn)性，于是，大多數(shù)科學家選擇“每次解決一個問題”，聚焦于研制針對單一需求的“專有”AI模型。

來自復旦大學的這支AI for Science團隊則選擇直擊挑戰(zhàn)，以“一站式集成”為目標，直接構建了首個“統(tǒng)一”的熒光顯微鏡圖像增強AI基礎模型（UniFMIR），大幅提升在“圖像超分辨率重構、各向同性重構、3D去噪、圖像投影和過程重建”五大任務方向上的性能。

UniFMIR采用了基于Swin Transformer結構的特征增強模塊來增強特征表示，針對不同任務的網絡流程共享相同的特征增強計算。通過收集的大規(guī)模數(shù)據(jù)集對模型進行預訓練，并使用不同圖像增強任務的數(shù)據(jù)微調模型參數(shù)，UniFMIR展現(xiàn)出比專有模型更好的增強性能和泛化性。

這意味著，加載了UniFMIR的熒光顯微鏡可能成為生命科學實驗室中的“神器”?？茖W家們能更清晰地觀察到活細胞內部的微小結構和復雜過程，加速全球生命科學、醫(yī)學研究、疾病診斷相關領域的科學發(fā)現(xiàn)和醫(yī)療創(chuàng)新；同時，在半導體制造、新材料研發(fā)等領域，該成果可以用來提升觀察和分析材料微觀結構的質量，從而優(yōu)化制造工藝和提高產品質量。

UniFMIR的成功研發(fā)標志著我國在關鍵科學儀器領域“國產設備+基礎模型”的組合能有效減少對進口設備的依賴，也為全球科研領域的進步貢獻了中國智慧和力量。

“這次我們想到把AI圖像增強技術應用于熒光顯微鏡上，并構建UniFMIR，出發(fā)點就是AI for Science。我們的模型為熒光顯微鏡圖像增強提供了一個通用的解決方案，通過簡單的參數(shù)微調便可應用于不同任務、成像模式和生物結構。未來，生命科學實驗室的科學家們可通過進一步擴展訓練數(shù)據(jù)的數(shù)據(jù)量和豐富度來不斷強化UniFMIR的圖像重構能力?！鳖伈▽niFMIR被用于更多類型實驗的可能性充滿信心。

該項研究由復旦大學計算機科學技術學院數(shù)字媒體實驗室完成。實驗室博士后馬晨曦博士和青年研究員譚偉敏博士為該工作的共同第一作者，顏波為通信作者，其他作者還包括實驗室博士生何瑞安。該研究工作得到國家自然科學基金委和上海市科委項目資助。