fullseye

日本語 · English · 简体中文 · 繁體中文 · 한국어 · Deutsch · हिन्दी · Français

Fullseye — ViEW2026

把物理模擬與影像處理交給 AI 組合,並以真值驗證。

點按圖塊即可開啟影片或圖(▶ = 動態)。

親手試試

可以親手操作論文中的圖(手機上也能用)。用分頁切換方法,3-D 視圖可拖曳旋轉。

精選

部分 PoC 說明為英文。

薄缺陷檢出極限▶薄缺陷檢出極限 主動輪廓▶主動輪廓 DIC 應變▶DIC 應變 景深合成▶景深合成 點雲對位▶點雲對位 料堆體積▶料堆體積 CT 重建CT 重建 CT 孔洞▶CT 孔洞 白光干涉段差▶白光干涉段差 偏光去鏡面反射偏光去鏡面反射 光彈應力▶光彈應力 熱影像缺陷深度熱影像缺陷深度 微振動放大▶微振動放大 桌球彈跳▶桌球彈跳 複眼光場複眼光場 插銷入孔▶插銷入孔 空氣曲棍球▶空氣曲棍球 視觸覺感測器▶視觸覺感測器 桌球旋轉▶桌球旋轉 來回與讀取誤差▶來回與讀取誤差 交通與死角▶交通與死角 平交道與路口▶平交道與路口 道路反射鏡▶道路反射鏡 碰撞時間與 RSS▶碰撞時間與 RSS 複眼到大腦▶複眼到大腦 蒼蠅腦波▶蒼蠅腦波 小鼠視皮質波▶小鼠視皮質波 人形機器人雙眼▶人形機器人雙眼 筷尖相機追蹤豆子▶筷尖相機追蹤豆子 一維條碼一維條碼 軸承故障診斷軸承故障診斷 左右不對稱左右不對稱 裂縫寬度裂縫寬度 零件尺寸檢測零件尺寸檢測 織物缺陷織物缺陷 纖維取向纖維取向 齒輪齒形齒輪齒形 矩陣碼讀取矩陣碼讀取 顯示器摩爾紋顯示器摩爾紋 粒度分布粒度分布 潛變應變▶潛變應變 表面粗糙度表面粗糙度 相機熱漂移相機熱漂移 雜散光雜散光 焊道截面焊道截面 聲學漏水定位聲學漏水定位 設備維護融合設備維護融合 晶粒度晶粒度 廢棄物分選廢棄物分選 螺紋輪廓螺紋輪廓 太陽能 EL太陽能 EL 焊錫 AOI焊錫 AOI 竣工牆面偏差竣工牆面偏差 電極呼吸電極呼吸 電極曲折度電極曲折度 凸塊共面度凸塊共面度 晶粒傾斜與 TSV晶粒傾斜與 TSV 多波束測深多波束測深 印刷套準印刷套準 鋼軌波磨鋼軌波磨 實拍硬幣實拍硬幣 實拍紋理旋轉實拍紋理旋轉 傳送輥缺陷傳送輥缺陷 焊道掃描焊道掃描 AOI 與 CT 對應AOI 與 CT 對應 統計製程管制統計製程管制 影像錯字偵測影像錯字偵測 3D 列印層檢測3D 列印層檢測 量具 R&R量具 R&R 注意力恆等式注意力恆等式 澤尼克像差澤尼克像差 MT 法異常偵測MT 法異常偵測 文字區域偵測文字區域偵測 AGV 倉庫▶AGV 倉庫 觸覺剪切觸覺剪切 觸覺偶極子觸覺偶極子 食材切割▶食材切割 粉體堆粉體堆 研磨與擦拭▶研磨與擦拭 研缽粉碎研缽粉碎 粉體舀取與傾倒粉體舀取與傾倒 穹頂指尖接觸▶穹頂指尖接觸 藥量均勻性藥量均勻性 指尖握刀指尖握刀 中國剩餘定理相位中國剩餘定理相位 各照明的檢出機率各照明的檢出機率 相機內處理讓規格書數值失真相機內處理讓規格書數值失真 白色溝槽的相互反射與條紋誤差白色溝槽的相互反射與條紋誤差 光切法的散斑下限光切法的散斑下限 用回波相位找混合鍵合空洞用回波相位找混合鍵合空洞 PL 影像中的溝槽與擴散長度PL 影像中的溝槽與擴散長度 照明光錐與觀察 NA照明光錐與觀察 NA 疊紋對準(兩片看不見的光柵讀出 1 nm)疊紋對準(兩片看不見的光柵讀出 1 nm) 光學系統圖面(截面圖、配置圖、製造圖)光學系統圖面(截面圖、配置圖、製造圖) 加工凹槽的相互反射算到收斂加工凹槽的相互反射算到收斂 遠心鏡頭與尺寸量測遠心鏡頭與尺寸量測 耐光照與遮擋的符號匹配▶耐光照與遮擋的符號匹配 密集氣泡計數(無法確定時給出區間)密集氣泡計數(無法確定時給出區間) 良品統計變動模型良品統計變動模型 非共軸光學系統(分光鏡鬼影與折轉)非共軸光學系統(分光鏡鬼影與折轉) 刮痕把平均線壓凹多少,以及穩健濾波的失效點刮痕把平均線壓凹多少,以及穩健濾波的失效點 以遠心實拍影像校準成像模型以遠心實拍影像校準成像模型 逐像素鎖相解調:光環法線、日間化、熱波逐像素鎖相解調:光環法線、日間化、熱波 僅從良品學習的圖塊特徵異常檢測(經典特徵的分布與記憶)僅從良品學習的圖塊特徵異常檢測(經典特徵的分布與記憶) 依辮子的纏繞方式區分多機器人路徑規劃▶依辮子的纏繞方式區分多機器人路徑規劃 傅立葉疊層成像(4 倍視野中的 20 倍解析度)傅立葉疊層成像(4 倍視野中的 20 倍解析度) 四方位偏振相機看不到的 Mueller 矩陣 7 個維度四方位偏振相機看不到的 Mueller 矩陣 7 個維度 斜邊 SFR 因伽瑪而誤判 MTF50斜邊 SFR 因伽瑪而誤判 MTF50 Maréchal 近似的失效點隨像差形狀而變Maréchal 近似的失效點隨像差形狀而變 最短轉彎停車最短轉彎停車 複數平面複數平面 全天相機雲量全天相機雲量 重疊細胞計數重疊細胞計數 顏料分層顏料分層 光子測距▶光子測距 文件校正文件校正 相機校正▶相機校正 手震去模糊▶手震去模糊 電池 CT 劣化電池 CT 劣化 粒子追蹤▶粒子追蹤 駕訓班駕訓班 一筆畫與周轉圓▶一筆畫與周轉圓 恆星測光精度恆星測光精度 細胞核倍性細胞核倍性 白平衡白平衡 光場深度光場深度 竄改偵測 ROC竄改偵測 ROC 全景漂移▶全景漂移 去霧▶去霧 鳥瞰圖融合鳥瞰圖融合 模板追蹤▶模板追蹤 擴展世界擴展世界 拍頻只有一個拍頻只有一個 地形量測▶地形量測 血管網路血管網路 實拍染色分離實拍染色分離 光電熱影像光電熱影像 畫作龜裂網畫作龜裂網 實拍立體視覺實拍立體視覺 超解析度極限▶超解析度極限 CAD 與點雲偏差▶CAD 與點雲偏差 生長縮時攝影▶生長縮時攝影 慣性與坡道▶慣性與坡道 無限繪圖無限繪圖 海冰密集度海冰密集度 創面面積▶創面面積 光纖與光導(模態、色散、模場直徑)光纖與光導(模態、色散、模場直徑) 焊縫氣孔焊縫氣孔 相機指紋相機指紋 旋轉不變稽核旋轉不變稽核 偽色可讀性偽色可讀性 作物葉面積作物葉面積 交通量計數▶交通量計數 太陽與天氣▶太陽與天氣 定理即檢驗定理即檢驗 臨邊昏暗臨邊昏暗 骨小樑厚度骨小樑厚度 材料光學物性庫(86 種材料共用一張表)材料光學物性庫(86 種材料共用一張表) 熱像與溫度熱像與溫度 影像的物理一致性:彈道還是推力、時間拉伸▶影像的物理一致性:彈道還是推力、時間拉伸 公共攝影機朝向公共攝影機朝向 實拍去模糊實拍去模糊 可製造性可製造性 到達時間面▶到達時間面 判斷場景▶判斷場景 圖無法驗證的圖無法驗證的 恆星位置精度恆星位置精度 螢光共定位螢光共定位 透過矽晶圓的近紅外檢測(選擇 LED 波長)透過矽晶圓的近紅外檢測(選擇 LED 波長) EMVA 1288 量測EMVA 1288 量測 攝影機朝向(實拍)攝影機朝向(實拍) 蒼蠅視覺前端蒼蠅視覺前端 斜坡土方量斜坡土方量 影片模態識別▶影片模態識別 無盡地圖▶無盡地圖 錯覺檢驗量具錯覺檢驗量具 植被覆蓋率植被覆蓋率 MRI 偏置場MRI 偏置場 用高光譜近紅外分選外觀相同的異物用高光譜近紅外分選外觀相同的異物 積層製造與 CT積層製造與 CT 兩個世界拍攝兩個世界拍攝 蒼蠅航向控制蒼蠅航向控制 網格修復▶網格修復 冷鏈溫度冷鏈溫度 橫向運動▶橫向運動 河川水位河川水位 幼蟲連接體幼蟲連接體 光學設計檔(.zmx)的讀寫(與另外兩個實作對照)光學設計檔(.zmx)的讀寫(與另外兩個實作對照) X 光繞射分相▶X 光繞射分相 CommonRoad 評分CommonRoad 評分 消失的細節消失的細節 管道減薄管道減薄 倉庫滯留倉庫滯留 人形機器人過馬路▶人形機器人過馬路 變化偵測變化偵測 運動量化運動量化 玻璃替換與多起點全域搜尋玻璃替換與多起點全域搜尋 SEM 邊緣變粗SEM 邊緣變粗 真實日本城鎮真實日本城鎮 圖分割圖分割 層疊翹曲層疊翹曲 裂縫擴展▶裂縫擴展 系外行星凌星系外行星凌星 分支領域分支領域 用要求表設計三片式鏡頭(邊緣厚度邊界與玻璃作為變數)用要求表設計三片式鏡頭(邊緣厚度邊界與玻璃作為變數) 用偏振量測黑色光澤件與玻璃用偏振量測黑色光澤件與玻璃 組裝城鎮組裝城鎮 分割關卡▶分割關卡 人機安全距離人機安全距離 沉降判定沉降判定 葉片病斑葉片病斑 EM 校對複核EM 校對複核 以同一處方的差分持有變焦鏡頭(多構型)以同一處方的差分持有變焦鏡頭(多構型) 重力波探測器的偽模擬▶重力波探測器的偽模擬 插入失敗恢復插入失敗恢復 感知指標一致感知指標一致 設計與實物偏差設計與實物偏差 活體 3D+t活體 3D+t 河川表面流速▶河川表面流速 40 年前的接線圖40 年前的接線圖 用「解(solve)」保持設計關係(隨光闌變化的 F 數、afocal、曲面像面、奇次非球面)用「解(solve)」保持設計關係(隨光闌變化的 F 數、afocal、曲面像面、奇次非球面) 彩色共焦感測器(由顏色讀出高度)彩色共焦感測器(由顏色讀出高度) 觸覺插銷入孔觸覺插銷入孔 畫質指標與 TID2013畫質指標與 TID2013 結構年度複測▶結構年度複測 影片時空立方體影片時空立方體 年輪寬度年輪寬度 線蟲個體差異線蟲個體差異 公開 .zmx 處方的獨立驗證與檢測評分公開 .zmx 處方的獨立驗證與檢測評分 工業 OCT(塗層厚度與內部缺陷)工業 OCT(塗層厚度與內部缺陷) 插銷對稱性插銷對稱性 逼近條紋的蠅眼▶逼近條紋的蠅眼 對稱性補全對稱性補全 週期影片週期影片 三維熱場重建三維熱場重建 線蟲左右對稱線蟲左右對稱 間接 ToF(折返與多路徑)間接 ToF(折返與多路徑) 可重現 ICP可重現 ICP 像素位移的偏移與開口校準(無法確定的地圖)像素位移的偏移與開口校準(無法確定的地圖) 牲畜體重▶牲畜體重 桌球追蹤▶桌球追蹤 座標高程陷阱座標高程陷阱 EM 分割評分EM 分割評分 照片看不見的微米凹坑,用條紋的鏡像找出(偏折術)照片看不見的微米凹坑,用條紋的鏡像找出(偏折術) 觸覺感測器校正觸覺感測器校正 水與透明介質:海浪、泳池折射、水下顏色、瓶子的焦散線水與透明介質:海浪、泳池折射、水下顏色、瓶子的焦散線 棧板裝載率棧板裝載率 劍玉▶劍玉 實拍深空實拍深空 分割錯誤與連線分割錯誤與連線 像素位移(偽色與混疊)像素位移(偽色與混疊) 以真實影像校正薄膜模型(可確定的係數與無法確定的組合)以真實影像校正薄膜模型(可確定的係數與無法確定的組合) 依處方參數透過鏡頭拍攝三維場景:景深、貓眼虛化、邊角照度、色差、鬼影依處方參數透過鏡頭拍攝三維場景:景深、貓眼虛化、邊角照度、色差、鬼影 無限縮放無限縮放 扯鈴▶扯鈴 搜索掃描寬度搜索掃描寬度 真實樹骨架真實樹骨架 TDI 線掃描相機與線掃描鏡頭TDI 線掃描相機與線掃描鏡頭 水在檢測影像中的樣子:泳池底的焦散、瓶子的側視圖、濕潤的板、水下的船體水在檢測影像中的樣子:泳池底的焦散、瓶子的側視圖、濕潤的板、水下的船體 以三維工具量四維▶以三維工具量四維 群體感知障礙群體感知障礙 兩種高程(實測)兩種高程(實測) 神經突起生長神經突起生長 虛擬穿透式電子顯微鏡(Thon 環與欠焦)虛擬穿透式電子顯微鏡(Thon 環與欠焦) 會場建築與小行星糸川同一把尺:把 PLATEAU 的 CityGML LOD2 變成網格會場建築與小行星糸川同一把尺:把 PLATEAU 的 CityGML LOD2 變成網格 重力透鏡重力透鏡 黏菌迷宮黏菌迷宮 以光譜反射率量測薄膜厚度(以公開實測資料評分、晶圓干涉色)以光譜反射率量測薄膜厚度(以公開實測資料評分、晶圓干涉色) 火星車輪打滑火星車輪打滑 黏菌最佳傳輸黏菌最佳傳輸 虛擬 SEM 與加速電壓虛擬 SEM 與加速電壓 把稻田雜草覆蓋度分為 4 級把稻田雜草覆蓋度分為 4 級 走行長度與 VOI走行長度與 VOI 用兩種能量把肉中的骨片與玻璃分開(雙能 X 射線)用兩種能量把肉中的骨片與玻璃分開(雙能 X 射線) 線蟲腦核心線蟲腦核心 光柵干涉儀(暗場中可見的纖維、裂紋與氣孔)光柵干涉儀(暗場中可見的纖維、裂紋與氣孔) 突觸與神經突起突觸與神經突起 光譜儀與照明系統(頻寬與光源的紋樣)光譜儀與照明系統(頻寬與光源的紋樣) 用細胞體的點畫出蒼蠅的腦用細胞體的點畫出蒼蠅的腦 以 MTF、良率與補償行程分配鏡頭製造公差以 MTF、良率與補償行程分配鏡頭製造公差 基於處方的光場相機:從原始微影像到重聚焦與距離基於處方的光場相機:從原始微影像到重聚焦與距離 在掃描像與穿透像中量測同一批粒子▶在掃描像與穿透像中量測同一批粒子 同一三維場景的間接與直接飛行時間:多路徑、混合像素、堆積和體積誤差▶同一三維場景的間接與直接飛行時間:多路徑、混合像素、堆積和體積誤差 全景檢測與立體顯示全景檢測與立體顯示

系列文章 (Qiita 上的英文文章)

紙上的量測館紙上的量測館自行植入真值的 PoC 展館 桌球桌球從影片量測彈跳與摩擦 自動駕駛自動駕駛以定理與第二實作評分 連接體(腦接線圖)連接體(腦接線圖)把蒼蠅視覺模型裝到身體上量測 人形機器人運動會人形機器人運動會由影像處理擔任裁判的家庭運動會

能做什麼

共 97 項,每項都有說明頁(用法與限制)與可執行的範例。

尋找

量測

光與色

波與訊號

重建與校正

搭建流程

呈現

繪製

其他 174 個使用範例(非 PoC)的列表

全部看

PoC 283 個,另有機器人範例 5 個。展開分組即可載入縮圖。

機器人之眼(由 Fullseye 負責感知) (4)
機器人的身體(在 Fullseye 中執行已訓練的策略) (1)
工業檢測 (50)
尺寸與形狀量測 (55)
三維形狀 (20)
幾何與校正 (19)
成像品質與復原 (24)
顏色與分離 (17)
把時間序列當作三維量測 (21)
連接體與神經 (20)
醫學與生物 (9)
天文與環境 (23)
鑑識與文件 (5)
自動駕駛 (13)
數學圖像 (7)

能看到什麼/測得的數字

所有數字都是相對各 PoC 自行植入的真值(閉合式、解析解或公開值)的實測;執行 PoC 會印出相同的值。

影像檢測與外觀量測

三維量測與幾何處理

X 光 CT 與體積資料處理

光學、干涉、偏光

熱、聲學、時間序列

機器人與空間感知

桌球與運動量測

自動駕駛

連接體與神經

機器人之眼(由 Fullseye 負責感知)

數學視覺化

Fullseye 是什麼

透過 MCP 與 RAG,把包含光學設計、三維量測等感測在內的物理模擬與古典影像處理交給 AI,讓它針對每個課題思考組合方式,並在型別一致性檢查與帶真值的評估下以對話方式解決課題的平台。開放原始碼(Apache-2.0)。

試試看 (Python 3.11)
pip install fullseye
git clone https://github.com/furuse-kazufumi/fullseye
cd fullseye
python examples/poc_focus_stacking.py

景深合成 PoC 約 20 秒跑完,印出相對真值的數字與 PASS。圖寫入 out/figures/poc_focus_stacking/。

連結
論文資訊

摘要(由日文翻譯): 本文提出開放原始碼平台 Fullseye:把影像檢測與三維量測的處理組裝成宣告了輸入輸出資料型別的運算子鏈,以物理與成像模擬產生的真值進行定量評估,並記錄處理流程、評估與失敗條件以便重複使用。它由約 3,000 個型別化運算子、在執行前拒絕型別不一致的檢查、多語言運算子檢索(RAG)以及 200 多個帶真值的驗證程式組成。本文報告代表例的定量評估,以及合成、實測、實機三個驗證階段的區分。