fullseye

日本語 · English · 简体中文 · 繁體中文 · 한국어 · Deutsch · हिन्दी · Français

Fullseye — ViEW2026

把物理仿真与图像处理交给 AI 组合,并用真值验证。

点按图块即可打开视频或图(▶ = 动态)。

亲手试试

可以亲手操作论文中的图(手机上也能用)。用标签页切换方法,3-D 视图可拖动旋转。

精选

部分 PoC 说明为英文。

薄缺陷检出极限▶薄缺陷检出极限 主动轮廓▶主动轮廓 DIC 应变▶DIC 应变 景深合成▶景深合成 点云配准▶点云配准 料堆体积▶料堆体积 CT 重建CT 重建 CT 空洞▶CT 空洞 白光干涉台阶▶白光干涉台阶 偏振去镜面反射偏振去镜面反射 光弹性应力▶光弹性应力 热成像缺陷深度热成像缺陷深度 微振动放大▶微振动放大 乒乓球弹跳▶乒乓球弹跳 复眼光场复眼光场 轴孔装配▶轴孔装配 空气曲棍球▶空气曲棍球 视触觉传感器▶视触觉传感器 乒乓球旋转▶乒乓球旋转 回合与读取误差▶回合与读取误差 交通与盲区▶交通与盲区 道口与路口▶道口与路口 道路反射镜▶道路反射镜 碰撞时间与 RSS▶碰撞时间与 RSS 复眼到大脑▶复眼到大脑 苍蝇脑电波▶苍蝇脑电波 小鼠视皮层波▶小鼠视皮层波 人形机器人双眼▶人形机器人双眼 筷尖相机追踪豆子▶筷尖相机追踪豆子 一维条码一维条码 轴承故障诊断轴承故障诊断 左右不对称左右不对称 裂缝宽度裂缝宽度 零件尺寸检测零件尺寸检测 织物缺陷织物缺陷 纤维取向纤维取向 齿轮齿形齿轮齿形 矩阵码读取矩阵码读取 显示屏摩尔纹显示屏摩尔纹 粒度分布粒度分布 蠕变应变▶蠕变应变 表面粗糙度表面粗糙度 相机热漂移相机热漂移 杂散光杂散光 焊道截面焊道截面 声学漏水定位声学漏水定位 设备维护融合设备维护融合 晶粒度晶粒度 废弃物分选废弃物分选 螺纹轮廓螺纹轮廓 太阳能 EL太阳能 EL 焊锡 AOI焊锡 AOI 竣工墙面偏差竣工墙面偏差 电极呼吸电极呼吸 电极曲折度电极曲折度 凸点共面度凸点共面度 芯片倾斜与 TSV芯片倾斜与 TSV 多波束测深多波束测深 印刷套准印刷套准 钢轨波磨钢轨波磨 实拍硬币实拍硬币 实拍纹理旋转实拍纹理旋转 传送辊缺陷传送辊缺陷 焊道扫描焊道扫描 AOI 与 CT 对应AOI 与 CT 对应 统计过程控制统计过程控制 图像错字检测图像错字检测 3D 打印层检测3D 打印层检测 量具 R&R量具 R&R 注意力恒等式注意力恒等式 泽尼克像差泽尼克像差 MT 法异常检测MT 法异常检测 文字区域检测文字区域检测 AGV 仓库▶AGV 仓库 触觉剪切触觉剪切 触觉偶极子触觉偶极子 食材切割▶食材切割 粉体堆粉体堆 研磨与擦拭▶研磨与擦拭 研钵粉碎研钵粉碎 粉体舀取与倾倒粉体舀取与倾倒 穹顶指尖接触▶穹顶指尖接触 药量均匀性药量均匀性 指尖握刀指尖握刀 中国剩余定理相位中国剩余定理相位 各照明的检出概率各照明的检出概率 相机内处理让规格书数值失真相机内处理让规格书数值失真 白色沟槽的相互反射与条纹误差白色沟槽的相互反射与条纹误差 光切法的散斑下限光切法的散斑下限 用回波相位找混合键合空洞用回波相位找混合键合空洞 PL 像中的沟槽与扩散长度PL 像中的沟槽与扩散长度 照明光锥与观察 NA照明光锥与观察 NA 莫尔对准(两片看不见的光栅读出 1 nm)莫尔对准(两片看不见的光栅读出 1 nm) 光学系统图纸(截面图、布置图、制造图)光学系统图纸(截面图、布置图、制造图) 加工凹槽的相互反射算到收敛加工凹槽的相互反射算到收敛 远心镜头与尺寸测量远心镜头与尺寸测量 耐光照与遮挡的符号匹配▶耐光照与遮挡的符号匹配 密集气泡计数(无法确定时给出区间)密集气泡计数(无法确定时给出区间) 良品统计变动模型良品统计变动模型 非共轴光学系统(分束器鬼像与折转)非共轴光学系统(分束器鬼像与折转) 划痕把平均线压凹多少,以及稳健滤波的失效点划痕把平均线压凹多少,以及稳健滤波的失效点 用远心实拍图像校准成像模型用远心实拍图像校准成像模型 逐像素锁相解调:光环法线、日间化、热波逐像素锁相解调:光环法线、日间化、热波 仅从良品学习的图块特征异常检测(经典特征的分布与记忆)仅从良品学习的图块特征异常检测(经典特征的分布与记忆) 按辫子的缠绕方式区分多机器人路径规划▶按辫子的缠绕方式区分多机器人路径规划 傅里叶叠层成像(4 倍视野中的 20 倍分辨率)傅里叶叠层成像(4 倍视野中的 20 倍分辨率) 四方位偏振相机看不到的 Mueller 矩阵 7 个维度四方位偏振相机看不到的 Mueller 矩阵 7 个维度 斜边 SFR 因伽马而误判 MTF50斜边 SFR 因伽马而误判 MTF50 Maréchal 近似的失效点随像差形状而变Maréchal 近似的失效点随像差形状而变 最短转弯泊车最短转弯泊车 复平面复平面 全天相机云量全天相机云量 重叠细胞计数重叠细胞计数 颜料分层颜料分层 光子测距▶光子测距 文档矫正文档矫正 相机标定▶相机标定 手抖去模糊▶手抖去模糊 电池 CT 劣化电池 CT 劣化 粒子跟踪▶粒子跟踪 驾校驾校 一笔画与周转圆▶一笔画与周转圆 恒星测光精度恒星测光精度 细胞核倍性细胞核倍性 白平衡白平衡 光场深度光场深度 篡改检测 ROC篡改检测 ROC 全景漂移▶全景漂移 去雾▶去雾 鸟瞰图融合鸟瞰图融合 模板跟踪▶模板跟踪 扩展世界扩展世界 拍频只有一个拍频只有一个 地形测量▶地形测量 血管网络血管网络 实拍染色分离实拍染色分离 光伏热成像光伏热成像 画作龟裂网画作龟裂网 实拍立体视觉实拍立体视觉 超分辨率极限▶超分辨率极限 CAD 与点云偏差▶CAD 与点云偏差 生长延时摄影▶生长延时摄影 惯性与坡道▶惯性与坡道 无限绘图无限绘图 海冰密集度海冰密集度 创面面积▶创面面积 光纤与光导(模式、色散、模场直径)光纤与光导(模式、色散、模场直径) 焊缝气孔焊缝气孔 相机指纹相机指纹 旋转不变审查旋转不变审查 伪彩色可读性伪彩色可读性 作物叶面积作物叶面积 交通量计数▶交通量计数 太阳与天气▶太阳与天气 定理即检验定理即检验 临边昏暗临边昏暗 骨小梁厚度骨小梁厚度 材料光学物性库(86 种材料共用一张表)材料光学物性库(86 种材料共用一张表) 热像与温度热像与温度 影像的物理一致性:弹道还是推力、时间拉伸▶影像的物理一致性:弹道还是推力、时间拉伸 公共摄像头朝向公共摄像头朝向 实拍去模糊实拍去模糊 可制造性可制造性 到达时间面▶到达时间面 判断场景▶判断场景 图无法验证的图无法验证的 恒星位置精度恒星位置精度 荧光共定位荧光共定位 透过硅晶圆的近红外检测(选择 LED 波长)透过硅晶圆的近红外检测(选择 LED 波长) EMVA 1288 测量EMVA 1288 测量 摄像头朝向(实拍)摄像头朝向(实拍) 苍蝇视觉前端苍蝇视觉前端 斜坡土方量斜坡土方量 视频模态识别▶视频模态识别 无尽地图▶无尽地图 错觉检验量具错觉检验量具 植被覆盖率植被覆盖率 MRI 偏置场MRI 偏置场 用高光谱近红外分选外观相同的异物用高光谱近红外分选外观相同的异物 增材制造与 CT增材制造与 CT 两个世界拍摄两个世界拍摄 苍蝇航向控制苍蝇航向控制 网格修复▶网格修复 冷链温度冷链温度 横向运动▶横向运动 河流水位河流水位 幼虫连接组幼虫连接组 光学设计文件(.zmx)的读写(与另外两个实现对照)光学设计文件(.zmx)的读写(与另外两个实现对照) X 射线衍射分相▶X 射线衍射分相 CommonRoad 评分CommonRoad 评分 消失的细节消失的细节 管道减薄管道减薄 仓库滞留仓库滞留 人形机器人过马路▶人形机器人过马路 变化检测变化检测 运动量化运动量化 玻璃替换与多起点全局搜索玻璃替换与多起点全局搜索 SEM 边缘变粗SEM 边缘变粗 真实日本城镇真实日本城镇 图分割图分割 层叠翘曲层叠翘曲 裂缝扩展▶裂缝扩展 系外行星凌星系外行星凌星 分支领域分支领域 用要求表设计三片式镜头(边缘厚度边界与玻璃作为变量)用要求表设计三片式镜头(边缘厚度边界与玻璃作为变量) 用偏振测量黑色光泽件与玻璃用偏振测量黑色光泽件与玻璃 组装城镇组装城镇 分割关卡▶分割关卡 人机安全距离人机安全距离 沉降判定沉降判定 叶片病斑叶片病斑 EM 校对复核EM 校对复核 以同一处方的差分持有变焦镜头(多构型)以同一处方的差分持有变焦镜头(多构型) 引力波探测器的伪仿真▶引力波探测器的伪仿真 插入失败恢复插入失败恢复 感知指标一致感知指标一致 设计与实物偏差设计与实物偏差 活体 3D+t活体 3D+t 河流表面流速▶河流表面流速 40 年前的接线图40 年前的接线图 用“解(solve)”保持设计关系(随光阑变化的 F 数、afocal、曲面像面、奇次非球面)用“解(solve)”保持设计关系(随光阑变化的 F 数、afocal、曲面像面、奇次非球面) 彩色共焦传感器(由颜色读出高度)彩色共焦传感器(由颜色读出高度) 触觉轴孔装配触觉轴孔装配 画质指标与 TID2013画质指标与 TID2013 结构年度复测▶结构年度复测 视频时空立方体视频时空立方体 年轮宽度年轮宽度 线虫个体差异线虫个体差异 公开 .zmx 处方的独立验证与检测评分公开 .zmx 处方的独立验证与检测评分 工业 OCT(涂层厚度与内部缺陷)工业 OCT(涂层厚度与内部缺陷) 销钉对称性销钉对称性 逼近条纹的蝇眼▶逼近条纹的蝇眼 对称性补全对称性补全 周期视频周期视频 三维热场重建三维热场重建 线虫左右对称线虫左右对称 间接 ToF(折返与多径)间接 ToF(折返与多径) 可复现 ICP可复现 ICP 像素位移的偏移与开口校准(无法确定的地图)像素位移的偏移与开口校准(无法确定的地图) 牲畜体重▶牲畜体重 乒乓球跟踪▶乒乓球跟踪 坐标高程陷阱坐标高程陷阱 EM 分割评分EM 分割评分 照片看不见的微米凹坑,用条纹的镜像找出(偏折术)照片看不见的微米凹坑,用条纹的镜像找出(偏折术) 触觉传感器标定触觉传感器标定 水与透明介质:海浪、泳池折射、水下颜色、瓶子的焦散线水与透明介质:海浪、泳池折射、水下颜色、瓶子的焦散线 托盘装载率托盘装载率 剑玉▶剑玉 实拍深空实拍深空 分割错误与连线分割错误与连线 像素位移(伪色与混叠)像素位移(伪色与混叠) 用真实图像标定薄膜模型(可确定的系数与无法确定的组合)用真实图像标定薄膜模型(可确定的系数与无法确定的组合) 按处方参数透过镜头拍摄三维场景:景深、猫眼虚化、边角照度、色差、鬼像按处方参数透过镜头拍摄三维场景:景深、猫眼虚化、边角照度、色差、鬼像 无限缩放无限缩放 扯铃▶扯铃 搜索扫描宽度搜索扫描宽度 真实树骨架真实树骨架 TDI 线扫描相机与线扫描镜头TDI 线扫描相机与线扫描镜头 水在检测图像中的样子:泳池底的焦散、瓶子的侧视图、湿润的板、水下的船体水在检测图像中的样子:泳池底的焦散、瓶子的侧视图、湿润的板、水下的船体 用三维工具测四维▶用三维工具测四维 群体感知障碍群体感知障碍 两种高程(实测)两种高程(实测) 神经突起生长神经突起生长 虚拟透射电子显微镜(Thon 环与欠焦)虚拟透射电子显微镜(Thon 环与欠焦) 会场建筑与小行星丝川同一把尺:把 PLATEAU 的 CityGML LOD2 变成网格会场建筑与小行星丝川同一把尺:把 PLATEAU 的 CityGML LOD2 变成网格 引力透镜引力透镜 黏菌迷宫黏菌迷宫 用光谱反射率测薄膜厚度(用公开实测数据评分、晶圆干涉色)用光谱反射率测薄膜厚度(用公开实测数据评分、晶圆干涉色) 火星车轮打滑火星车轮打滑 黏菌最优传输黏菌最优传输 虚拟 SEM 与加速电压虚拟 SEM 与加速电压 把稻田杂草覆盖度分为 4 级把稻田杂草覆盖度分为 4 级 走行长度与 VOI走行长度与 VOI 用两种能量把肉中的骨片与玻璃分开(双能 X 射线)用两种能量把肉中的骨片与玻璃分开(双能 X 射线) 线虫脑核心线虫脑核心 光栅干涉仪(暗场中可见的纤维、裂纹与气孔)光栅干涉仪(暗场中可见的纤维、裂纹与气孔) 突触与神经突起突触与神经突起 光谱仪与照明系统(带宽与光源的纹样)光谱仪与照明系统(带宽与光源的纹样) 用细胞体的点画出苍蝇的脑用细胞体的点画出苍蝇的脑 以 MTF、良率和补偿行程分配镜头制造公差以 MTF、良率和补偿行程分配镜头制造公差 基于处方的光场相机:从原始微图像到重聚焦与距离基于处方的光场相机:从原始微图像到重聚焦与距离 在扫描像和透射像中测量同一批粒子▶在扫描像和透射像中测量同一批粒子 同一三维场景的间接与直接飞行时间:多径、混合像素、堆积和体积误差▶同一三维场景的间接与直接飞行时间:多径、混合像素、堆积和体积误差 全景检测与立体显示全景检测与立体显示

系列文章 (Qiita 上的英文文章)

纸上的测量馆纸上的测量馆自己植入真值的 PoC 展馆 乒乓球乒乓球从视频测量弹跳与摩擦 自动驾驶自动驾驶用定理与第二实现评分 连接组(脑接线图)连接组(脑接线图)把苍蝇视觉模型装到身体上测量 人形机器人运动会人形机器人运动会由图像处理担任裁判的家庭运动会

能做什么

共 97 项,每项都有说明页(用法与限制)和可运行的示例。

查找

测量

光与色

波与信号

重建与校正

搭建流程

呈现

绘制

其他 174 个使用示例(非 PoC)的列表

全部看

PoC 283 个,另有机器人示例 5 个。展开分组即可加载缩略图。

机器人之眼(由 Fullseye 负责感知) (4)
机器人的身体(在 Fullseye 中运行已训练的策略) (1)
工业检测 (50)
尺寸与形状测量 (55)
三维形状 (20)
几何与标定 (19)
成像质量与复原 (24)
颜色与分离 (17)
把时间序列当作三维测量 (21)
连接组与神经 (20)
医学与生物 (9)
天文与环境 (23)
法证与文档 (5)
自动驾驶 (13)
数学图像 (7)

能看到什么/测得的数字

所有数字都是相对各 PoC 自己植入的真值(闭式、解析解或公开值)的实测;运行 PoC 会打印出相同的值。

图像检测与外观测量

三维测量与几何处理

X 射线 CT 与体数据处理

光学、干涉、偏振

热、声学、时间序列

机器人与空间感知

乒乓球与运动测量

自动驾驶

连接组与神经

机器人之眼(由 Fullseye 负责感知)

数学可视化

Fullseye 是什么

通过 MCP 和 RAG,把包含光学设计、三维测量等传感在内的物理仿真与经典图像处理交给 AI,让它针对每个课题考虑组合方式,并在类型一致性检查和带真值的评估下以对话方式解决课题的平台。开源(Apache-2.0)。

试一试 (Python 3.11)
pip install fullseye
git clone https://github.com/furuse-kazufumi/fullseye
cd fullseye
python examples/poc_focus_stacking.py

景深合成 PoC 约 20 秒跑完,打印相对真值的数字和 PASS。图写入 out/figures/poc_focus_stacking/。

链接
论文信息

摘要(由日文翻译): 本文提出开源平台 Fullseye:把图像检测与三维测量的处理组装成声明了输入输出数据类型的算子链,以物理与成像仿真生成的真值进行定量评估,并记录处理流程、评估和失败条件以便复用。它由约 3,000 个类型化算子、在执行前拒绝类型不一致的检查、多语言算子检索(RAG)以及 200 多个带真值的验证程序组成。本文报告代表例的定量评估,以及合成、实测、实机三个验证阶段的区分。