光不足环境中的ycbcr脉冲调制的照明方案的利记博彩app
【专利说明】光不足环境中的YCBCR脉冲调制的照明方案
[0001] 相关申请的夺叉引用
[0002] 本专利申请要求下列权益：于2012年7月26日提交的美国临时申请 No. 61/676, 289、于2013年3月15日提交的美国临时申请No. 61/790, 487、于2013年3月 15日提交的美国临时申请N〇.61/790,719、以及于2013年3月15日提交的美国临时申请 No. 61/791，473,通过引用方式将它们全部内容并入本文中，包括但不限于此后特定显示的 那些部分，通过引用方式做出的并入除下列情形之外：如果上述所引用的申请的任何部分 与本申请不一致，则本申请取代所述上述引用的申请。
【背景技术】
[0003] 技术进步已经为医疗应用提供了成像能力的进步。由于组成内窥镜的组件的发 展，因而享有了 一些最有益进步的一个领域是内窥镜外科程序。
[0004] 本公开大体上涉及与创建具有来自受控光源的色度和亮度脉冲的视频流相关的 电磁感测以及传感器。将在接下来的说明书中提出本公开的特征和益处，并且本公开的特 征和益处部分地通过说明书显而易见，或者可以在没有过度的实验的情形下通过本公开的 实践而被获知。可以利用仪器以及此处特别指出的结合来实现和获得本公开的特征和益 处。
【附图说明】
[0005] 参考下面附图来描述本公开的非限制性和非穷尽性的实施方式，其中，除非特别 指定，则相同的参考数字指代贯穿多种视图的相同部分。参考接下来的说明书和说明书附 图将更好地理解本公开的益处。
[0006] 图1图示了根据本公开的原理和教导的像素阵列的操作的图解表示；
[0007] 图2图示了根据本公开的原理和教导的用于多个帧的像素阵列的图解表示；
[0008] 图3A图示了根据本公开的原理和教导的色度帧和亮度帧的操作顺序的实施例的 示意图；
[0009] 图3B图示了根据本公开的原理和教导的色度帧和亮度帧的操作顺序的实施例 的不意图；
[0010] 图3C图示了根据本公开的原理和教导的色度帧和亮度帧的操作顺序的实施例的 示意图；
[0011] 图4图示了根据本公开的原理和教导的传感器和发射器调制的实施例；
[0012] 图5图示了根据本公开的原理和教导的传感器和发射器图案的实施例；
[0013] 图6A图示了根据本公开的原理和教导的传感器和发射器图案的实施例；
[0014] 图6B图示了根据本公开的原理和教导的传感器和发射器图案的实施例；
[0015] 图7图示了根据本公开的原理和教导的具有不同像素敏感度的像素的像素阵列 的操作的图解表示；
[0016] 图8图示了根据本公开的原理和教导的具有不同像素敏感度的像素的像素阵列 的操作的图解表示；
[0017] 图9图示了根据本公开的原理和教导的像素阵列的操作的流程图；
[0018] 图10图示了根据本公开的原理和教导的像素阵列的操作的流程图；
[0019] 图11图示了根据本公开的原理和教导的像素阵列的操作的流程图；
[0020] 图12A图示了根据本公开的原理和教导的像素阵列的操作的图解表示；
[0021] 图12B图示了根据本公开的原理和教导的像素阵列的操作的图解表示；
[0022] 图13图示了根据本公开的原理和教导的支持的硬件的实施例；
[0023] 图14A和图14B图示了根据本公开的原理和教导的具有用于产生三维图像的多个 像素阵列的实施方式；
[0024] 图15A和图15B分别图示了建立在多个基板上的成像传感器的实施方式的透视图 和侧视图，其中，形成像素阵列的多个像素列位于第一基板上并且多个电路列位于第二基 板上并且示出了一个像素列和与其关联或相应的电路列之间的电连接和通信；以及
[0025] 图16A和图16B分别图示了具有用于产生三维图像的多个像素阵列的成像传感器 的实施方式的透视图和侧视图，其中，多个像素阵列和图像传感器被建立在多个基板上。
【具体实施方式】
[0026] 本公开涉及针对可以主要适用于医疗应用的数字成像的方法、系统以及基于计算 机的产品。在本公开接下来的描述中，参考了形成本公开一部分的说明书附图，其中，经由 说明指定的并且本公开可以在其中被实践的实施方式来示出说明书附图。应该了解的是， 在不背离本发明保护范围的情形下，其他实施方式可以被使用并且结构变化可以被做出。
[0027] 当彩色图像传输被要求与较老的单色阴极射线管（CRT)兼容时，基于亮度-色度 的颜色空间追溯到彩色电视机时代。亮度分量对应于图像数据的亮度方面（颜色未知）。 颜色信息被承载在剩余的两个信道中。图像数据分成亮度分量和色度分量在当今数字成像 系统中仍然是一个重要的过程，因为其与人类视觉系统紧密地相关。
[0028] 人类视网膜包含两个基本感光体细胞类型的阵列；杆体细胞（rod)和锥体细胞 (cone)。杆体细胞提供亮度信息，并且与相比，杆体细胞的总空间密度比椎体细胞大大约因 子-20。锥体细胞更不敏感并且存在三个基本类型，从而在三个不同波长处具有峰值响应。 峰值在绿色区域中的杆体细胞的光谱响应是计算亮度颜色空间转换系数的基础。由于杆体 细胞具有更大的密度，因此与任何色度分量相比，图像表示的空间分辨率对于亮度分量更 重要。相机设计师和图像处理工程师以多种方式、比如通过空间上对色度信道进行过滤以 减少噪音以及通过向亮度数据提供更大的相对系统带宽，来寻求解释这个事实。
[0029] 在描述本公开的术语时，将根据下面所述的限定使用以下术语。
[0030] 必须注意的是，如在该说明书和所附权利要求中所使用的那样，除非上下文中清 楚地做出相反指示之处，否则单数形式的"一"、"一个"及"该"也包括复数所指对象。
[0031] 如本文中所使用的那样，术语"包括"、"包含"、"特征在于"以及其语法等同体是不 排除额外的、未叙述的元件或方法步骤的包含型的或开放型的术语。
[0032] 如本文中所使用的那样，短语"由……组成"以及其语法等同体排除在权利要求书 中没有指定的任何元件或步骤。
[0033] 如本文中所使用的那样，短语"本质由……组成"以及其语法等同体将权利要求书 的范围限制为指定的物质或步骤以及那些不会本质上影响所要求的公开的基础和新颖性 特点或特征的物质或步骤。
[0034] 如本文中所使用的那样，术语"近端"应当广泛地指代最接近原点的部分的概念。
[0035] 如本文中所使用的那样，术语"远端"应当通常指代近端的相反，并且因此取决于 上下文而指代离原点更远的部分或者最远的部分的概念。
[0036] 现在参考说明书附图，图1图示了由传统CMOS传感器捕捉的单一帧的基本时序。 共同未决申请美国专利申请序列号13/952, 518,名称为"CONTINUOUS VIDEO IN A LIGHT DEFICIENT ENVIRONMENT"通过这个引用结合到本公开中，如同在此全部提出一样。应该理 解的是，X方向对应于时间并且对角线表示内部指针的活动，该内部指针每次一行地读出每 帧的数据。相同的指针负责为下一个曝光周期重置每行像素。用于每行的净积分时间是 等同的，但是，由于有规则的重置以及读取进程而致使它们在时间上彼此交错。因此，对于 在其中相邻帧需要代表不同的光的组成的任意方案而言，使每行保持一致的唯一选项是对 两个读出周期之间使光被脉冲调制。更具体而言，最大可用周期对应于消隐时间加上在其 期间光学黑体或者光学隐蔽（OB)的行在帧的开始处或结束处被提供服务的任意时间的总 和。
[0037] 一种示例照明顺序为四个帧（R-G-B-G)的重复图案。对于贝尔图案的滤色片而 言，这与色度相比提供了更大的亮度细节。在相机系统控制下，并且借由特别指定的具有高 速读出的CMOS传感器，来通过利用处于高速的激光或发光二极管对场景进行选通以实现 这个方法。主要益处在于：与传统的拜耳相机或3-传感器相机相比，传感器可以以显著更 少像素来实现相同空间分辨率。因此，可以减少由像素阵列所占据的物理空间。实际的脉 冲周期在重复图案内可以不同，如在图2中所图示的。这对于比如向需要更多光能的分量 或者具有更弱的源的分量分配更多的时间是有用的。只要平均捕捉的帧频为所需要的最终 系统帧频的整数倍，则数据可以被适当简单地缓冲到信号处理链中。
[0038] 通过结合所有这些方法而允许将CMOS传感器芯片面积减少至一定程度的便利对 于小直径（?3-10_)内窥镜检查特别具有吸引力。特别地，其允许传感器在其中位于限 制空间的远端中的内窥镜设计，从而显著地降低了光学部分的复杂性以及成本，同时提供 了高清晰度视频。这种方法的结果在于：重构每个最终的全色图像，并且该结果需要通过在 时间上的三个独立快照对数据进行融合。由于目标的边缘看上去位于每个捕捉到分量内的 稍微不同的位置处，因此相对于内窥镜的参考光帧而言，场景内的任何运动总体上将降低 感知的分辨率。在本公开中，描述了减少这个问题的手段，即利用了以下事实：相比于色度 信息而言，空间分辨率对于亮度信息更重要。
[0039] 这个方法的本质在于，代替了在每帧期间的单色光的发射，三个波长的结合被用 于提供在单一图像内的所有亮度信息。色度信息来源于具有比如、像Y-Cb-Y-Cr的重复图 案的独立的帧。虽然可以通过明智地选择脉冲比来提供纯的亮度数据，但这并不适用于色 度。然而，在本公开中对于这一点提出了解决办法。
[0040] 在实施例中，如在图3A中图示的，内窥镜系统300a可以包括具有统一（uniform) 像素的像素阵列302a，并且系统300a可以被操作为接收Y (亮度脉冲）304a、Cb (色度蓝 色