CN102300102B - 利用色彩解耦的视讯传输的方法及其装置 - Google Patents

利用色彩解耦的视讯传输的方法及其装置 Download PDF

Info

Publication number
CN102300102B
CN102300102B CN201110181549.1A CN201110181549A CN102300102B CN 102300102 B CN102300102 B CN 102300102B CN 201110181549 A CN201110181549 A CN 201110181549A CN 102300102 B CN102300102 B CN 102300102B
Authority
CN
China
Prior art keywords
composition
gtg
video pictures
video
colour component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110181549.1A
Other languages
English (en)
Other versions
CN102300102A (zh
Inventor
张建袆
张阳郎
张涵杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ali Corp
Richwave Technology Corp
Original Assignee
Ali Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ali Corp filed Critical Ali Corp
Publication of CN102300102A publication Critical patent/CN102300102A/zh
Application granted granted Critical
Publication of CN102300102B publication Critical patent/CN102300102B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/587Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal sub-sampling or interpolation, e.g. decimation or subsequent interpolation of pictures in a video sequence

Abstract

本发明公开了一种利用色彩解耦的视讯传输的方法及其装置和可读取媒介。该装置接收包括多个灰阶成分和多个色彩成分的多个彩色视讯画面;当收到该多个彩色视讯画面的每一彩色视讯画面时,萃取对应于该彩色视讯画面的多个灰阶成分,以得到多个灰阶视讯画面;以第一传输速率传输该多个灰阶视讯画面;周期性地将被选择的多个彩色视讯画面中的多个色彩成分和被选择的多个灰阶视讯画面融合,以得到被融合的多个彩色视讯画面;及以第二传输速率传输该被融合的多个彩色视讯画面,以及以该第一传输速率传送该多个灰阶视讯画面。因此,本发明对于任何给定的频宽所传输的色彩信息量是少于现有技术对于任何给定的频宽所传输的色彩信息量。

Description

利用色彩解耦的视讯传输的方法及其装置
技术领域
本发明是有关于一种传输数字视讯的方法及其装置,尤指一种在传输彩色数字视讯时,利用色彩解耦减少所需频宽的方法及其装置。 
背景技术
在现有技术中,彩色数字视讯画面可用不同的色彩空间或色彩模型表示,例如使用红绿蓝(RGB)成分,色相(hue,H)、饱和度(saturation,S)及强度(Intensity,I)成分,或亮度(Y)和色度(UV/CbCr/PbPr)成分等。可根据设计限制或是在一色彩空间和还一色彩空间之间任意作为相对容易执行的转换成分,选择一个色彩空间。而彩色数字视讯画面的像素可通过相对应色彩空间的成分用数字数值表示之。在数字数值传送至显示装置之前,这些数字数值可先行做数字处理,例如量化或压缩,然后封包进入动态图像压缩标准(Motion Picture Experts Group,MPEG)传送流里。 
特定的色彩空间(像是YUV色彩空间和HSI色彩空间)具有从它们的色彩成分(UV/HS)分离出来的灰阶成分(Y/I)。当对彩色数字视讯画面的像素作数字处理和采样时,具有分离的灰阶成分和色彩成分的色彩空间必须考虑人类的感知。因为当屏幕或显示装置显示图像时,比起色彩成分,人类的大脑更为依赖灰阶成分,或黑色与白色。 
发明内容
当从摄像机接收多个色彩视讯画面时,萃取对应于该多个色彩视讯画面的多个灰阶成分,以得到多个灰阶视讯画面,以第一传输速率传输该多个灰阶视讯画面,周期性地将被选择的多个色彩视讯画面中的多个色彩成分和被选择的多个灰阶视讯画面融合,以得到被融合的多个色彩视讯画面,以及以 第二传输速率传输该被融合的多个彩色视讯画面时,穿插以该第一传输速率传送的该多个灰阶视讯画面。 
附图说明
图1是为说明数种色彩空间的示意图。 
图2是为说明利用不同YUV色彩采样比例处理视讯画面的示意图。 
图3是为说明具有色彩采样比例2∶1∶0的采样视讯画面及序列传输采样视讯画面的示意图。 
图4是为本发明的一实施例说明通过色彩解耦过程分开处理彩色视讯画面的灰阶和色彩成分的功能方块的示意图。 
图5是为本发明的一实施例说明具有解耦色彩成分的彩色视讯画面的示意图。 
图6是为本发明的一实施例说明通过色彩解耦过程执行视讯传输的系统的功能方块的示意图。 
图7是为本发明的还一实施例说明色彩解耦过程处理彩色视讯画面的方法的流程图。 
其中,附图标记说明如下: 
100                                彩色立方体 
110                                HSI圆平面 
120                                YUV色彩平面 
200、210、220、230                 像素数组 
300                                采样视讯画面 
310、320、330、510、520、530、540  视讯画面 
331、550                           序列传输采样视讯画面 
400、500                           彩色视讯画面 
410                                灰阶成分 
420、430                           色彩成分 
440                        灰阶图像处理 
450                        融合视讯 
460                        传输视讯 
600                        系统 
605                        图像处理装置 
610                        数据处理装置 
620                        内存 
630                        界面模块 
640                        无线发射器 
650                        摄像机 
660                        无线接收器 
670                        显示屏 
700                        色彩解耦过程 
U1、V1                     UV色彩样本 
Y1-Y4                      像素 
710至750                   步骤 
具体实施方式
请参照图1,图1是为说明数种色彩空间的示意图。如图1所示,在彩色立方体100中,红绿蓝(RGB)色彩模型运用各种不同比例混和红、绿、蓝三原色,以合成出各种颜色,其中红绿蓝(RGB)色彩模型可应用在各式各样的领域之中,但最常见的还是应用在彩色电视和计算机屏幕。可缩放以及标准化彩色立方体100,使其边长范围介于0与1间,例如(1,0,0)代表红色、(0,1,0)代表绿色、(0,0,1)代表蓝色、(0,0,0)代表黑色以及(1,1,1)是为白色。另外,在彩色立方体100中,代表灰阶的细虚线从黑色(0,0,0)延伸至白色(1,1,1)。 
当红绿蓝色彩模型中的红、绿、蓝三原色用数字化表示时,是用一组位表示红、绿、蓝三原色从0至1的比例。例如,如果是用8位表示红、绿、蓝三原色从0至1的比例,则0至1之间可分成256等份,以表示红、绿、蓝三原色中的每一色彩的比例。因为红、绿、蓝三原色中的每一色彩有256种可能性,所以当红、绿、蓝三原色组合在一起时,则可得出总数16,777,216种组合的数字色彩(2563)。另外,用以表示半8位时,则0至1之间可分成127等份。如果是用16位表示红、绿、蓝三原色从0至1的比例,则0至1之间可分成65535(216-1)等份,以表示红、绿、蓝三原色中的每一色彩的比例。另外,可基于人类的视觉以及红、绿、蓝三原色的加权平均,以计算出红绿蓝色彩的灰阶。一般是根据30%的红色、59%的绿色以及11%的蓝色,计算红绿蓝色彩的灰阶。此外,值得注意的是不同的缩放因子(scaling factor)和校正因子(correction factor),例如伽马校正因子γ,可被利用在处理不同原色的情况。 
HSI圆平面110被描述在图1的右上角,其中H表示是从HSI圆平面110的红色开始旋转的弪度,其表示色相(hue)或主波长(dominant wavelength)、S表示距离原点的距离(0,0,0),其表示饱和度(saturation)或色度(colorfulness)。I表示垂直于HSI圆平面110的距离,其表示强度(Intensity)或亮度(brightness)。HSI圆平面110的三种成分(H、S、I)形成想象中的色圆柱。另外值得注意的是主波长(dominant wavelength)、色度(colorfulness)及亮度(brightness)是为比色法(colorimetry)或色彩理论(color theory)的基本组成,并不必分别等于色相(hue)、饱和度(saturation)及强度(Intensity)。另外,用数字化表示色相(hue)、饱和度(saturation)及强度(Intensity)的方法和彩色立方体100的方法相同,在此不再赘述。 
YUV色彩平面120被描述在图1的右下角,YUV色彩平面120是伴随着彩色电视机的出现而发展出来。因为黑白电视信号已经存在,所以将色彩成份(U和V成份)加入黑白信号Y(亦即灰阶信号)。U和V是为不同的色彩信号,其中U等于蓝色成份减去Y,V等于红色成份减去Y以及绿色是为Y、U及V的组合。 
请参照图2,图2是为说明利用不同YUV色彩采样比例处理视讯画面的示意图。YUV色彩采样比例通常是为L∶M∶N的形式,且可对应参照L×2的像素区块(亦即二列L个水平像素),其中L是为2的整数次方,例如,2,4,8,16,…等。但本发明并不受限于L是为2的整数次方,L亦可为任何整数。M是为在L×2的像素区块中第一列的UV样本数,而N是为在L×2的像素区块中第二列的UV样本数。因为每一列的UV样本数是为Y的比例,所以每一像素都有Y成分。如图2所示,每一圆圈代表像素。空白圆圈代表像素仅具有Y值,而斜线圆圈代表像素具有Y、U及V值。 
在像素数组200中,视讯画面具有的YUV色彩采样比例是为4∶4∶4(L=4、M=4及N=4)。为了清楚说明图2中的视讯画面具有的YUV色彩采样比例,每一色彩采样比例的第一4×2(L=4)像素区块是被虚线矩形所强调,视讯画面中的其余4×2的像素区块的操作原理皆和第一4×2像素区块相同,在此不再赘述。在色彩采样比例4∶4∶4的色彩采样方案中,第一4×2像素区块的第一列的四个像素皆有U和V的样本,所以M是为4;第一4×2像素区块的第二列的四个像素亦皆有U和V的样本,所以N是为4。在像素数组210中,视讯画面具有的YUV色彩采样比例是为4∶2∶2(L=4、M=2及N=2)。在色彩采样比例4∶2∶2的色彩采样方案中,第一4×2像素区块的第一列有二个像素有U和V的样本,所以M是为2;第一4×2像素区块的第二列有二个像素有U和V的样本,所以N是为2。在像素数组220中,视讯画面具有的YUV色彩采样比例是为4∶1∶1,亦即第一4×2像素区块的每一列仅有一个像素具有U和V的样本。在像素数组230中,视讯画面具有的YUV色彩采样比例是为4∶2∶0。在色彩采样比例4∶2∶0的色彩采样方案中,第一4×2像素区块的第一列有二个像素有U和V的样本,以及第一4×2像素区块的第二列有零个像素有U和V的样本。在一些色彩采样比例4∶2∶0的色彩采样方案中,U和V的值是为两列像素中U和V的平均值。虽然图2是用YUV色彩采样做说明,但图2的色彩采样比例亦可适用于其它色彩空间,例如HSI色彩空间。 
请参照图3,图3是为说明具有色彩采样比例2∶1∶0的采样视讯画面300及序列传输采样视讯画面331的示意图。如图3所示,在采样视讯画面300中包括简化的视讯画面310-330。视讯画面310是为描述具有色彩采样比例2∶1∶0的画面的最简单形式。视讯画面310有四个像素Y1-Y4仅有Y值,以及标示U1和V1的UV色彩样本。但视讯画面310并不受限于2×2像素区块的样本,亦即视讯画面310可为4×4、8×8、8×16等像素区块的样本,或其它可资代表完整视讯画面的像素区块的样本。在序列传输采样视讯画面331中,简化的视讯画面310-330是以色彩图像管道(color image pipeline)的方式传输。在序列传输采样视讯画面331中,是先传输视讯画面中的Y成分,再传输UV色彩成分。但序列传输采样视讯画面331并不受限于先传输视讯画面中的Y成分,再传输UV色彩成分,亦可先传输视讯画面中的UV色彩成分,再传输Y成分,或者Y成分和UV色彩成分可交错传输、压缩及/或错误更正。 
请参照图4,图4是为本发明的一实施例说明通过色彩解耦过程分开处理彩色视讯画面的灰阶和色彩成分的功能方块的示意图。图4、图5和图6是为概略描述色彩解耦过程700,图7是为详尽说明色彩解耦过程700。简单地说,色彩解耦过程700是对彩色视讯画面分开处理灰阶和色彩成分,以及周期性地融合色彩成分回到色彩图像管道,而未使用的色彩信息将被抛弃。在彩色视讯画面400中,图像处理装置接收彩色视讯画面具有的灰阶和色彩成分。当彩色视讯画面被接收后,从色彩成分420和430中分离或萃取出灰阶成分410。在灰阶图像处理440中,利用图像处理技术,例如量化(quantization)或四元树聚合(quad-tree pyramiding),选择性地处理灰阶成分,以降低传递视讯画面时灰阶成分数据的量。 
在融合视讯450中,色彩成分420和430被周期性或选择性地融合已被灰阶图像处理440处理的灰阶成分。融合色彩成分的周期或速率是基于预定的原则或固定的速率,例如每一画面、每五个画面或每十个画面等。融合过程将详细描述在图7,在这里仅简单地说明在融合过程中,所选择的彩色视讯画面中的色彩成分被周期性地融合回相关的灰阶成分,也就是说,被选择 的色彩成分短暂地和被融合的灰阶成分相关。在传输视讯460中,传输融合视讯画面至显示装置。 
请参照图5,图5是为本发明的一实施例说明具有解耦色彩成分的彩色视讯画面500的示意图。如图5所示,彩色视讯画面500具有色彩采样比例2∶1∶0,且已根据色彩解耦过程700处理过。在视讯画面510中,显示出色彩图像管道的第一画面。视讯画面510除了已通过图4的色彩解耦过程700解耦、处理和融合过之外,是类似于图3的视讯画面310。如同视讯画面310,视讯画面510亦可为4×4、8×8、8×16等像素区块的样本,或其它可资代表完整视讯画面的像素区块的样本。视讯画面510有四个像素Y1-Y4仅有Y值,以及标示U1和V1的UV色彩样本。视讯画面520、530类似于视讯画面510但是没有UV色彩成分,亦即视讯画面520、530仅有灰阶的画面。在这个例子中,视讯画面520、530不会被选择以融合各自的色彩成分。因此,视讯画面520、530的色彩成分将被抛弃掉。 
如图5所示,视讯画面520、530后面跟随着一串灰阶画面。视讯画面540是为已选取用以融合各自色彩成分的一个视讯画面。视讯画面540后面亦跟随着一串灰阶画面。视讯画面540可基于预定的原则或预定的时间间隔被选取用以融合,例如每一画面、每五个画面或每十个画面等。在序列传输采样视讯画面550中,在色彩图像管道中传送简化的彩色视讯画面500。首先被传送的是Y成分,再来传送的是UV色彩成分。 
如图5所示,色彩解耦过程700的优点是传送的色彩信息远少于图3所传送的色彩信息。如此,本发明对于任何给定的频宽所传输的色彩信息量是少于现有技术对于任何给定的频宽所传输的色彩信息量。然而,当不论是视讯场景内的移动或是摄像机本身的移动造成视讯场景更动时,色彩成分皆和用以融合画面的灰阶成分同步。因此,直到下一次色彩成分融合灰阶成分之前,色彩阴影都将存在于显示屏上视讯场景更动的部分。对于一些应用而言,视讯场景变化缓慢,例如,车辆后视镜、备份摄像机(backup cameras)、婴儿 监控摄像机(baby monitoring cameras)、或用以局部监控病患的摄像机,色彩阴影仅是一个小问题,因此系统可以被设计成具有较小的传输频带。 
请参照图6,图6是为本发明的一实施例说明通过色彩解耦过程700执行视讯传输的系统600的功能方块的示意图。系统600包括摄像机650、图像处理装置605和耦接于无线接收器660的显示屏670。图像处理装置605包括数据处理装置610、界面模块630、内存620和无线发射器640。在内存620内储存一用以执行色彩解耦过程700的软件。图像处理装置605和色彩解耦过程700亦可完全由软件实现,以及执行在商用现成的计算装置上。 
数据处理装置610是为微处理器、微控制器、芯片系统(systems on a chip,SOC)或其它固定或是可编程逻辑电路。内存620可以是任何型式的随机存取内存(random access memory,RAM),或是其它可用以储存本发明所使用的数据的数据储存区块。内存620可独立于数据处理装置610之外,或是数据处理装置610的部分。通过数据处理装置610处理色彩解耦过程700的指令储存于内存620。界面模块630致能图像处理装置605和摄像机650之间的通信,以及提供连结至其它包括在系统600的网络装置(未绘示于图6)的接口。 
数据处理装置610的功能可通过具有编码指令的有形可读取媒介的处理器,或通过在一或多个逻辑编码的有形媒介实现,例如,嵌入式逻辑像是特定用途集成电路(application specific integrated circuit,ASIC)、数字信号处理器(digital signal processor,DSP)指令或是可通过处理器执行的软件等,其中内存620储存数据处理装置610所需用以计算及执行功能的数据及/或用以执行计算及执行功能的软件或处理器的指令。如此,色彩解耦过程700将可通过固定或可程序化逻辑实现,而固定或可程序化逻辑可以是由处理器或是组件可编程逻辑门阵列(field programmable gate array,FPGA)所执行的软件或是计算机指令。 
彩色视讯画面是从摄像机650传送至图像处理装置605。图像处理装置 605处理彩色视讯画面,以产生灰阶画面和融合视讯画面。灰阶画面和融合视讯画面通过无线发射器640传送至无线接收器660。然后通过显示屏670显示灰阶画面和融合视讯画面。当传递视讯时,发生封包遗失或是数据毁损将导致译码视讯画面遗失视讯信息。遗失的视讯信息可通过从先前译码视讯画面复制受影响区域或是通过无线发射器640再次传送遗失的视讯信息复原。无线接收器660和显示屏670可包括控制器或是处理器,用以处理所接收的灰阶画面和融合视讯画面以显示在显示屏670。 
请参照图7,图7是为本发明的还一实施例说明色彩解耦过程700处理彩色视讯画面的方法的流程图。在步骤710中,图像处理装置(例如图像处理装置605)接收具有灰阶成分和色彩成分的彩色视讯画面。在步骤720中,从图像处理装置所接收的彩色视讯画面中,萃取或分离出对应于每一彩色视讯画面的灰阶成分,以得到灰阶视讯画面。一但由图像处理装置所接收的彩色视讯画面中分离灰阶视讯画面后,灰阶视讯画面将额外经历图4的处理。在本发明的还一实施例中,可由YUV或HIS摄像机接收已分离成灰阶视讯画面和彩色视讯画面的视讯画面。而在本发明的还一实施例中,可由RGB源接收视讯画面,但由RGB源所接收的视讯画面必须转换成YUV或HIS。 
RGB的信号可根据式(1)转换成YUV的信号: 
Y=0.299R+0.587G+0.114B 
U=0.492(B-Y)                        (1) 
V=0.877(R-Y) 
本发明并不受限于式(1)的系数,且式(1)的系数和所使用的设备以及设计条件高度相依。 
RGB的信号可根据式(2)转换成HSI的信号: 
I=(R+G+B)/3 
S=1-(3/(R+G+B))×a,where a=min(R,G,B)                (2) 
H=cos-1((0.5×((R-G)+(R-B)))/((R-G)2+(R-B)×(G-B))1/2
If(B/I)>(G/I),then H=360-H,H是为弪度。 
H可被标准化后介于0与1之间,也就是说H=H/360,或是可根据用以数字表示H的位数目予以标准化。同理,S和I亦可根据用以数字表示S和I的位数目予以标准化。 
如图7所示,在步骤730中,是以第一传输速率传送灰阶视讯画面。因为人类大脑非常依赖灰阶成分,所以灰阶视讯画面是被连续地传送。另外,传送画面的画面速率要大于10赫兹(Hz)以避免显示器出现闪烁的现象,但第一传输速率并不一定要和传送彩色视讯画面被提供的频率相同,例如,摄像机650所提供的彩色视讯画面的频率。举例来说,摄像机650可提供的彩色视讯画面的频率是为30赫兹或60赫兹,然而图像处理装置605是以15赫兹、24赫兹或30赫兹传输灰阶视讯画面。 
在步骤740中,被选择的彩色视讯画面的色彩成分周期性地和被选择的灰阶视讯画面融合以得到融合的彩色视讯画面。在步骤750中,以第二传输速率传送融合的彩色视讯画面,以及以第一传输速率传送灰阶视讯画面。在本发明的还一实施例中,色彩成分被周期性地加在流向外的视讯流。另外,色彩成分被融合的速率可以是变动的或是根据事先预定的标准或是一些固定的速率,例如每一画面、每五个画面或每十个画面等。事先预定的标准可包括超过阀值的动态补偿、在二连续彩色视讯画面之间的一或多灰阶成分的改变超过阀值及/或在二连续彩色视讯画面之间的一或多灰阶成分速率的改变超过阀值。例如,如果一或多像素区块的动态补偿向量或是一个画面超过阀值,则以较高速率将色彩成分加至一或多像素区块或是画面,以降低色彩阴影。 
在本发明的还一实施例中,灰阶成分可另经图像处理技术处理。图像处理可包括利用画面间累赘技术(inter-frame redundancy technique)、降低灰阶分辨率(grayscale resolution)及/或降低空间分辨率(spatial resolution)。画面间累赘技术包括不同的画面处理、边缘图像侦测(edge map detection)及区段长度编码法(run length coding)。而位层编码(bit-plane coding)、脉冲编码调变(pulse code modulation)及/或图像量化可用以降低灰阶分辨率。空间分辨率可通过计算图像金字塔(image pyramid)及/或计算小波转换(wavelet transform)降低。另外,本发明上述提及的实施例可通过其它现有技术已知的图像处理技术处理。 
综上所述,本发明提供利用色彩解耦的图像传输的方法及其装置。利用色彩解耦的图像传输的方法及其装置是利用图像处理装置接收包括多个灰阶成分和多个色彩成分的多个彩色视讯画面,然后萃取对应于每一彩色视讯画面的多个灰阶成分,以得到多个灰阶视讯画面,以第一传输速率传输多个灰阶视讯画面,周期性地将被选择的多个彩色视讯画面中的多个色彩成分和被选择的多个灰阶视讯画面融合,以得到被融合的多个彩色视讯画面,及以第二传输速率传输该被融合的多个彩色视讯画面,以及以该第一传输速率传送该多个灰阶视讯画面。因此,本发明对于任何给定的频宽所传输的色彩信息量是少于现有技术对于任何给定的频宽所传输的色彩信息量。 
以上所述仅为本发明的优选实施例,凡依本发明权利要求所做的均等变化与修饰,皆应属本发明的涵盖范围。 

Claims (20)

1.一种利用色彩解耦的视讯传输的方法,包括:
视讯处理装置依序接收第一视讯画面与第二视讯画面,其中该第一视讯画面包括第一灰阶成分与第一色彩成分,以及该第二视讯画面包括第二灰阶成分与第二色彩成分;
该方法的特征在于还包括:
萃取出该第一视讯画面的第一灰阶成分与第一色彩成分与该第二视讯画面的第二灰阶成分与第二色彩成分;
以第一传输速率传送该第一灰阶成分与该第二灰阶成分;
周期性地融合该第二灰阶成分与该第二色彩成分;及
以该第一传输速率传送仅包括该第一灰阶成分以作为第三视讯画面,以及以第二传输速率传送包括该第二灰阶成分与该第二色彩成分以作为第四视讯画面。
2.如权利要求1所述的方法,其特征在于,该第一传输速率和该第二传输速率是为固定或随预定的标准改变。
3.如权利要求2所述的方法,其特征在于,该预定的标准包括超过阀值的动态补偿、在二连续视讯画面之间的一或多灰阶成分的改变超过阀值及/或在二连续视讯画面之间的一或多灰阶成分改变的速率超过阀值。
4.如权利要求1所述的方法,其特征在于,还包括利用画面间累赘技术处理该第一、该第二灰阶成分。
5.如权利要求4所述的方法,其特征在于,该画面间累赘技术包括不同的画面处理、边缘图像侦测及区段长度编码法。
6.如权利要求1所述的方法,其特征在于,还包括处理该第一、该第二灰阶成分以降低灰阶分辨率。
7.如权利要求6所述的方法,其特征在于,降低该灰阶分辨率包括位层编码、脉冲编码调变及/或图像量化。
8.如权利要求1所述的方法,其特征在于,还包括处理该第一、该第二灰阶成分以降低空间分辨率。
9.如权利要求8所述的方法,其特征在于,降低该空间分辨率包括计算图像金字塔及/或计算小波转换。
10.如权利要求1所述的方法,其特征在于,是由摄像机接收该第一、该第二视讯画面。
11.如权利要求1所述的方法,其特征在于,传送该第三、该第四视讯画面包括无线传输及还包括:
利用耦接于显示屏的无线接收器接收该第三、该第四视讯画面;及
在该显示屏上显示该第三、该第四视讯画面。
12.一种利用色彩解耦的视讯传输的装置,包括:
界面模块,用以依序接收第一视讯画面与第二视讯画面,其中该第一视讯画面包括第一灰阶成分与第一色彩成分,以及该第二视讯画面包括第二灰阶成分与第二色彩成分;及
该装置的特征在于还包括:
数据处理装置,用以萃取出该第一视讯画面的第一灰阶成分与第一色彩成分与该第二视讯画面的第二灰阶成分与第二色彩成分,以第一传输速率传送该第一灰阶成分与该第二灰阶成分,周期性地融合该第二灰阶成分与该第二色彩成分,以该第一传输速率传送仅包括该第一灰阶成分以作为第三视讯画面,以及以第二传输速率传送包括该第二灰阶成分与该第二色彩成分以作为第四视讯画面。
13.如权利要求12所述的装置,其特征在于,该数据处理装置是基于预定的标准改变该第一传输速率和该第二传输速率。
14.如权利要求13所述的装置,其特征在于,该数据处理装置基于该预定的标准改变该第一传输速率和该第二传输速率包括:超过阀值的动态补偿、在二连续视讯画面之间的一或多灰阶成分的改变超过阀值及/或在二连续视讯画面之间的一或多灰阶成分改变的速率超过阀值。
15.如权利要求12所述的装置,其特征在于,该数据处理装置还用以利用画面间累赘技术处理该第一、该第二灰阶成分。
16.如权利要求12所述的装置,其特征在于,该数据处理装置还用以处理该第一、该第二灰阶成分以降低灰阶分辨率。
17.如权利要求12所述的装置,其特征在于,该数据处理装置还用以处理该第一、该第二灰阶成分以降低空间分辨率。
18.如权利要求12所述的装置,其特征在于,还包括摄像机,其中该界面模块是由该摄像机接收该第三、该第四视讯画面。
19.如权利要求12所述的装置,其特征在于,还包括:
无线发射机,其中该数据处理装置是利用该无线发射机传送该第三、该第四视讯画面;
无线接收机,用以接收该第三、该第四视讯画面;及
显示屏,耦接于该无线接收机,用以显示该第三、该第四视讯画面。
20.一种应用于色彩解耦的视讯传输的装置的方法,其中该装置包括界面模块与数据处理装置,该方法包括:
通过该界面模块依序接收第一视讯画面与第二视讯画面,其中该第一视讯画面包括第一灰阶成分与第一色彩成分,以及该第二视讯画面包括第二灰阶成分与第二色彩成分;
该方法的特征在于还包括:
该数据处理装置萃取出该第一视讯画面的第一灰阶成分与第一色彩成分与该第二视讯画面的第二灰阶成分与第二色彩成分;
该数据处理装置以第一传输速率传送该第一灰阶成分与该第二灰阶成分;
该数据处理装置周期性地融合该第二灰阶成分与该第二色彩成分;及
该数据处理装置以该第一传输速率传送仅包括该第一灰阶成分以作为第三视讯画面,以及以第二传输速率传送包括该第二灰阶成分与该第二色彩成分以作为第四视讯画面。
CN201110181549.1A 2010-06-28 2011-06-27 利用色彩解耦的视讯传输的方法及其装置 Active CN102300102B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/824,498 2010-06-28
US12/824,498 US8798171B2 (en) 2010-06-28 2010-06-28 Video transmission by decoupling color components

Publications (2)

Publication Number Publication Date
CN102300102A CN102300102A (zh) 2011-12-28
CN102300102B true CN102300102B (zh) 2013-12-18

Family

ID=45352222

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110181549.1A Active CN102300102B (zh) 2010-06-28 2011-06-27 利用色彩解耦的视讯传输的方法及其装置

Country Status (3)

Country Link
US (1) US8798171B2 (zh)
CN (1) CN102300102B (zh)
TW (1) TWI472232B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106611407A (zh) * 2015-10-21 2017-05-03 中华映管股份有限公司 图像增强方法及图像处理设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020177133A1 (zh) * 2019-03-07 2020-09-10 Oppo广东移动通信有限公司 环路滤波实现方法、装置及计算机存储介质
CN113396594A (zh) * 2019-03-07 2021-09-14 Oppo广东移动通信有限公司 环路滤波实现方法、装置及计算机存储介质
WO2021119968A1 (zh) * 2019-12-17 2021-06-24 威创集团股份有限公司 一种视频融合方法、装置及存储介质

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4701783A (en) 1982-09-14 1987-10-20 New York Institute Of Technology Technique for encoding and decoding video with improved separation of chrominance and luminance
US4651208A (en) * 1985-03-18 1987-03-17 Scientific Atlanta, Inc. Compatibility of widescreen and non-widescreen television transmissions
US5347321A (en) * 1993-09-30 1994-09-13 Texas Instruments Incorporated Color separator for digital television
JP3364074B2 (ja) * 1995-06-05 2003-01-08 株式会社リコー ビットプレーン符号化装置
JP3413721B2 (ja) * 1998-06-26 2003-06-09 ソニー株式会社 画像符号化方法及び装置、並びに画像復号方法及び装置
US6208382B1 (en) 1998-07-29 2001-03-27 Florida Atlantic University Color video processing system and method
US6553153B1 (en) 1998-12-03 2003-04-22 Chips And Technologies, Llc. Method and apparatus for reducing video data
JP3561485B2 (ja) 2000-08-18 2004-09-02 株式会社メディアグルー 符号化信号分離・合成装置、差分符号化信号生成装置、符号化信号分離・合成方法、差分符号化信号生成方法、符号化信号分離・合成プログラムを記録した媒体および差分符号化信号生成プログラムを記録した媒体
US20030002582A1 (en) 2001-06-13 2003-01-02 Pere Obrador Multi-resolution boundary encoding applied to region based still image and video encoding
US7483581B2 (en) 2001-07-02 2009-01-27 Qualcomm Incorporated Apparatus and method for encoding digital image data in a lossless manner
JP3956887B2 (ja) * 2003-04-10 2007-08-08 セイコーエプソン株式会社 画像処理装置および画像処理方法並びに画像処理プログラム
US20080123739A1 (en) 2003-09-25 2008-05-29 Amimon Ltd. Wireless Transmission of High Quality Video
KR100596706B1 (ko) * 2003-12-01 2006-07-04 삼성전자주식회사 스케일러블 비디오 코딩 및 디코딩 방법, 이를 위한 장치
US7369661B2 (en) 2004-01-30 2008-05-06 Intel Corporation Method and apparatus for detection of loss of cipher synchronization
US20050207495A1 (en) * 2004-03-10 2005-09-22 Jayaram Ramasastry Methods and apparatuses for compressing digital image data with motion prediction
JP4357356B2 (ja) 2004-05-10 2009-11-04 株式会社東芝 映像信号受信装置及び映像信号受信方法
US7664184B2 (en) 2004-07-21 2010-02-16 Amimon Ltd. Interpolation image compression
US7499462B2 (en) 2005-03-15 2009-03-03 Radiospire Networks, Inc. System, method and apparatus for wireless delivery of content from a generalized content source to a generalized content sink
US8559525B2 (en) 2005-10-21 2013-10-15 Amimon Ltd. Apparatus and method for uncompressed, wireless transmission of video
KR20080076004A (ko) * 2007-02-14 2008-08-20 삼성전자주식회사 촬상장치 및 그 다이나믹 레인지 확장방법
JP2009290662A (ja) * 2008-05-30 2009-12-10 Panasonic Corp 画像送信装置および画像受信装置
US8094931B2 (en) * 2008-12-09 2012-01-10 Himax Technologies Limited Method of color components compression
US8891610B2 (en) * 2010-05-05 2014-11-18 Samsung Electronics Co., Ltd. Method and system for chroma partitioning and rate adaptation for uncompressed video transmission in wireless networks

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106611407A (zh) * 2015-10-21 2017-05-03 中华映管股份有限公司 图像增强方法及图像处理设备

Also Published As

Publication number Publication date
US8798171B2 (en) 2014-08-05
TWI472232B (zh) 2015-02-01
TW201204059A (en) 2012-01-16
US20110317073A1 (en) 2011-12-29
CN102300102A (zh) 2011-12-28

Similar Documents

Publication Publication Date Title
CN102119532B (zh) 色域可缩放性技术
TWI629892B (zh) 景深包裝及解包裝之rgb格式與yuv格式的轉換與反轉換的方法及電路
JP7356478B2 (ja) カラー・ピクチャを符号化および復号する方法および装置
KR20210087469A (ko) 6- 원색 와이드 색역 컬러 시스템을 위한 시스템 및 방법
CN105721841B (zh) 高分辨率阵列摄像机
CN102300102B (zh) 利用色彩解耦的视讯传输的方法及其装置
CN102497388A (zh) 一种移动网络终端以及该终端与电视进行无线传屏的方法
CN101170707B (zh) 图像格式的转换和恢复方法及装置
CN101268700A (zh) 在视频上叠加字符的方法和设备
KR20150014453A (ko) 네이티브 3-컬러 이미지 및 hdr 이미지
KR20180044291A (ko) 코딩 및 디코딩 방법과 대응하는 디바이스
US20160029030A1 (en) Transmitting and receiving a composite image
CN104581103A (zh) 一种图片处理方法及装置
CN107396002B (zh) 一种视频图像的处理方法及移动终端
CN101164332A (zh) 图像处理装置及图像处理程序
US20160073124A1 (en) Transmitting and receiving a composite image
CN109429070A (zh) 一种移动终端视频编码方法、装置及移动终端
US9819833B2 (en) Method for converting an image, driver assistance system and motor vehicle
CN102025936A (zh) 视频宽高比转换方法及装置
JPH06342269A (ja) Led表示装置
CN103533322A (zh) 将yuv帧转码成rgb帧的方法及装置
GB2512657A (en) Transmitting and receiving a composite image
CN100356798C (zh) 三维梳型滤波视讯解码器中移动侦测的方法
CN103546731B (zh) 一种将Bitmap转成YUV格式的文件的方法
CN101588495A (zh) 一种彩色和灰度交替的视频编码方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant