本發(fā)明涉及一種圖像處理裝置、圖像處理系統(tǒng)以及圖像處理方法。
背景技術(shù):
有時一邊翻書一邊使用數(shù)字照相機等依次拍攝多個頁,利用由此得到的包含多個圖像的數(shù)據(jù)。在這種情況下,由于照射到書頁的光的偏差、翻開書的狀態(tài)下的頁的彎曲等,有時在拍攝書頁而得到的圖像中產(chǎn)生亮度不均勻,即所謂亮斑。有亮斑的圖像存在局部產(chǎn)生濃淡以及明亮部分的文字模糊不清等情況,因此有時看不清楚。
例如在日本特開2005-269451號公報(以下,稱為專利文獻1)中公開了用于修正通過拍攝原稿而得到的原稿圖像的亮斑的技術(shù)。通常,消除亮斑并使圖像的亮度均勻化的修正也被稱為圖像斑點修正等。
專利文獻1所記載的圖像處理裝置檢查對原稿圖像進行分割后的各塊內(nèi)的各像素的亮度值,針對每個塊取得與原稿紙對應的亮度值,根據(jù)該亮度值求出各塊的圖像斑點修正值。而且,根據(jù)求出的圖像斑點修正值對各塊的像素進行圖像斑點修正。考慮將專利文獻1所記載的技術(shù)應用于通過拍攝書的多個頁的各頁而得到的多個圖像,修正多個圖像的亮斑。
然而,為了使用專利文獻1所記載的圖像處理裝置修正與書的多個頁的各頁對應的多個圖像的亮斑,考慮需要對每個圖像進行上述一系列處理。這樣,圖像處理裝置的處理負荷有可能增大。
這種用于修正多個圖像的亮斑的處理負荷變大的問題并不限于打開書拍攝多個頁的情況,在打開裝訂了文件等的檔案等來拍攝多個頁的情況下也有可能發(fā)生。
技術(shù)實現(xiàn)要素:
本發(fā)明是鑒于上述情形而作出的,其目的在于減輕用于修正多個圖像的亮斑的處理負荷,該多個圖像是打開將多個薄片裝訂在一起的物品進行拍攝而得 到的。
本發(fā)明的第一觀點的圖像處理裝置具備:第一修正量取得部,其根據(jù)將多個處理對象圖像中的第一圖像進行分割而得到的各塊內(nèi)的各像素的亮度,取得該各塊的第一亮度修正量,其中,上述多個處理對象圖像是打開將多個薄片裝訂在一起的對象物進行拍攝得到的;以及第一修正部,其根據(jù)上述各塊的第一亮度修正量,修正上述多個處理對象圖像內(nèi)的各像素的亮度。
本發(fā)明的第二觀點的圖像處理系統(tǒng)具備:上述第一觀點的圖像處理裝置;以及拍攝裝置,其拍攝上述多個處理對象圖像中的各個處理對象圖像。
本發(fā)明的第三觀點的圖像處理方法,包括以下步驟:根據(jù)將多個處理對象圖像中的第一圖像進行分割而得到的各塊內(nèi)的各像素的亮度,取得該各塊的亮度修正量,其中,上述多個處理對象圖像是打開將多個薄片裝訂在一起的對象物進行拍攝得到的;以及根據(jù)上述各塊的亮度修正量,修正上述多個處理對象圖像內(nèi)的各像素的亮度。
附圖說明
如果結(jié)合以下附圖考慮以下的詳細記述,能夠更深刻地理解本申請。
圖1是表示本發(fā)明的第一實施方式的圖像處理系統(tǒng)的結(jié)構(gòu)的圖。
圖2是表示第一實施方式的圖像處理系統(tǒng)的功能結(jié)構(gòu)的框圖。
圖3是表示第一實施方式的終端裝置作為圖像處理裝置而具備的功能結(jié)構(gòu)的框圖。
圖4是表示第一實施方式的圖像斑點修正部的功能結(jié)構(gòu)的框圖。
圖5是表示對處理對象圖像進行分割而成的多個塊的一例的圖。
圖6是表示第一實施方式的拍攝處理的流程的流程圖。
圖7是表示第一實施方式的圖像處理的流程的流程圖。
圖8是表示第一實施方式的圖像斑點修正處理的流程的流程圖。
圖9是表示第一修正表的一例的圖。
圖10A是表示拍攝書的第1頁時的光的偏差的圖,圖10B是表示拍攝書的第1頁時的頁P的彎曲的示例的圖。
圖11A是表示拍攝書的第2N-1頁時的光的偏差的圖,圖11B是表示拍攝書的第2N-1頁時的頁P的彎曲的示例的圖。
圖12是表示本發(fā)明的第二實施方式的圖像斑點修正部的功能結(jié)構(gòu)的框圖。
圖13是表示第二實施方式的圖像斑點修正處理的流程的流程圖,表示與第一實施方式的圖像斑點修正處理不同的部分。
圖14是表示本發(fā)明的第三實施方式的第二修正部的功能結(jié)構(gòu)的框圖。
圖15是表示第三實施方式的圖像斑點修正處理的流程的流程圖,表示與第二實施方式的圖像斑點修正處理不同的部分。
圖16用于說明通過對各塊的亮度修正量Yab進行插補而取得處理對象圖像內(nèi)的像素的亮度修正量Pxy的方法。
圖17是表示本發(fā)明的第四實施方式的圖像斑點修正部的功能結(jié)構(gòu)的框圖。
圖18是表示第四實施方式的圖像處理的流程的流程圖,表示與第二實施方式的圖像修正處理不同的部分。
圖19A和圖19B是表示第四實施方式的圖像斑點修正處理的流程的流程圖。
圖20是表示第四實施方式的第一圖像選擇處理的流程的流程圖。
圖21是表示第四實施方式的第二圖像選擇處理的流程的流程圖。
具體實施方式
以下,參照附圖說明本發(fā)明的實施方式。此外,對圖中相同或相當?shù)牟糠指郊酉嗤母綀D標記。
(第一實施方式)
本發(fā)明的第一實施方式的圖像處理系統(tǒng)100是用于對將多個薄片裝訂在一起的對象物進行電子化的系統(tǒng)。將多個薄片裝訂在一起的對象物除了包含將紙裝訂在一起而形成的書、雜志以外,還包含用裝訂器裝訂了文件的物品、裝訂了文件等的檔案等。在本實施方式中,以書為例子進行說明。
如圖1所示,圖像處理系統(tǒng)100具備:翻頁裝置101,其依次對書B的頁P進行翻頁;以及終端裝置102,當翻頁裝置101打開了成為拍攝對象的頁P時拍攝該頁P,將拍攝到的圖像作為處理對象圖像實施圖像處理。終端裝置102例如為智能手機。翻頁裝置101與終端裝置102構(gòu)成為通過未圖示的無線或有 線線路能夠相互進行通信。此外,終端裝置102也可以采用個人計算機、平板終端等。
在本實施方式中,設(shè)為書B依次具有封面、第1頁至第2N(N為1以上的整數(shù))頁、封底。
如圖1所示,翻頁裝置101具備:保持臺103,其保持被打開的書B;支架104,其用于相對于書B固定終端裝置102的位置和姿勢;大致長方體形狀的收納盒105;第一驅(qū)動部107,其具有驅(qū)動軸106;臂部108,其以驅(qū)動軸106為中心擺動;吸附部110,其經(jīng)由第二驅(qū)動部109安裝于臂部108的前端,吸附(或附著)在書B的頁P上;底座部111,其支承第一驅(qū)動部107、臂部108和吸附部110;以及送風部112,其使風通過翻頁前的頁P的上方,由此對翻頁后的頁P吹風。第一驅(qū)動部107和第二驅(qū)動部109例如分別為電動機。
另外,如圖2所示,翻頁裝置101在收納盒105的內(nèi)部具備:用于與終端裝置102進行通信的接口即第一通信部113;電動機驅(qū)動器114、115、116,其用于分別驅(qū)動第一驅(qū)動部107、第二驅(qū)動部109、送風部112;存儲有各種程序的ROM(Read Only Memory:只讀存儲器)117;CPU(Central Processing Unit:中央處理器)119,其通過執(zhí)行存儲在ROM 117中的程序,作為翻頁控制部118發(fā)揮功能;以及RAM(Random Access Memory:隨機存取存儲器)120,其在執(zhí)行ROM中存儲的程序時作為CPU 119的作業(yè)區(qū)域而發(fā)揮功能。
保持臺103以翻頁后的頁P相對于翻頁前的大致水平的頁P傾斜的方式保持書B。該傾斜角度θ例如為30~45度。
當由用戶等調(diào)整終端裝置102的照相機121(參照圖2)的朝向從而能夠拍攝保持臺103所保持的書B的頁P時,支架104以該位置和姿勢保持終端裝置102。在本實施方式中,將終端裝置102固定在支架104上,從而使用照相機121僅拍攝書B的對開的兩頁中的左頁。在此,左右分別與從正面(保持書B一側(cè))觀察翻頁控制部118時的左右相對應。
當從未圖示的電源供電時,CPU 119執(zhí)行存儲于ROM 117的程序而作為翻頁控制部118發(fā)揮功能。翻頁控制部118根據(jù)經(jīng)由第一通信部113取得的用戶的指示,控制電動機驅(qū)動器114、115從而對書B的頁P進行翻頁。
詳細地說,翻頁控制部118當經(jīng)由第一通信部113取得翻頁指示時,在使 電動機驅(qū)動器116驅(qū)動送風部112的狀態(tài)下,通過以下動作對頁P進行翻頁。
首先,翻頁控制部118控制第一驅(qū)動部107使臂部108從右向左移動。由此,吸附部110吸附在翻頁前的頁P(左側(cè)的頁P)上。
接著,翻頁控制部118控制第一驅(qū)動部107使臂部108從左向右移動。由此,開始對吸附在吸附部110的頁P進行翻頁。
接著,翻頁控制部118在使第一驅(qū)動部107進行驅(qū)動的狀態(tài)下控制第二驅(qū)動部109使吸附部110旋轉(zhuǎn)。通過該旋轉(zhuǎn),在使吸附部110從頁P分離時吸附強度發(fā)生變化,因此能夠切實地使吸附部110從頁P分離。
當使第一驅(qū)動部107和第二驅(qū)動部109兩者驅(qū)動預定的時間時,翻頁控制部118停止第一驅(qū)動部107和第二驅(qū)動部109。此時,能夠通過來自送風部112的風,防止翻頁后的頁P返回至原來位置,因此在將頁P進行了翻頁的狀態(tài)下,吸附部110從頁P分離。由此,將頁P翻頁,翻頁控制部118結(jié)束對頁P進行翻頁的動作。
在此說明的翻頁裝置101大致相當于將日本特開2015-3446號公報所公開的裝置構(gòu)成為與終端裝置102進行通信。此外,翻頁裝置101只要是對書B的頁P進行翻頁的裝置即可,并不限于具備在此說明的結(jié)構(gòu)的裝置。
終端裝置102一體地具備以下功能:當通過翻頁裝置101打開了成為拍攝對象的頁P時拍攝該頁P的拍攝裝置的功能;以及將拍攝到的圖像作為處理對象圖像來實施圖像處理的圖像處理裝置的功能。
如圖2所示,終端裝置102具備:用于與翻頁裝置101進行通信的接口即第二通信部122;照相機121,其拍攝書B的頁P;ROM 123,其存儲有各種程序;存儲部124,其存儲有各種程序、表示使用照相機121進行拍攝而得到的圖像的數(shù)據(jù)等;CPU 127,其通過適當?shù)貓?zhí)行存儲于ROM 123或存儲部124的程序,作為拍攝控制部125而發(fā)揮功能以及作為圖像處理部126而發(fā)揮功能;RAM 128,在執(zhí)行存儲在ROM 123中的程序時,作為CPU 127的作業(yè)區(qū)域而發(fā)揮功能;液晶設(shè)備等顯示部129,其顯示拍攝到的圖像、實施了圖像處理的圖像等;以及指示接受部130,其接受根據(jù)用戶的操作輸入的指示。
在本實施方式中,由顯示部129和指示接受部130構(gòu)成觸摸面板。即,顯示部129顯示包含用于用戶進行操作的按鈕等的畫面,指示接受部130接受與 顯示部129的畫面相對應的用戶的操作。指示接受部130也可以是鍵盤、按鈕、指點設(shè)備等。
拍攝裝置的功能例如通過以下各部來實現(xiàn):第二通信部122、照相機121、作為拍攝控制部125而發(fā)揮功能的CPU 127、由作為拍攝控制部125而發(fā)揮功能的CPU 127讀出或?qū)懭氲腞OM 123、存儲部124和RAM 128、顯示拍攝到的圖像等的顯示部129以及接受拍攝的指示等的指示接受部130。
圖像處理裝置的功能例如通過以下各部實現(xiàn):作為圖像處理部126而發(fā)揮功能的CPU 127、由作為圖像處理部126而發(fā)揮功能的CPU 127讀出或?qū)懭氲腞OM 123、存儲部124和RAM 128、顯示實施了圖像處理的圖像等的顯示部129以及接受用于實施圖像處理的指示等的指示接受部130。
詳細地說,照相機121例如由鏡頭、固體拍攝元件等構(gòu)成。作為固體拍攝元件的例子,可舉出CCD(Charge Coupled Device:電荷耦合器件)圖像傳感器、CMOS(Complementary Metal Oxide Semiconductor:互補金屬氧化物半導體)圖像傳感器等。
存儲部124由閃速存儲器等構(gòu)成。如圖3所示,在存儲部124中例如存儲有多個處理對象圖像數(shù)據(jù)131_1~2N。各個處理對象圖像數(shù)據(jù)131_1~2N表示打開書B來拍攝各頁P而得到的處理對象圖像i(i為1~2N的整數(shù))。處理對象圖像數(shù)據(jù)131_i表示在緊接著拍攝后使用照相機121拍攝書B的第i頁而得到的圖像,之后表示以該圖像為對象實施了圖像處理后的圖像。即,通過進行拍攝得到的處理對象圖像i不僅包含拍攝到的圖像本身,還包含對其實施圖像處理后的圖像。
如圖2所示,拍攝控制部125經(jīng)由第二通信部122進行通信,由此與翻頁裝置101對頁P進行翻頁的動作同步地使照相機121進行動作。由此,依次拍攝由翻頁裝置101翻頁后的各頁P。拍攝控制部125將表示照相機121拍攝到的圖像的數(shù)據(jù)存儲在存儲部124中。
當經(jīng)由指示接受部130接受了用戶的指示時,圖像處理部126對處理對象圖像數(shù)據(jù)131_1,3,…,2N-3,2N-1所示的奇數(shù)頁的處理對象圖像或處理對象圖像數(shù)據(jù)131_2,4,…2N-2,2N所示的偶數(shù)頁的處理對象圖像實施圖像處理。
更詳細地說,如圖3所示,圖像處理部126具有:失真修正部132,其對處理對象圖像實施失真修正;切出部133,其從實施了失真修正的處理對象圖像切出預定的范圍;圖像斑點修正部134,其對切出的處理對象圖像實施圖像斑點修正;圖像效果修正部135,其對實施了圖像斑點修正的處理對象圖像實施預定的圖像效果修正;以及結(jié)合部136,其對多個處理對象圖像進行結(jié)合。
當經(jīng)由指示接受部130接受了基于用戶操作的圖像處理的開始指示時,失真修正部132修正處理對象圖像的失真。
切出部133從由失真修正部132修正了失真的處理對象圖像切出預定的范圍。由此,去除例如在拍攝時拍攝到的書B的頁P上的影子等。
圖像斑點修正部134對由切出部133切出的處理對象圖像實施圖像斑點修正。圖像斑點修正是指修正亮斑使得整個處理對象圖像的亮度變得均勻。
更詳細地說,如圖4所示,圖像斑點修正部134具有:圖像取得部137,其取得由切出部133切出的多個處理對象圖像中的各個處理對象圖像;分割部138,其將由圖像取得部137取得的各個處理對象圖像分割為預定的塊;第一修正量取得部139,其將多個處理對象圖像中的一個處理對象圖像設(shè)為第一圖像,取得對該第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1;以及第一修正部140,其根據(jù)各塊的第一亮度修正量Yab_1,修正多個處理對象圖像內(nèi)的各像素的亮度。
當從切出部133接受了指示時,圖像取得部137從存儲部124取得表示多個處理對象圖像中的各處理對象圖像的處理對象圖像數(shù)據(jù)131_1~2N-1(或處理對象圖像數(shù)據(jù)131_2~2N)。在此取得的處理對象圖像數(shù)據(jù)131是由切出部133存儲于存儲部124的數(shù)據(jù),表示切出的處理對象圖像。由此,圖像取得部137取得多個處理對象圖像。此外,圖像取得部137也可以從切出部133取得處理對象圖像數(shù)據(jù)131。
分割部138將圖像取得部137取得的多個處理對象圖像中的各處理對象圖像通過共用的方法分割為多個塊。
在此,例如如圖5所示,在與第i頁對應的處理對象圖像縱橫的各個像素數(shù)為p×q的情況下,分割部138分割為預定的大小的塊。預定大小的塊是指如圖5所示那樣,縱橫各個像素數(shù)為5×5的塊。通過這樣進行分割,作為在多個 處理對象圖像之間對應的塊,生成在多個處理對象圖像中的各個處理對象圖像中占據(jù)相同區(qū)域的塊。在圖5中示出了將處理對象圖像縱橫都分割為5個塊的例子。
第一修正量取得部139將多個處理對象圖像中的由用戶指定的一個處理對象圖像設(shè)為第一圖像。而且,第一修正量取得部139取得針對第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1,以使整個第一圖像的亮度變得均勻。
在本實施方式中,將多個處理對象圖像中的哪一個處理對象圖像設(shè)為第一圖像包含在根據(jù)用戶的操作而由指示接受部130接受的指示中。例如,用于從多個處理對象圖像中確定第一圖像的指示包含在通過失真修正部132取得的圖像處理的開始指示中。即,接受用于確定第一圖像的指示的指示接受部130相當于第一指示接受部,該第一指示接受部接受從多個處理對象圖像中選擇至少一個處理對象圖像來作為第一圖像的指示。
此外,在第一圖像中期望選擇不包含彩色照片、彩色圖等的頁P的圖像,例如期望選擇背景為與紙對應的白色且僅包含黑色文字的頁P的圖像。
第一修正部140根據(jù)由第一修正量取得部139取得的各塊的第一亮度修正量Yab_1,修正多個處理對象圖像內(nèi)的各像素的亮度。
在本實施方式中,第一修正部140通過將共用的第一亮度修正量Yab_1用于在所有的處理對象圖像之間對應的塊,修正多個處理對象圖像內(nèi)的各像素的亮度。
如圖3所示,圖像效果修正部135對由圖像斑點修正部134實施了圖像斑點修正后的處理對象圖像實施圖像效果修正。圖像效果修正是指例如對處理對象圖像的亮度、顏色等進行修正。通過修正亮度,對比度、整體的明亮度得到修正。通過修正顏色,白平衡得到修正。白平衡的修正是指使本來應該為白色的區(qū)域在處理對象圖像中接近白色,例如在頁P中白色的區(qū)域在處理對象圖像中成為稍帶黃色的圖像的情況下,將該區(qū)域修正為白色。
結(jié)合部136通過生成包含由處理對象圖像數(shù)據(jù)131_1~2N表示的多個處理對象圖像的一個數(shù)據(jù),將多個處理對象圖像進行結(jié)合。結(jié)合部136例如生成將與書B的各頁P對應的處理對象圖像按頁順序進行排列的數(shù)據(jù)。該數(shù)據(jù)是將 書B電子化得到的數(shù)據(jù)。
至此說明了本發(fā)明的第一實施方式的圖像處理系統(tǒng)100的結(jié)構(gòu)。從這里開始說明本實施方式的圖像處理系統(tǒng)100的動作。
<拍攝處理>
圖像處理系統(tǒng)100執(zhí)行圖6所示的拍攝處理。拍攝處理是用于對書B的各頁P進行拍攝的處理。
例如當通過用戶操作指示接受部130,指示接受部130接受了開始拍攝的指示時,終端裝置102開始進行拍攝處理。另外,翻頁裝置101經(jīng)由第一通信部113和第二通信部122取得終端裝置102接受的開始拍攝的指示。由此,翻頁裝置101開始進行拍攝處理。
在本實施方式中,如上所述,通過照相機121僅拍攝書B的對開的兩頁中的左頁。在此,設(shè)為首先用戶以拍攝奇數(shù)頁的方式將書B設(shè)定在保持臺103,然后進行用于指示開始拍攝的操作。
另外,關(guān)于拍攝書B中的哪一頁P,可以由用戶指定,但是在本實施方式中,設(shè)為拍攝書B的所有的頁。因而,設(shè)為首先拍攝第1頁、第3頁、第5頁、…、第2N-3頁、第2N-1頁。
翻頁控制部118根據(jù)開始拍攝的指示,使電動機驅(qū)動器116驅(qū)動送風部112(步驟S101)。由此,對翻頁后的頁P吹風。
照相機121在拍攝控制部125的控制下拍攝第1頁的頁P(步驟S102)。
拍攝控制部125從照相機121取得表示在步驟S102中拍攝到的圖像的處理對象圖像數(shù)據(jù)131_1,將處理對象圖像數(shù)據(jù)131_1存儲在存儲部124(步驟S103)。
拍攝控制部125經(jīng)由第二通信部122將翻頁指示發(fā)送給翻頁裝置101(步驟S104)。翻頁指示是用于使翻頁裝置101對頁P進行翻頁的指示。
翻頁控制部118當經(jīng)由第一通信部113取得了翻頁指示時,通過進行上述一系列的控制,對書B的頁P進行翻頁(步驟S105)。由此,將書B的頁P翻頁,因此第3頁作為由照相機121進行拍攝的對象成為打開的狀態(tài)。
翻頁控制部118經(jīng)由第一通信部113發(fā)送翻頁完成信號(步驟S106)。翻頁完成信號是表示用于對頁P進行翻頁的一系列的控制完成的信號。
拍攝控制部125根據(jù)來自指示接受部130的信號,判斷是否收到基于用戶操作的拍攝結(jié)束指示(步驟S107)。
在判斷為未收到拍攝結(jié)束的指示的情況下(步驟S107:“否”),拍攝控制部125和翻頁控制部118反復進行步驟S102~S106的處理。由此,依次拍攝第3頁、第5頁…、奇數(shù)頁P,將與第3頁、第5頁…中的各頁對應的處理對象圖像數(shù)據(jù)131_3、5…存儲在存儲部124中。
當在第2N-1頁被打開后進一步開始對頁P進行翻頁的動作時,用戶在指示接受部130進行用于指示拍攝結(jié)束的操作。由此,接受拍攝結(jié)束的指示,因此拍攝控制部125判斷為收到拍攝結(jié)束的指示(步驟S107:“是”),經(jīng)由第二通信部122向翻頁裝置101通知拍攝結(jié)束的指示,并結(jié)束拍攝處理。翻頁控制部118經(jīng)由第一通信部113根據(jù)拍攝結(jié)束的指示,結(jié)束拍攝處理。由此,將與書B的所有奇數(shù)頁P對應的處理對象圖像數(shù)據(jù)131_1、3、5…、2N-3、2N-1存儲在存儲部124。
之后,用戶以拍攝偶數(shù)頁P的方式將書B設(shè)定在保持臺103。然后,用戶在指示接受部130進行用于指示開始拍攝的操作。當在第2N頁被打開后進一步開始對頁P進行翻頁的動作時,用戶在指示接受部130進行用于指示拍攝結(jié)束的操作。由此,將與書B的偶數(shù)頁P對應的處理對象圖像數(shù)據(jù)131_2、4、6…、2N-2、2N存儲在存儲部124。因此,結(jié)合上述拍攝處理的結(jié)果,如圖3所示,將與書B的所有的頁P對應的處理對象圖像數(shù)據(jù)131_1~2N存儲在存儲部124。
<圖像處理>
終端裝置102作為圖像處理裝置,如圖7所示對處理對象圖像執(zhí)行圖像處理。處理對象圖像是存儲部124中存儲的處理對象圖像數(shù)據(jù)所示的圖像。
在本實施方式中,如上那樣設(shè)定照相機121,從而僅拍攝對開的兩頁中的單頁。因此,在拍攝奇數(shù)頁P和偶數(shù)頁P兩者的情況下,例如當奇數(shù)頁的拍攝結(jié)束時,為了之后拍攝偶數(shù)頁,需要改變書B的朝向來設(shè)定在翻頁裝置101中。由此,與奇數(shù)頁對應的處理對象圖像和與偶數(shù)頁對應的處理對象圖像相比,光照方法等拍攝條件有可能發(fā)生變化。
因此,在本實施方式中,設(shè)為在與奇數(shù)頁對應的處理對象圖像和與偶數(shù)頁對應的處理對象圖像之間分開執(zhí)行圖像處理。在此,設(shè)為首先根據(jù)包含用于確 定與奇數(shù)頁對應的處理對象圖像、第一圖像等的信息的圖像處理的開始指示,對與奇數(shù)頁對應的處理對象圖像實施圖像處理。
當經(jīng)由指示接受部130接受了圖像處理的開始指示時,失真修正部132從存儲部124取得處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,失真修正部132對取得的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各個處理對象圖像即與奇數(shù)頁對應的各個處理對象圖像實施失真修正(步驟S111)。
詳細地說,在傾斜拍攝書B的頁P的情況下等,在處理對象圖像中與頁P的外緣對應的部分的形狀并非矩形,有時成為梯形等失真的四邊形。
失真修正部132從處理對象圖像切出根據(jù)照相機121的視場角、拍攝方向等預定的四邊形的區(qū)域。然后,失真修正部132通過對切出的四邊形實施投影變換,生成宛如從正面拍攝頁P那樣的處理對象圖像。失真修正部132將表示生成的處理對象圖像的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲在存儲部124。
切出部133從存儲部124取得處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,切出部133從取得的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各處理對象圖像,即通過失真修正部132修正后的與奇數(shù)頁對應的各處理對象圖像中切出預定的范圍(步驟S112)。切出部133將表示切出的處理對象圖像的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲在存儲部124。
圖像斑點修正部134從存儲部124取得處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,圖像斑點修正部134對取得的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各處理對象圖像,即通過切出部133切出的與奇數(shù)頁對應的各處理對象圖像實施圖像斑點修正(步驟S113)。
在此,在圖8中詳細表示了圖像斑點修正處理(步驟S113)。
當從切出部133收到包含用于確定第一圖像的信息的指示時,圖像取得部137從存儲部124取得處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1。由此,圖像取得部137取得通過切出部133切出的與奇數(shù)頁對應的處理對象圖像(步驟S121)。
分割部138將圖像取得部137取得的多個處理對象圖像中的各處理對象圖像分割為共用的多個塊(步驟S122)。
第一修正量取得部139根據(jù)在步驟S121中取得的圖像處理的開始指示內(nèi)包含的信息,確定成為第一圖像的處理對象圖像。第一修正量取得部139取得在步驟S122中對第一圖像進行分割而得到的各塊內(nèi)的各像素的亮度Y(步驟S123)。
在此,例如通過0.29891×R+0.58661×G+0.11448×B來計算像素的亮度Y。R、G、B分別是像素內(nèi)包含的紅色成分的像素值、綠色成分的像素值、藍色成分的像素值,是從0至255的值。
第一修正量取得部139根據(jù)在步驟S123中取得的亮度Y,取得對第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1(步驟S124)。
詳細地說,第一修正量取得部139關(guān)于對第一圖像進行分割而得到的各塊,求出各像素的亮度Y的發(fā)生頻率,確定發(fā)生頻率最高的亮度Pab。如果與發(fā)生頻率最高的亮度Pab對應的像素的顏色為灰色系,則考慮是與成為背景的紙(例如白色)對應的像素。因此,第一修正量取得部139關(guān)于對第一圖像進行分割而得到的各塊,將從255減去Pab而得到的值設(shè)為第一亮度修正量Yab_1。由此,關(guān)于對第一圖像進行分割而得到的各塊,能夠取得用于使與發(fā)生頻率最高的亮度Pab對應的像素為白色的第一亮度修正量Yab_1。
在此,在將圖5示出的左上的塊設(shè)為原點(縱橫均用0表示的塊)的情況下,Pab表示在橫向上第a塊,且縱向上第b塊中發(fā)生頻率最高的亮度。Yab_1表示與橫向上第a塊且縱向上第b塊有關(guān)的第一亮度修正量。在本實施方式中,如圖5所示,將各個處理對象圖像進行分割,因此a,b分別是從0至4的整數(shù)。
在此,將第一修正量取得部139取得的各塊的第一亮度修正量Yab_1制作成圖9所示的第一修正表141,適當?shù)乜纱鎯υ诖鎯Σ?24等中。
第一修正部140根據(jù)在步驟S124中取得的各塊的第一亮度修正量Yab_1,修正多個處理對象圖像內(nèi)的各像素的亮度(步驟S125)。
詳細地說,第一修正部140對于作為第一圖像的處理對象圖像,對各塊內(nèi)各像素的亮度相加第一亮度修正量Yab_1。即,關(guān)于橫向第a且縱向第b塊內(nèi)的多個像素中的各像素,將第一亮度修正量Yab_1與亮度相加。由此,修正作為第一圖像的處理對象圖像的亮斑。
另外,第一修正部140關(guān)于第一圖像以外的各處理對象圖像,對各塊內(nèi)的各像素的亮度相加第一亮度修正量Yab_1。即,關(guān)于橫向第a且縱向第b塊內(nèi)的多個像素中的各像素,將Yab_1與亮度相加。由此,修正第一圖像以外的各處理對象圖像的亮斑。這樣,在本實施方式中,通過將共用的第一亮度修正量Yab_1用于在所有的處理對象圖像之間對應的塊,修正多個處理對象圖像的亮斑。
第一修正部140將表示修正了亮斑后的各個處理對象圖像的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲在存儲部124(步驟S126)。由此,圖像斑點修正部134結(jié)束圖像斑點修正處理,返回至圖7示出的圖像處理。
再次參照圖7。
圖像效果修正部135從存儲部124取得處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1。然后,圖像效果修正部135對取得到的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1所示的各處理對象圖像,即通過圖像斑點修正部134修正后的與奇數(shù)頁對應的各處理對象圖像實施圖像效果修正(步驟S114)。圖像效果修正部135將表示實施了圖像效果修正后的處理對象圖像的處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1存儲在存儲部124。此時,可以對處理對象圖像適當?shù)貙嵤嚎s處理。
結(jié)合部136根據(jù)圖像處理的開始指示中是否包含結(jié)合指示,判斷指示接受部130是否收到結(jié)合指示(步驟S115)。
在圖像處理的開始指示中未包含結(jié)合指示的情況下,結(jié)合部136判斷為指示接受部130未收到結(jié)合指示(步驟S115:“否”)。在該情況下,顯示部129從存儲部124取得處理對象圖像數(shù)據(jù)1、3、…2N-3、2N-1,顯示在步驟S114中實施了圖像效果修正后的處理對象圖像(步驟S117)。由此,圖像處理結(jié)束。
在圖像處理的開始指示中包含結(jié)合指示的情況下,結(jié)合部136判斷為指示接受部130收到結(jié)合指示(步驟S115:“是”)。在該情況下,結(jié)合部136執(zhí)行結(jié)合處理(步驟S116)。
詳細地說,結(jié)合部136生成將與各頁P對應的處理對象圖像按頁的順序進行排列而得到的數(shù)據(jù),將該數(shù)據(jù)存儲在存儲部124。
顯示部129從存儲部124取得在步驟S116中生成的數(shù)據(jù),顯示按頁的順 序排列的處理對象圖像(步驟S117)。由此,圖像處理結(jié)束。
由此,與奇數(shù)頁對應的處理對象圖像的圖像處理結(jié)束。
接著,可執(zhí)行與偶數(shù)頁對應的處理對象圖像的圖像處理。在此時的圖像處理的開始指示中也可以包含結(jié)合指示。
當針對與偶數(shù)頁對應的處理對象圖像也賦予了圖像處理的開始指示時,執(zhí)行步驟S111~S115的處理。然后,在圖像處理的開始指示中包含結(jié)合指示的情況下,執(zhí)行結(jié)合處理(步驟S116)。通過將上述執(zhí)行的與奇數(shù)頁對應的處理對象圖像以及與偶數(shù)頁對應的處理對象圖像進行結(jié)合,生成使書B電子化的數(shù)據(jù)。
以上,說明了本發(fā)明的第一實施方式。
根據(jù)本實施方式,在圖像斑點修正中,根據(jù)將多個處理對象圖像中的第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1,修正多個處理對象圖像內(nèi)的各像素的亮度。因此,能夠減輕為了修正亮斑針對第一圖像以外的多個處理對象圖像的圖像處理。因而,能夠減輕用于修正將書B打開拍攝到的多個處理對象圖像的亮斑的處理負荷。
另外,以往,圖像斑點修正多以與成為背景的紙對應的白色為基準來進行,因此,難以實現(xiàn)與包含彩色照片、彩色圖等的頁P對應的處理對象圖像的圖像斑點修正的自動化。根據(jù)本實施方式,通過將不包含彩色照片、彩色圖等的處理對象圖像選擇為第一圖像,能夠適當?shù)匦拚c包含彩色照片、彩色圖等的頁P對應的處理對象圖像的亮斑。
并且,在本實施方式中,用戶通過選擇第一圖像這種的較簡單的操作,能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
并且,在本實施方式中,為了取得亮度修正量Yab而進行亮度分析(步驟S123~S124的處理)的處理對象圖像僅為第一圖像。在其它處理對象圖像中不進行亮度分析,因此能夠降低錯誤檢測亮度修正量Yab的可能性。因而,能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
本實施方式也可以如下那樣變形。
例如,通過對第一圖像以外的各處理對象圖像直接應用將第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1的例子進行了說明。但是,也可以將對第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1應用于預先存儲 在存儲部124中的表、關(guān)系式等,由此針對第一圖像以外的每個處理對象圖像取得各塊的亮度修正量Yab。
通常,在拍攝書B的多個頁P的情況下,如圖10A、圖10B、圖11A和圖11B所示,很多時候為了照射頁P而適當?shù)卦O(shè)置的照明L所照射的光的偏差、頁P的彎曲等在每次對頁P進行翻頁時逐漸發(fā)生變化。
在圖10A和圖10B中示出了拍攝第1頁時的光的偏差和頁P的彎曲的示例。在圖11A和圖11B中示出了拍攝第2N-1頁時的光的偏差和頁P的彎曲的示例。根據(jù)圖10B和圖11B可知,第1頁的彎曲比第2N-1頁小。另外,根據(jù)圖10A和圖11A可知,第1頁與第2N-1頁相比光照均勻。
如上所述,通過對每個處理對象圖像取得各塊的亮度修正量Yab,關(guān)于各個處理對象圖像,能夠取得各塊的更適當?shù)牧炼刃拚縔ab。因而,能夠減輕用于修正打開書B進行拍攝得到的多個處理對象圖像的亮斑的處理負荷,并且能夠更適當?shù)匦拚涟摺?/p>
例如,照射頁P的照明L并不限于為了照射頁P而適當設(shè)置的照明,例如也可以使用電燈、終端裝置102為了進行拍攝而具備的照明等。
例如,在本實施方式中,通過第一圖像為多個處理對象圖像中的一個處理對象圖像的示例進行了說明。但是,在第一圖像中也可以選擇多個處理對象圖像中的兩個以上的處理對象圖像。在該情況下,可以根據(jù)在作為第一圖像選擇出的處理對象圖像之間對應的各塊的亮度修正量Yab,取得對第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1。例如,作為各塊的第一亮度修正量Yab_1,可以取得在作為第一圖像選擇出的處理對象圖像之間對應的各塊的亮度修正量Yab的平均值。這樣,通過將兩個以上的處理對象圖像選擇為第一圖像,能夠取得更適當?shù)牡谝涣炼刃拚縔ab_1。因而,能夠減輕用于修正打開書B進行拍攝得到的多個處理對象圖像的亮斑的處理負荷,并且能夠更適當?shù)匦拚涟摺?/p>
例如,翻頁裝置101具有用戶進行操作的操作部,可以根據(jù)該操作,翻頁裝置101和終端裝置102開始執(zhí)行拍攝處理。
例如,也可以不將翻頁裝置101與終端裝置102可通信連接。在該情況下,用戶幾乎同時對各裝置101、102賦予指示,考慮到翻頁裝置101對各頁P進 行翻頁所需的時間大致固定,因此終端裝置102通過與此對應的時間間隔連續(xù)地進行拍攝即可。由此,能夠拍攝書B的多個頁P。另外,可以不采用翻頁裝置101,而由用戶手動翻頁,但是通過采用翻頁裝置101,能夠減輕用戶的負擔。
例如,顯示部129可以適當?shù)仫@示各處理的結(jié)果。由此,用戶能夠確認處理結(jié)果。在該情況下,可以將指示接受部130構(gòu)成為由用戶根據(jù)需要進行操作,由此能夠適當?shù)匦拚糜趫D像處理的參數(shù)。由此,能夠進行更適當?shù)男拚?。因而,能夠使處理對象圖像成為更高質(zhì)量的圖像。
(第二實施方式)
在第一實施方式的圖像斑點修正中,說明了根據(jù)對第一圖像進行分割而得到的各塊的第一亮度修正量Yab_1修正多個處理對象圖像內(nèi)的各像素的亮度的示例。
但是,如在第一實施方式的變形例中說明的那樣,在拍攝書B的多個頁P時,很多時候照射到頁P的光的偏差、頁P的彎曲等在每次翻頁時逐漸發(fā)生變化。
在本實施方式中,說明了以下的示例:為了取得與這樣的各頁P的拍攝條件的變化相對應的適當?shù)牧炼刃拚縔ab,根據(jù)分別對第一圖像和第二圖像進行分割而得到的各塊的第一亮度修正量Yab_1和第二亮度修正量Yab_2,修正多個處理對象圖像內(nèi)的各像素的亮度。
作為本實施方式的圖像處理裝置而發(fā)揮功能的終端裝置具備圖12所示的功能結(jié)構(gòu)的圖像斑點修正部234,來取代作為第一實施方式的圖像處理裝置發(fā)揮功能的終端裝置102所具備的圖像斑點修正部134。除了這一點以外,本實施方式的圖像處理系統(tǒng)具有與第一實施方式的圖像處理系統(tǒng)100大致相同的結(jié)構(gòu)。
本實施方式的圖像斑點修正部234與第一實施方式的圖像斑點修正部134同樣,對通過切出部133切出的處理對象圖像實施圖像斑點修正。
如圖2所示,本實施方式的圖像斑點修正部234具備第一修正部240來代替第一實施方式的圖像斑點修正部134所具備的第一修正部140。另外,圖像斑點修正部234除了第一實施方式的圖像斑點修正部134所具備的結(jié)構(gòu)以外, 還具備第二修正量取得部242。除了這些以外,圖像斑點修正部234具有與第一實施方式的圖像斑點修正部134大致相同的結(jié)構(gòu)。
第二修正量取得部242將多個處理對象圖像中的一個處理對象圖像設(shè)為第二圖像,取得對該第二圖像進行分割而得到的各塊的第二亮度修正量Yab_2。這樣的第二修正量取得部242的功能等同于將上述第一修正量取得部139的功能的說明中的第一圖像和第一亮度修正量Yab_1分別替換為第二圖像和第二亮度修正量Yab_2。在此,第二圖像是與第一圖像不同的處理對象圖像。
即,第二修正量取得部242將多個處理對象圖像中的由用戶指定的一個處理對象圖像設(shè)為第二圖像。然后,第二修正量取得部242取得對第二圖像進行分割而得到的各塊的第二亮度修正量Yab_2,從而使整個第二圖像的亮度變?yōu)榫鶆颉?/p>
在本實施方式中,將多個處理對象圖像中的哪個處理對象圖像設(shè)為第二圖像包含在根據(jù)用戶的操作指示接受部130接受的指示中。例如,用于從多個處理對象圖像中確定第二圖像的指示包含在通過失真修正部132取得的圖像處理的開始指示中。即,接受用于確定第二圖像的指示的指示接受部130相當于接受從多個處理對象圖像中選擇至少一個處理對象圖像來作為第二圖像的指示的第二指示接受部。
此外,與第一圖像同樣地,在第二圖像中期望選擇不包含彩色照片、彩色圖等的頁P的圖像,例如期望選擇背景為與紙對應的白色且僅包含黑色文字的頁P的圖像。
第一修正部240根據(jù)各塊的第一亮度修正量Yab_1和各塊的第二亮度修正量Yab_2,修正多個處理對象圖像內(nèi)的各像素的亮度。
如圖12所示,第一修正部240具有塊修正量取得部243和第二修正部244。
塊修正量取得部243根據(jù)各塊的第一亮度修正量Yab_1和各塊的第二亮度修正量Yab_2,取得對多個處理對象圖像中的各處理對象圖像進行分割而得到的各塊的亮度修正量Yab。
詳細地說,塊修正量取得部243對于在多個處理對象圖像之間對應的各塊,根據(jù)為了得到多個處理對象圖像中的各處理對象圖像而將書B的哪頁打開,對第一亮度修正量Yab_1和第二亮度修正量Yab_2進行插補。由此,塊 修正量取得部243取得對多個處理對象圖像中的各處理對象圖像進行分割而得到的各塊的亮度修正量Yab。在本實施方式中,作為用于取得各塊的亮度修正量Yab的插補方法,采用線性插補。通過采用線性插補,能夠使處理簡單,但是插補方法并不限于線性插補,也可以采用非線性的各種插補方法。
第二修正部244根據(jù)對多個處理對象圖像中的各處理對象圖像進行分割而得到的各塊的亮度修正量Yab,修正多個處理對象圖像內(nèi)的各像素的亮度。
詳細地說,第二修正部244將通過塊修正量取得部243取得的各亮度修正量Yab應用于對應的處理對象圖像的塊。通過對多個處理對象圖像的所有塊實施該處理,由此修正多個處理對象圖像內(nèi)的各像素的亮度。
至此說明了本發(fā)明的第二實施方式的圖像處理系統(tǒng)的結(jié)構(gòu)。從此開始說明本實施方式的圖像處理系統(tǒng)的動作。
在本實施方式中,也執(zhí)行與第一實施方式相同的拍攝處理。在本實施方式中,由作為圖像處理裝置的終端裝置執(zhí)行的圖像處理與第一實施方式的圖像處理不同。
詳細地說,在本實施方式的圖像處理中,如圖13所示,執(zhí)行步驟S225的處理來代替第一實施方式的圖像處理中包含的各處理(步驟S121~S126)中的步驟S125的處理。另外,在本實施方式的圖像處理中,除了第一實施方式的圖像處理中包含的各處理以外,在步驟S124的處理與步驟S225的處理之間執(zhí)行步驟S227~S229的處理。
在本實施方式中,通過對與奇數(shù)頁對應的處理對象圖像執(zhí)行圖像處理的示例進行了說明。此外,關(guān)于與偶數(shù)頁對應的處理對象圖像,與奇數(shù)頁所對應的處理對象圖像同樣地,執(zhí)行圖像處理即可。
當執(zhí)行步驟S124的處理時,第二修正量取得部242根據(jù)圖像處理的開始指示中包含的信息,確定成為第二圖像的處理對象圖像。第二修正量取得部242取得在步驟S122中對第二圖像進行分割而得到的各塊內(nèi)的各像素的亮度Y(步驟S227)。
第二修正量取得部242根據(jù)在步驟S227中取得的亮度Y,取得對第二圖像進行分割而得到的各塊的第二亮度修正量Yab_2(步驟S228)。
詳細地說,第二修正量取得部242通過與第一修正量取得部139相同的方 法取得各塊的第二亮度修正量Yab_2。即,第二修正量取得部242關(guān)于對第二圖像進行分割而得到的各塊,求出各像素的亮度Y的發(fā)生頻率,確定發(fā)生頻率最高的亮度Pab。第二修正量取得部242關(guān)于對第二圖像進行分割而得到的各塊,將從255減去Pab而得到的值設(shè)為第二亮度修正量Yab_2。由此,關(guān)于對第二圖像進行分割而得到的各塊,能夠取得用于使與發(fā)生頻率最高的亮度Pab對應的像素成為白色的第二亮度修正量Yab_2。在此,Yab_2表示與橫向第a塊且縱向第b塊有關(guān)的第二亮度修正量。
在此,將第二修正量取得部242取得的各塊的第二亮度修正量Yab_2制作成與圖9例示的第一亮度修正量Yab_1相同的第二修正表,也可以適當?shù)卮鎯υ诖鎯Σ?24等。
塊修正量取得部243通過對第一亮度修正量Yab_1與第二亮度修正量Yab_2進行線性插補,取得對于所有的處理對象圖像的各塊的亮度修正量Yab(步驟S229)。
詳細地說,例如,第一圖像為與第e頁對應的處理對象圖像,第二圖像為與第f頁對應的處理對象圖像。設(shè)e、f為1以上的奇數(shù),e<f。在該情況下,通過((f-k)×Yab_1+(k-e)×Yab_2)/(f-e)的運算,取得在第k頁的處理對象圖像中橫向第a塊且縱向第b塊的亮度修正量Yab。在此,k為1~2N的奇數(shù)。
在此,為了通過插補來取得按照與處理對象圖像對應的頁逐漸發(fā)生變化的亮度修正量Yab_k,期望對第一圖像指定與接近封面的頁P對應的處理對象圖像,對第二圖像指定與接近封底的頁P對應的處理對象圖像。因此,希望指定e為1,f為2N-1,即期望對第一圖像指定與第1頁對應的處理對象圖像,對第二圖像指定與第2N-1頁對應的處理對象圖像。
但是,在這些頁包含彩色照片、彩色圖等的情況下,有時e成為1以外,f成為2N-1以外。
例如在e為1以外的情況下即第一圖像為與第1頁以外的頁對應的處理對象圖像的情況下,可以將對應的各塊的亮度修正量Yab_1應用于與第1頁至第e-2頁中的各頁對應的處理對象圖像的各塊。另外,例如在f為2N-1以外的情況下即第二圖像為與第2N-1頁以外的頁對應的處理對象圖像的情況下,將對應的各塊的亮度修正量Yab_1應用于與第f+2頁至第2N-1頁中的各頁對應的 處理對象圖像的各塊。此外,在這種情況下,也可以通過插補(外插插補)取得亮度修正量Yab。
第二修正部244根據(jù)在步驟S124、步驟S228和步驟S229中取得的各塊的亮度修正量Yab_1、Yab_2、Yab,修正多個處理對象圖像內(nèi)的各像素的亮度(步驟S225)。
詳細地說,第二修正部244關(guān)于作為第一圖像的處理對象圖像,對各塊內(nèi)的各像素的亮度相加第一亮度修正量Yab_1。即,對于橫向第a且縱向第b塊內(nèi)的多個像素中的各像素,將第一亮度修正量Yab_1與亮度相加。由此,修正作為第一圖像的處理對象圖像的亮斑。
另外,關(guān)于第二圖像,第二修正部244也通過與第一圖像相同的方法修正亮斑。詳細地說,第二修正部244關(guān)于作為第二圖像的處理對象圖像,對各塊內(nèi)的各像素的亮度相加第二亮度修正量Yab_2。即,對于橫向第a且縱向第b塊內(nèi)的多個像素中的各像素,將第二亮度修正量Yab_2與亮度相加。由此,修正作為第二圖像的處理對象圖像的亮斑。
并且,第二修正部244關(guān)于第一圖像和第二圖像以外的各處理對象圖像,對各塊內(nèi)的各像素的亮度相加對應的各塊的亮度修正量Yab。該亮度修正量Yab是在步驟S229中取得的亮度修正量。即,對于橫向第a且縱向第b塊內(nèi)的多個像素中的各像素,將對應的各塊的亮度修正量Yab與亮度相加。由此,修正第一圖像和第二圖像以外的各處理對象圖像的亮斑。這樣,在本實施方式中,根據(jù)第一亮度修正量Yab_1和第二亮度修正量Yab_2,取得針對所有的處理對象圖像的各塊的亮度修正量Yab。而且,通過將各個亮度修正量Yab應用于對應的塊內(nèi)的多個像素的亮度,修正多個處理對象圖像的亮斑。
以上,說明了本發(fā)明的第二實施方式。
根據(jù)本實施方式,在圖像斑點修正中,根據(jù)將多個處理對象圖像中的第一圖像和第二圖像分別進行分割而得到的各塊的第一亮度修正量Yab_1和第二亮度修正量Yab_2,修正多個處理對象圖像內(nèi)的各像素的亮度。因此,能夠減輕為了修正亮斑而對第一圖像和第二圖像以外的多個處理對象圖像進行的圖像處理。因而,與第一實施方式同樣地,能夠減輕用于修正打開書B進行拍攝得到的多個處理對象圖像的亮斑的處理負荷。
另外,根據(jù)本實施方式,通過將不包含彩色照片、彩色圖等的處理對象圖像選擇為第一圖像和第二圖像,與第一實施方式同樣地,能夠適當?shù)匦拚c包含彩色照片、彩色圖等的頁P對應的處理對象圖像的亮斑。
并且,在本實施方式中,用戶通過選擇第一圖像和第二圖像這種較簡單的操作,能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
并且,在本實施方式中,為了取得亮度修正量Yab而進行亮度分析(步驟S123~S124的處理和步驟S227~S228的處理)的處理對象圖像僅為第一圖像和第二圖像。在其它的處理對象圖像中,不進行亮度分析,因此能夠降低錯誤地檢測亮度修正量Yab的可能性。因而,與第一實施方式同樣地,能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
本實施方式可以如下那樣變形。
例如在本實施方式中,說明了通過對第一亮度修正量Yab_1和第二亮度修正量Yab_2進行插補而取得亮度修正量Yab的示例。但是,可以通過將第一亮度修正量Yab_1和第二亮度修正量Yab_2應用于預先存儲在存儲部124中的表、關(guān)系式等,對第一圖像和第二圖像以外的每個處理對象圖像取得各塊的亮度修正量Yab。由此,起到與第二實施方式相同的效果。
例如在本實施方式中,說明了第二圖像為多個處理對象圖像中的一個處理對象圖像的示例。但是,在第二圖像中也可以選擇多個處理對象圖像中的兩個以上的處理對象圖像。在該情況下,可以根據(jù)在作為第二圖像而選擇的處理對象圖像之間對應的各塊的亮度修正量Yab,取得對第二圖像進行分割而得到的各塊的第二亮度修正量Yab_2。例如,作為各塊的第二亮度修正量Yab_2,取得在作為第二圖像而選擇的處理對象圖像之間對應的各塊的亮度修正量Yab的平均值即可。這樣,通過選擇兩個以上的處理對象圖像來作為第二圖像,能夠取得更適當?shù)牡诙炼刃拚縔ab_2。因而,能夠減輕用于修正打開書B進行拍攝得到的多個處理對象圖像的亮斑的處理負荷,并且能夠更適當?shù)匦拚涟摺?/p>
(第三實施方式)
在第二實施方式中,說明了將共用的亮度修正量Yab(或Yab_1、Yab_2)應用于一個塊內(nèi)的各像素的示例。但是,根據(jù)該方法,在相鄰的塊的邊界,例 如作為與背景對應的區(qū)域的亮度發(fā)生變化的結(jié)果,有時成為看不清楚的圖像。在本實施方式中,為了使相鄰的塊的邊界不明顯,對各塊的亮度修正量Yab進行插補。
本實施方式的圖像處理裝置具備圖14所示的功能結(jié)構(gòu)的第二修正部344來代替第二實施方式的圖像處理裝置所具備的第二修正部244。除了這一點以外,本實施方式的圖像處理系統(tǒng)具有與第二實施方式的圖像處理系統(tǒng)大致相同的結(jié)構(gòu)。
第二修正部344與第二實施方式的第二修正部244同樣地,根據(jù)對多個處理對象圖像中的各處理對象圖像進行分割而得到的各塊的亮度修正量Yab,修正多個處理對象圖像內(nèi)的各像素的亮度。第二修正部344與第二實施方式的第二修正部244的不同點在于,根據(jù)各塊的亮度修正量Yab取得多個處理對象圖像內(nèi)的各像素的亮度修正量Pxy。
詳細地說,如圖14所示,第二修正部344具有像素修正量取得部345和像素修正部346。
像素修正量取得部345根據(jù)對多個處理對象圖像中的各處理對象圖像進行分割而得到的各塊的亮度修正量Yab,取得多個處理對象圖像內(nèi)的各像素的亮度修正量Pxy。
詳細地說,像素修正量取得部345對于多個處理對象圖像中的各處理對象圖像,根據(jù)在各塊內(nèi)預定的代表像素R的位置關(guān)系插補各塊的亮度修正量Yab,由此取得多個處理對象圖像內(nèi)的各像素的亮度修正量Pxy。
在本實施方式中,設(shè)代表像素R為位于各塊的中心的像素。像素修正量取得部345確定位于要取得亮度修正量Pxy的像素周圍的多個代表像素。像素修正量取得部345通過對所確定的多個代表像素所歸屬的各塊的亮度修正量Yab進行插補,取得該像素的亮度修正量Pxy。
另外,在本實施方式中,作為用于取得各像素的亮度修正量Pxy的插補的方法,采用線性插補。通過采用線性插補,能夠使處理簡單化,但是插補的方法并不限于線性插補,也可以采用非線性的各種插補方法。
像素修正部346根據(jù)多個處理對象圖像內(nèi)的各像素的亮度修正量Pxy,修正多個處理對象圖像內(nèi)的各像素的亮度。多個處理對象圖像內(nèi)的各像素的亮度 修正量Pxy是通過像素修正量取得部345取得的各像素的亮度修正量Pxy。
以上,說明了本發(fā)明的第三實施方式的圖像處理系統(tǒng)的結(jié)構(gòu)。以下,說明本實施方式的圖像處理系統(tǒng)的動作。
在本實施方式中,執(zhí)行與第二實施方式相同的拍攝處理。本實施方式的圖像處理與第二實施方式同樣地,由作為圖像處理裝置的終端裝置執(zhí)行。但是,本實施方式的圖像處理內(nèi)包含的處理的結(jié)構(gòu)與第二實施方式的圖像處理不同。
詳細地說,在本實施方式的圖像處理中,如圖15所示,執(zhí)行步驟S330~S331的處理,來代替第二實施方式的圖像處理內(nèi)包含的各處理(步驟S121~S124、步驟S227~S229、步驟S225和步驟S126)中的步驟S225的處理。
在本實施方式中,說明了對與奇數(shù)頁對應的處理對象圖像執(zhí)行圖像處理的示例。此外,對于與偶數(shù)頁對應的處理對象圖像,也和與奇數(shù)頁對應的處理對象圖像同樣地執(zhí)行圖像處理即可。
像素修正量取得部345關(guān)于多個處理對象圖像中的各處理對象圖像,通過對相鄰的四個塊中的各塊的代表像素R所歸屬的各塊的亮度修正量Yab進行插補,取得以代表像素R為頂點的四邊形內(nèi)的各像素的亮度修正量Pxy。像素修正量取得部345通過針對在所有的處理對象圖像內(nèi)相鄰的四個塊的所有的組合反復進行這樣的處理,取得所有的處理對象圖像內(nèi)的各像素的亮度修正量Pxy(步驟S330)。
在此,如圖16所示,以取得屬于橫向第1且縱向第1塊內(nèi)的左上區(qū)域的像素PP的亮度修正量Pxy為例子進行說明。將位于像素PP周圍的代表像素R_00、R_01、R_10、R_11各自所歸屬的各塊的亮度修正量設(shè)為Y00、Y01、Y10、Y11。
另外,將R_00與R_10的橫向的長度以及R_01與R_11的橫向的長度均設(shè)為Gx像素量。將R_00與R_01的縱向的長度以及R_10與R_11的縱向的長度均設(shè)為Gy像素量。
并且,將從連接R_00與R_01的直線至像素PP為止的橫向的距離設(shè)為dx像素量。將從連接R_00與R_10的直線至像素PP為止的縱向的距離設(shè)為dy像素量。
在該情況下,通過C_y0×(1-dy/Gy)+C_y1×(dy/Gy)的運算來取得像素PP 的亮度修正量Pxy。在此,設(shè)為C_y0=Y(jié)00×(1-dx/Gx)+Y10×(dx/Gx)、C_y1=Y(jié)01×(1-dx/Gx)+Y11×(dx/Gx)。
像素修正部346通過將在步驟S330中取得的各像素的亮度修正量Pxy應用于對應的像素的亮度,修正處理對象圖像內(nèi)的各像素的亮度(步驟S331)。詳細地說,像素修正部346將在步驟S330中取得的各像素的亮度修正量Pxy與對應的像素的亮度相加。由此,修正所有的處理對象圖像內(nèi)的各像素的亮度。
以上,說明了本發(fā)明的第三實施方式。
根據(jù)本實施方式,起到與第二實施方式相同的效果。
另外,根據(jù)本實施方式,根據(jù)各塊的亮度修正量Yab,取得各像素的亮度修正量Pxy。因此,能夠平滑地進行插補,從而使相鄰塊的邊界不明顯。因而,能夠得到高質(zhì)量的圖像。
本實施方式也可以如下那樣變形。
在本實施方式中,說明了將根據(jù)各塊的亮度修正量Yab取得各像素的亮度修正量Pxy應用于第二實施方式的例子。也可以將根據(jù)各塊的亮度修正量Yab取得各像素的亮度修正量Pxy應用于第一實施方式。
在該情況下,例如根據(jù)第一圖像的各塊的亮度修正量Yab_1,通過與第三實施方式相同的插補,取得各像素的亮度修正量Pxy即可。而且,將各像素的亮度修正量Pxy應用于各處理對象圖像的對應的各像素即可。即,對各處理對象圖像的像素的亮度相加對應的亮度修正量Pxy即可。由此,能夠平滑地進行插補,從而使相鄰塊的邊界不明顯。因而,能夠得到高質(zhì)量的圖像。
(第四實施方式)
在第二實施方式中,通過按著用戶的指示選擇第一圖像和第二圖像的例子進行了說明。在本實施方式中,說明通過終端裝置選擇第一圖像和第二圖像的示例。此外,在本實施方式中,也可以將選擇第一圖像應用于第一實施方式。
如圖17所示的功能結(jié)構(gòu)那樣,本實施方式的圖像處理裝置具備圖像斑點修正部434,來代替第二實施方式的圖像處理裝置所具備的圖像斑點修正部234。除了這一點以外,本實施方式的圖像處理系統(tǒng)具有與第二實施方式的圖像處理系統(tǒng)大致相同的結(jié)構(gòu)。
圖像斑點修正部434除了具備第二實施方式的圖像斑點修正部234的結(jié)構(gòu) 以外,還具有從多個處理對象圖像中選擇第一圖像的第一圖像選擇部447以及從多個處理對象圖像中選擇第二圖像的第二圖像選擇部448。除了這一點以外,本實施方式的圖像斑點修正部434具有與第二實施方式的圖像斑點修正部234大致相同的結(jié)構(gòu)。
第一圖像選擇部447根據(jù)每個處理對象圖像的表示預定的顏色的像素數(shù),作為第一圖像選擇預定數(shù)量的處理對象圖像。詳細地說,第一圖像選擇部447根據(jù)每個處理對象圖像的表示預定的顏色的像素數(shù),從進行拍攝時打開的頁P接近書B的封面的頁開始依次選擇預定數(shù)量的處理對象圖像來作為第一圖像。
第二圖像選擇部448根據(jù)每個處理對象圖像的表示預定的顏色的像素數(shù),選擇預定數(shù)量的處理對象圖像作為第二圖像。詳細地說,第二圖像選擇部448根據(jù)每個處理對象圖像的表示預定的顏色的像素數(shù),從進行拍攝時打開的頁P接近書B的封底的頁開始依次選擇預定數(shù)量的處理對象圖像來作為第二圖像。
在本實施方式中,對于預定的顏色,采用與成為背景的紙對應的顏色即白色和作為文字顏色的黑色。而且,對于預定數(shù)量采用1。由此,能夠?qū)Ψ謩e第一圖像和第二圖像,自動地選擇在白色紙上僅書寫了文字的一頁。
以上,說明了本發(fā)明的第四實施方式的圖像處理系統(tǒng)的結(jié)構(gòu)。以下,說明本實施方式的圖像處理系統(tǒng)的動作。
在本實施方式中,也執(zhí)行與第二實施方式相同的拍攝處理。本實施方式的圖像處理與第二實施方式同樣地,由作為圖像處理裝置的終端裝置執(zhí)行。但是,本實施方式的圖像處理內(nèi)包含的處理的結(jié)構(gòu)與第二實施方式的圖像處理不同。
詳細地說,如圖18所示,本實施方式的圖像處理包含圖像斑點修正處理(步驟S413),來代替第二實施方式的圖像處理內(nèi)包含的圖像斑點修正處理(步驟S113)。除了這一點以外,本實施方式的圖像處理與第二實施方式的圖像處理大致相同。
在本實施方式中,通過對與奇數(shù)頁對應的處理對象圖像執(zhí)行圖像處理的示例進行了說明。此外,對于與偶數(shù)頁對應的處理對象圖像,也和與奇數(shù)頁對應的處理對象圖像同樣地執(zhí)行圖像處理即可。
如圖19A所示,在本實施方式的圖像斑點修正處理(步驟S413)中執(zhí)行步驟S121~S122的處理。
接著,第一圖像選擇部447選擇第一圖像(步驟S432)。
詳細地說,如圖20所示,第一圖像選擇部447對變量u設(shè)定1(步驟S441)。在此,u為1~N的整數(shù)。
第一圖像選擇部447取得表示與第2u-1頁對應的處理對象圖像的處理對象圖像數(shù)據(jù)131_2u-1。由此,第一圖像選擇部447取得與第2u-1頁對應的處理對象圖像(步驟S442)。
第一圖像選擇部447對于與第2u-1頁對應的處理對象圖像,對表示白色或黑色的像素進行計數(shù)(步驟S443)。
在此,例如可以根據(jù)RGB的各成分的像素值與其平均值的差是否處于預定的范圍內(nèi)且亮度是否大于預定值,來判斷是否為白色。例如,可以根據(jù)RGB的各成分的像素值與其平均值的差是否處于預定的范圍內(nèi)且亮度是否小于預定值,來判斷是否為黑色。
第一圖像選擇部447判斷在步驟S443中計數(shù)得到的像素數(shù)是否為預定的閾值以上(步驟S444)。
在判斷為計數(shù)得到的像素數(shù)為閾值以上的情況下(步驟S444:“是”),第一圖像選擇部447選擇與第2u-1頁對應的處理對象圖像作為第一圖像(步驟S445)。由此,第一圖像選擇部447結(jié)束第一選擇處理(步驟S432)而返回到圖像處理。
在判斷為計數(shù)得到的像素數(shù)不在閾值以上的情況下(步驟S444:“否”),第一圖像選擇部447對變量u加上1(步驟S446)。
第一圖像選擇部447判斷在步驟S446中加上1后的變量u是否大于N(步驟S447)。
在判斷為變量u不大于N的情況下(步驟S447:“否”),第一圖像選擇部447返回至步驟S442的處理。
在判斷為變量u大于N的情況下(步驟S447:“是”),與處理對象圖像對應的頁P到達封底,因此第一圖像選擇部447執(zhí)行不可選擇處理(步驟S448)。在不可選擇處理(步驟S448)中,例如設(shè)定表示未能選擇出適合于第一圖像的處理對象圖像的第一不可選擇標志。然后,第一圖像選擇部447結(jié)束第一圖像處理(步驟S432)而返回至圖像處理。
通過執(zhí)行這樣的第一圖像處理(步驟S432),能夠自動地選擇在成為背景的紙上僅書寫了文字且距書B的封面最近的頁P。
如圖19A所示,第一圖像選擇部447根據(jù)是否設(shè)定了第一不可選擇標志,判斷是否能選擇出第一圖像(步驟S433)。
在設(shè)定了第一不可選擇標志的情況下,第一圖像選擇部447判斷為未能選擇出第一圖像(步驟S433:“否”),結(jié)束圖像斑點修正處理(步驟S413)而返回至圖像處理。
在未設(shè)定第一不可選擇標志的情況下,第一圖像選擇部447判斷為能夠選擇出第一圖像(步驟S433:“是”)。在該情況下,第一修正量取得部139取得對在步驟S432中選擇出的第一圖像進行分割而得到的各塊內(nèi)的像素的亮度(步驟S423)。在步驟S423中執(zhí)行的處理的詳細內(nèi)容與步驟S123大致相同。
當執(zhí)行步驟S124的處理時,如圖19B所示,第二圖像選擇部448選擇第二圖像(步驟S434)。
詳細地說,如圖21所示,第二圖像選擇部448對變量v設(shè)定N(步驟S451)。在此,v為1~N的整數(shù)。
第二圖像選擇部448取得表示與第2v-1頁對應的處理對象圖像的處理對象圖像數(shù)據(jù)131_2v-1。由此,第二圖像選擇部448取得與第2v-1頁對應的處理對象圖像(步驟S452)。
第二圖像選擇部448對于與第2v-1頁對應的處理對象圖像,對表示白色或黑色的像素進行計數(shù)(步驟S453)。
在此,與步驟S443同樣地判斷是否為白色和是否為黑色即可。
第二圖像選擇部448判斷在步驟S453中計數(shù)得到的像素數(shù)是否為預定的閾值以上(步驟S454)。
在判斷為計數(shù)得到的像素數(shù)為閾值以上的情況下(步驟S454:“是”),第二圖像選擇部448選擇與第2v-1頁對應的處理對象圖像作為第二圖像(步驟S455)。由此,第二圖像選擇部448結(jié)束第二選擇處理(步驟S434)而返回至圖像處理。
在判斷為計數(shù)得到的像素數(shù)不在閾值以上的情況下(步驟S454:“否”),第二圖像選擇部448從變量v減去1(步驟S456)。
第二圖像選擇部448判斷在步驟S456中減去1后的變量v是否大于表示在步驟S432中作為第一圖像而選擇的處理對象圖像所對應的頁P為哪頁的變量u。
在判斷為變量v大于變量u的情況下(步驟S457:“是”),第二圖像選擇部448返回至步驟S452的處理。
在判斷為變量v不大于變量u的情況下(步驟S457:“否”),與處理對象圖像對應的頁P比第一圖像更接近封面,因此第二圖像選擇部448執(zhí)行不可選擇處理(步驟S458)。在不可選擇處理(步驟S458)中,例如設(shè)定表示未能選擇出適合于第二圖像的處理對象圖像的第二不可選擇標志。然后,第二圖像選擇部448結(jié)束第二選擇處理(步驟S434)而返回至圖像處理。
通過執(zhí)行這樣的第二圖像處理(步驟S434),能夠自動地選擇在成為背景的紙上僅書寫了文字且距書B的封面最近的頁P。
第二圖像選擇部448根據(jù)是否設(shè)定了第二不可選擇標志,判斷是否能夠選擇出第二圖像(步驟S435)。
在設(shè)定了第二不可選擇標志的情況下,第二圖像選擇部448判斷為未能選擇出第二圖像(步驟S435:“否”),結(jié)束圖像斑點修正處理(步驟S413)而返回至圖像處理。
在未設(shè)定第二不可選擇標志的情況下,第二圖像選擇部448判斷為能選擇出第二圖像(步驟S435:“是”)。在該情況下,第二修正量取得部242取得對在步驟S434中選擇出的第二圖像進行分割而得到的各塊內(nèi)的像素的亮度(步驟S427)。在步驟S427中執(zhí)行的處理的詳細內(nèi)容與步驟S227大致相同。
接著,依次執(zhí)行步驟S228~S229、S225和S126的處理。由此,圖像斑點修正處理(步驟S413)結(jié)束,執(zhí)行圖像處理。
以上,說明了本發(fā)明的第四實施方式。
根據(jù)本實施方式,與第二實施方式同樣地,能夠減輕用于修正打開書B進行拍攝得到的多個處理對象圖像的亮斑的處理負荷。
另外,根據(jù)本實施方式,與第二實施方式同樣地,能夠適當?shù)匦拚c包含彩色照片、彩色圖等的頁P對應的處理對象圖像的亮斑。
并且,在本實施方式中,自動地選擇第一圖像和第二圖像,因此能夠節(jié)省 用于指定第一圖像和第二圖像的用戶的作業(yè)勞力,同時能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
本實施方式也可以如下那樣變形。
例如,在本實施方式中,預定數(shù)也可以采用2以上。例如直到選擇2以上的預定數(shù)量的處理對象圖像為止重復進行第一圖像選擇處理(步驟S432),由此能夠選擇多個處理對象圖像作為第一圖像。另外,例如直到選擇2以上的預定數(shù)量的處理對象圖像為止重復進行第二圖像選擇處理(步驟S434),由此能夠選擇多個處理對象圖像作為第二圖像。
在該情況下,在第一實施方式、第二實施方式的各變形例中,與選擇多個處理對象圖像中的兩個以上的處理對象圖像的情況同樣地對第一圖像和第二圖像進行處理即可。由此,如在各變形例中說明那樣,能夠減輕用于修正打開書B進行拍攝得到的多個處理對象圖像的亮斑的處理負荷,并能夠更適當?shù)匦拚涟摺?/p>
例如,第一圖像選擇部447可以從進行拍攝時打開的頁P接近書B的封底的頁開始依次選擇預定數(shù)量的處理對象圖像作為第一圖像。另外,第二圖像選擇部448可以從進行拍攝時打開的頁P接近書B的封面的頁開始依次選擇預定數(shù)量的處理對象圖像作為第二圖像。由此,能夠?qū)⑴c接近封面和封底中的一方的頁對應的處理對象圖像設(shè)為第一圖像,將與接近封面和封底中的另一方的頁對應的處理對象圖像設(shè)為第二圖像。結(jié)果,能夠取得按照與處理對象圖像對應的頁逐漸變化的亮度修正量Yab。因而,能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
例如,本實施方式的第一圖像選擇部447可以被裝入第一實施方式的終端裝置。另外,本實施方式的第一圖像選擇部447和第二圖像選擇部448可以被裝入第三實施方式的終端裝置。由此,能夠自動地選擇第一圖像或選擇第一圖像和第二圖像,因此能夠節(jié)省用于指定第一圖像和第二圖像的用戶的作業(yè)勞力,同時能夠適當?shù)匦拚鄠€處理對象圖像的亮斑。
以上,說明了本發(fā)明的實施方式和變形例,但是本發(fā)明并不限于這些實施方式和變形例。也可以適當?shù)亟M合各實施方式和各變形例。并且,也可以如下那樣變形。
例如,多個處理對象圖像的各處理對象圖像可以是通過拍攝書B對象物的對開兩頁而得到的圖像。即使如此將各實施方式進行變形,也起到與各實施方式相同的效果。
例如,進行由CPU、RAM、ROM等構(gòu)成的拍攝裝置和圖像處理裝置分別執(zhí)行的拍攝處理和圖像處理的成為中心的部分也可以是專用系統(tǒng),但是能夠使用智能手機、平板終端、個人計算機等執(zhí)行。例如可以將用于使智能手機、平板終端、個人計算機等執(zhí)行拍攝處理和圖像處理中的一方或雙方的計算機程序存儲在計算機可讀取的記錄介質(zhì)(軟盤、CD-ROM(Compact Disk Read Only Memory:光盤只讀存儲器)、DVD-ROM(Digital Versatile Disc Read Only Memory:數(shù)字多功能光盤只讀存儲器)等)而分發(fā),通過安裝該計算機程序,構(gòu)成用于執(zhí)行拍攝處理和圖像處理中的一方或兩方的智能手機、平板終端、個人計算機等。另外,可以將計算機程序存儲在因特網(wǎng)等通信網(wǎng)絡上的服務器裝置所具有的存儲裝置中,通過下載該計算機程序等,構(gòu)成用于執(zhí)行拍攝處理和圖像處理中的一方或兩方的智能手機、平板終端、個人計算機等。
例如在通過OS(Operating System:操作系統(tǒng))和應用程序的分擔或OS與應用程序的協(xié)作實現(xiàn)圖像處理裝置的功能的情況下等,可以僅將應用程序部分存儲在記錄介質(zhì)、存儲裝置中。
例如還能夠?qū)⒂嬎銠C程序疊加在載波而經(jīng)由通信網(wǎng)絡傳送。例如也可以在通信網(wǎng)絡上的公告板(BBS:Bulletin Board System)上公布上述計算機程序,經(jīng)由網(wǎng)絡傳送上述計算機程序。而且,也可以構(gòu)成為啟動該計算機程序,并在OS的控制下與其它應用程序同樣地執(zhí)行,由此能夠執(zhí)行上述處理。
以上,說明了本發(fā)明的優(yōu)選實施方式,但是本發(fā)明并不限于上述特定的實施方式,本發(fā)明包含權(quán)利要求中記載的發(fā)明及其均等的范圍。