文件生成設(shè)備、文件生成方法、文件再現(xiàn)設(shè)備及文件再現(xiàn)方法
【專利摘要】本技術(shù)涉及文件生成設(shè)備、文件生成方法、文件再現(xiàn)設(shè)備和文件再現(xiàn)方法，使得可以利用高動態(tài)范圍(HDR)圖像。生成存儲目標(biāo)軌道的文件。所述目標(biāo)軌道包含HDR信息，HDR信息包括特征信息和轉(zhuǎn)換信息，特征信息表示具有比標(biāo)準(zhǔn)(STD)圖像的動態(tài)范圍更高的動態(tài)范圍的HDR圖像的亮度的特征，轉(zhuǎn)換信息表示用于將STD圖像轉(zhuǎn)換成HDR圖像或?qū)DR圖像轉(zhuǎn)換成STD圖像的轉(zhuǎn)換規(guī)則。目標(biāo)軌道還包含HDR指定信息，HDR指定信息表示要被應(yīng)用于目標(biāo)軌道的HDR信息。本技術(shù)可以應(yīng)用于例如存儲諸如字幕的圖像的數(shù)據(jù)以及要被應(yīng)用于MP4文件等中的所述圖像的HDR信息的情況。
【專利說明】文件生成設(shè)備、文件生成方法、文件再現(xiàn)設(shè)備及文件再現(xiàn)方法

【技術(shù)領(lǐng)域】
[0001]本技術(shù)涉及文件生成設(shè)備、文件生成方法、文件再現(xiàn)設(shè)備及文件再現(xiàn)方法，更具體地，涉及能夠增加用戶享受作為具有高動態(tài)范圍的圖像的HDR(高動態(tài)范圍)圖像的機(jī)會的文件生成設(shè)備、文件生成方法、文件再現(xiàn)設(shè)備及文件再現(xiàn)方法。

【背景技術(shù)】
[0002]近年來，如下設(shè)備已經(jīng)普及:為了高效地發(fā)送或存儲信息的目的，將圖像處理為數(shù)字信號，并且通過利用使用對圖像而言唯一的冗余通過諸如離散余弦變換和運(yùn)動補(bǔ)償?shù)恼蛔儞Q執(zhí)行壓縮的編碼方案來對圖像進(jìn)行壓縮編碼。例如，具有MPEG(運(yùn)動圖片專家組)、H.264、MPEG-4部分10 (高級視頻編碼，其在下文中被稱作AVC)等作為編碼方案。
[0003]目前，為了相比H.264/AVC進(jìn)一步提高編碼效率，已經(jīng)由JCTVC(聯(lián)合合作組-視頻編碼)創(chuàng)立了被稱作HEVC(高效視頻編碼)的編碼方案的標(biāo)準(zhǔn)，JCTVC(聯(lián)合合作組-視頻編碼)是與ITU-T和ISO/IEC合作的標(biāo)準(zhǔn)組織。
[0004]目前，在HEVC的草案(非專利文獻(xiàn)I)中，在“D2.15色調(diào)映射信息SEI消息語法”和“D.3.15色調(diào)映射信息SEI消息語義”中，規(guī)定:通過使用SEI(補(bǔ)充增強(qiáng)信息)發(fā)送
tone_mapping_info (色調(diào)_映射_信息)作為關(guān)于HDR(高動態(tài)范圍)圖像--其是具有高動態(tài)范圍的圖像——的HDR信息。
[0005]另夕卜，除了 HEVC以夕卜，還已經(jīng)將tone_mapping_info引入到AVC。
[0006][引用列表]
[0007]非專利文獻(xiàn)
[0008]非專利文獻(xiàn)1:Berijamin Bross 等人，“High efficiency video coding (HEVC)text specificat1n draft 10 (for FDIS&Last Call)(高效視頻編碼(HEVC)文本規(guī)范草案 10(關(guān)于 FDIS 和最后呼叫))，ITU-T SG 16WP3 和 ISO/IEC JTC 1/SC 29/WG 11 的視頻編碼的聯(lián)合合作組(JCT-VC)，第12次會議，日內(nèi)瓦，瑞士，2013年I月14至23日(文獻(xiàn):JCTVC-L1003_v34,日期:2013 年 3 月 19 日)


【發(fā)明內(nèi)容】

[0009]本發(fā)明要解決的問題
[0010]目前，捕獲HDR圖像的相機(jī)或顯示HDR圖像的顯示器已經(jīng)普及。在這樣的情況下，要求通過便于將HDR信息引入到除了 HEVC或AVC格式以外的文件格式或數(shù)據(jù)格式來增加用戶享受HDR圖像的機(jī)會。
[0011]本技術(shù)用于增加用戶享受HDR圖像的機(jī)會。
[0012]問題的解決方案
[0013]根據(jù)本技術(shù)的第一文件生成設(shè)備包括:文件生成單元，其存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[0014]根據(jù)本技術(shù)的第一文件再現(xiàn)方法包括:從存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件中獲取由HDR指定信息指定的HDR信息，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[0015]在根據(jù)本技術(shù)的第一文件生成設(shè)備和第一文件生成方法中，生成如下文件，其存儲HDR信息和包括HDR指定信息的目標(biāo)軌道的文件，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR (高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[0016]根據(jù)本技術(shù)的第一文件再現(xiàn)設(shè)備包括:獲取單元，其從存儲HDR信息和包括HDR指定信息的目標(biāo)軌道的文件中獲取由HDR指定信息指定的HDR信息，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[0017]根據(jù)本技術(shù)的第一文件再現(xiàn)方法包括:從存儲HDR信息和包括HDR指定信息的目標(biāo)軌道的文件中獲取由HDR指定信息指定的HDR信息，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[0018]在根據(jù)本技術(shù)的第一文件再現(xiàn)設(shè)備和第一文件再現(xiàn)方法中，從存儲HDR信息和包括HDR指定信息的目標(biāo)軌道的文件中獲取由HDR指定信息指定的HDR信息，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[0019]根據(jù)本技術(shù)的第二文件生成設(shè)備包括:文件生成單元，其生成存儲HDR信息軌道和目標(biāo)軌道的文件，HDR信息軌道是HDR信息的流的軌道，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及目標(biāo)軌道包括軌道指定信息和HDR指定信息，軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，HDR指定信息指定由軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于目標(biāo)軌道的HDR信息。
[0020]根據(jù)本技術(shù)的第二文件生成方法包括:生成存儲HDR信息軌道和目標(biāo)軌道的文件，HDR信息軌道是HDR信息的流的軌道，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及目標(biāo)軌道包括軌道指定信息和HDR指定信息，軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，HDR指定信息指定由軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于目標(biāo)軌道的HDR信息。
[0021]在根據(jù)本技術(shù)的第二文件生成設(shè)備和第二文件生成方法中，生成如下文件，其存儲HDR信息軌道和目標(biāo)軌道的文件，HDR信息軌道是HDR信息的流的軌道，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及目標(biāo)軌道包括軌道指定信息和HDR指定信息，軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，HDR指定信息指定由軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于目標(biāo)軌道的HDR信息。
[0022]根據(jù)本技術(shù)的第二文件再現(xiàn)設(shè)備包括:獲取單元，從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息，HDR信息軌道是HDR信息的流的軌道，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR (高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及目標(biāo)軌道包括軌道指定信息和HDR指定信息，軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，HDR指定信息指定由軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于目標(biāo)軌道的HDR信息。
[0023]根據(jù)本技術(shù)的第二文件再現(xiàn)方法包括:從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息，HDR信息軌道是HDR信息的流的軌道，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及目標(biāo)軌道包括軌道指定信息和HDR指定信息，軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，HDR指定信息指定由軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于目標(biāo)軌道的HDR信息。
[0024]在根據(jù)本技術(shù)的第二文件再現(xiàn)設(shè)備和第二文件再現(xiàn)方法中，從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息，HDR信息軌道是HDR信息的流的軌道，HDR信息被配置有特征信息和轉(zhuǎn)換信息，特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，轉(zhuǎn)換信息表示將STD圖像和HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及目標(biāo)軌道包括軌道指定信息和HDR指定信息，軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，HDR指定信息指定由軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于目標(biāo)軌道的HDR信息。
[0025]另外，文件生成設(shè)備或文件再現(xiàn)設(shè)備可以是獨(dú)立的設(shè)備，或者可以是構(gòu)成一個設(shè)備的內(nèi)部塊。
[0026]另外，可以通過經(jīng)由傳輸介質(zhì)發(fā)送文件或通過將文件記錄在記錄介質(zhì)中來提供文件。
[0027]發(fā)明的效果
[0028]根據(jù)本技術(shù)，可以增加用戶享受HDR圖像的機(jī)會。
[0029]另外，本文中所描述的效果不一定限于，但可以是本公開內(nèi)容中所描述的效果中的任何效果。

【專利附圖】

【附圖說明】
[0030]圖1是示出了利用本技術(shù)的信號處理系統(tǒng)的實(shí)施方式的配置示例的圖。
[0031]圖2是示出了由信號處理系統(tǒng)執(zhí)行的模式_i (mode-1)的信號處理的示例的圖。
[0032]圖3是示出了從將原版(master)的HDR數(shù)據(jù)輸入到生成設(shè)備I的時間到從再現(xiàn)設(shè)備2輸出數(shù)據(jù)的時間模式_i的信號處理的流程的圖。
[0033]圖4是示出了由信號處理系統(tǒng)執(zhí)行的模式-1i(mode-1i)的信號處理的示例的圖。
[0034]圖5是示出了從將原版的HDR數(shù)據(jù)輸入到生成設(shè)備I的時間到從再現(xiàn)設(shè)備2輸出數(shù)據(jù)的時間模式_ii的信號處理的流程的圖。
[0035]圖6是示出了 HEVC方案訪問單元的配置的圖。
[0036]圖7是示出了根據(jù)HEVC方案規(guī)定的tone_mapping_info (色調(diào)映射信息)的語法的圖。
[0037]圖8是示出了針對其每個值被設(shè)置為tone_map_model_id(色調(diào)映射模型id)的TMI與轉(zhuǎn)換信息和特征信息之間的關(guān)系的圖。
[0038]圖9是示出了作為由具有tone_map_model_id = O作為轉(zhuǎn)換信息的tone_mapping_info表示的轉(zhuǎn)換規(guī)則的色調(diào)曲線的示例的圖。
[0039]圖10是示出了作為由具有tone_map_model_id = 2作為轉(zhuǎn)換信息的TMI表示的轉(zhuǎn)換規(guī)則的階躍函數(shù)的示例的圖。
[0040]圖11是示出了作為由具有tone_map_model_id = 3作為轉(zhuǎn)換信息的TMI表示的轉(zhuǎn)換規(guī)則的折線函數(shù)的示例的圖。
[0041]圖12是示出了包括在特征信息中的每條信息的示例的圖。
[0042]圖13是示出了 MP4文件的影片的示例的圖。
[0043]圖14是示出了 MP4文件中的媒體數(shù)據(jù)(影片)的邏輯布置的示例的圖。
[0044]圖15是示出了 MP4文件的數(shù)據(jù)結(jié)構(gòu)的圖。
[0045]圖16是示出了存儲媒體數(shù)據(jù)的MP4文件的數(shù)據(jù)結(jié)構(gòu)的示例的圖。
[0046]圖17是示出了分片段的影片的MP4文件的示例和非分片段的影片的MP4文件的示例的圖。
[0047]圖18是描述了 DECE(數(shù)字娛樂內(nèi)容生態(tài)系統(tǒng))CFF(通用文件格式)的圖。
[0048]圖19是示出了 SMPTE-TT的ST的數(shù)據(jù)的示例的圖。
[0049]圖20是示出了生成設(shè)備I的第一配置示例的框圖。
[0050]圖21是示出了由生成設(shè)備I生成的MP4文件的示例的圖。
[0051]圖22是示出了 tref盒(box)的定義的圖。
[0052]圖23是示出了作為vtmi盒的TrackReferenceTypeBox (軌道參考類型盒)的定義的示例的圖。
[0053]圖24是示出了 tirf盒的定義的示例的圖。
[0054]圖25是示出了由生成設(shè)備I生成的MP4文件的另一示例的圖。
[0055]圖26是示出了編碼處理單元22的配置示例的框圖。
[0056]圖27是示出了用于由轉(zhuǎn)換單元33將HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)的轉(zhuǎn)換處理的示例的圖。
[0057]圖28是示出了色調(diào)映射的示例的圖。
[0058]圖29是用于描述由生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0059]圖30是用于描述在步驟S2中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0060]圖31是用于描述在步驟S3中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0061]圖32是用于描述在步驟S4中執(zhí)行的報頭信息生成處理的示例的流程圖。
[0062]圖33是示出了再現(xiàn)設(shè)備2的第一配置示例的框圖。
[0063]圖34是用于描述由再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0064]圖35是用于描述在步驟S43中執(zhí)行的模式_i的解碼處理的示例的流程圖。
[0065]圖36是用于描述在步驟S44中執(zhí)行的模式_ii的解碼處理的示例的流程圖。
[0066]圖37是示出了顯示設(shè)備3的配置示例的框圖。
[0067]圖38是用于描述由顯示設(shè)備3執(zhí)行的顯示處理的示例的流程圖。
[0068]圖39是示出了生成設(shè)備I的第二配置示例的框圖。
[0069]圖40是由生成設(shè)備I生成的第二 MP4文件的示例的圖。
[0070]圖41是示出了 tinf盒的定義的示例的圖。
[0071]圖42是示出了 ToneMapInfo (色調(diào)映射信息)的語法的第一示例的圖。
[0072]圖43是示出了 ToneMapInfo的語法的第二示例的圖。
[0073]圖44是示出了 ToneMapInfo的語法的第三示例的圖。
[0074]圖45是示出了由生成設(shè)備I生成的第二 MP4文件的另一示例的圖。
[0075]圖46是示出了編碼處理單元122的配置示例的框圖。
[0076]圖47是用于描述由生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0077]圖48是用于描述在步驟S112中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0078]圖49是用于描述在步驟S113中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0079]圖50是用于描述在步驟S114中執(zhí)行的報頭信息生成處理的示例的流程圖。
[0080]圖51是示出了再現(xiàn)設(shè)備2的第二配置示例的框圖。
[0081]圖52是用于描述由再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0082]圖53是用于描述在步驟S153中執(zhí)行的模式_i的解碼處理的示例的流程圖。
[0083]圖54是用于描述在步驟S154中執(zhí)行的模式_ii的解碼處理的示例的流程圖。
[0084]圖55是不出了生成設(shè)備I的第三配置不例的框圖。
[0085]圖56是示出了由生成設(shè)備I生成的第三MP4文件的示例的圖。
[0086]圖57是示出了作為tmpi盒的TrackReferenceTypeBox的定義的示例的圖。
[0087]圖58是示出了作為存儲在第三MP4文件中所存儲的TMI (色調(diào)映射軌道)的mdat盒中的實(shí)際數(shù)據(jù)的TMI的樣本(ToneMapSample，色調(diào)映射樣本)的語法的示例的圖。
[0088]圖59是示出了 TMI的樣本(ToneMapSample)的數(shù)據(jù)結(jié)構(gòu)的示例的圖。
[0089]圖60是示出了由生成設(shè)備I生成的第三MP4文件的另一示例的圖。
[0090]圖61是示出了編碼處理單元202的配置示例的框圖。
[0091]圖62是用于描述由生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0092]圖63是用于描述在步驟S202中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0093]圖64是用于描述在步驟S203中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0094]圖65是用于描述在步驟S204中執(zhí)行的報頭信息生成處理的示例的流程圖。
[0095]圖66是不出了再現(xiàn)設(shè)備2的第三配置不例的框圖。
[0096]圖67是用于描述由再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0097]圖68是用于描述在步驟S253中執(zhí)行的模式_i的解碼處理的示例的流程圖。
[0098]圖69是用于描述在步驟S254中執(zhí)行的模式_ii的解碼處理的示例的流程圖。
[0099]圖70是示出了生成設(shè)備I的第四配置示例的框圖。
[0100]圖71是示出了編碼處理單元302的配置示例的框圖。
[0101]圖72是示出了 HDR存儲元素的示例的圖。
[0102]圖73是示出了 toneMapRef屬性的定義的示例和hdrlnfoRef屬性的定義的示例的圖。
[0103]圖74是示出了新的TT數(shù)據(jù)的第一示例的圖。
[0104]圖75是示出了新的TT數(shù)據(jù)的第二示例的圖。
[0105]圖76是示出了新的TT數(shù)據(jù)的第三示例的圖。
[0106]圖77是示出了新的TT數(shù)據(jù)的第四示例的圖。
[0107]圖78是用于描述由生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0108]圖79是用于描述在步驟S302中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0109]圖80是用于描述在步驟S303中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0110]圖81是示出了再現(xiàn)設(shè)備2的第四配置示例的框圖。
[0111]圖82是用于描述在再現(xiàn)設(shè)備2中執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0112]圖83是用于描述在步驟S333中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0113]圖84是用于描述在步驟S334中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0114]圖85是示出了利用本技術(shù)的計算機(jī)的實(shí)施方式的配置示例的框圖。

【具體實(shí)施方式】
[0115]<利用本技術(shù)的信號處理系統(tǒng)的實(shí)施方式>
[0116]圖1是示出了利用本技術(shù)的信號處理系統(tǒng)的實(shí)施方式的配置示例的圖。
[0117]圖1的信號處理系統(tǒng)被配置成包括生成設(shè)備1、再現(xiàn)設(shè)備2和顯示設(shè)備3。再現(xiàn)設(shè)備2和顯示設(shè)備3通過諸如HDMI (注冊商標(biāo))(高清晰度多媒體接口)的線纜4彼此連接。再現(xiàn)設(shè)備2和顯示設(shè)備3可以通過另一標(biāo)準(zhǔn)的線纜彼此連接，并且再現(xiàn)設(shè)備2和顯示設(shè)備3可以通過無線通信彼此連接。
[0118]生成設(shè)備I生成內(nèi)容的流并且提供該流。再現(xiàn)設(shè)備2根據(jù)由生成設(shè)備I提供的流來再現(xiàn)內(nèi)容。
[0119]生成設(shè)備I可以例如不經(jīng)變化地提供流。另外，生成設(shè)備I可以例如以將流存儲在預(yù)定的包(如IP包)中的狀態(tài)來提供流，或者可以例如以將流存儲在預(yù)定的文件(如ISO/IEC 14496-14中規(guī)定的MP4文件)中的狀態(tài)來提供流。
[0120]另外，在生成設(shè)備I中，可以例如以將流記錄在記錄介質(zhì)11如藍(lán)光(注冊商標(biāo))盤中的狀態(tài)來提供流，或者可以例如以通過傳輸介質(zhì)12如地面波(terrestrial wave)或因特網(wǎng)發(fā)送流的方式來提供流。
[0121]在本文中，在生成設(shè)備I中，在將流存儲在文件中的情況下，除了 MP4文件以外，可以將例如ISO/IEC 14496-12中規(guī)定的文件(ISO基本媒體文件格式的文件)、IS0/IEC14496-15中規(guī)定的文件、QuickTime格式的文件、具有盒結(jié)構(gòu)的文件或不具有盒結(jié)構(gòu)的文件用作存儲流的文件。
[0122]HDR (高動態(tài)范圍)圖像被輸入至生成設(shè)備1，HDR圖像是具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的圖像，STD (標(biāo)準(zhǔn))圖像是具有可以由具有標(biāo)準(zhǔn)亮度的監(jiān)視器顯示的預(yù)定動態(tài)范圍(亮度范圍)的圖像。標(biāo)準(zhǔn)亮度為例如100cd/m2( = 10nit)。另外，不特別限定STD圖像和HDR圖像。也就是說，STD圖像和HDR圖像是僅在動態(tài)范圍方面彼此相同的圖像，并且表示具有如下關(guān)系的圖像:其中根據(jù)稍后描述的轉(zhuǎn)換信息將一個圖像轉(zhuǎn)換成另一圖像。因此，STD圖像是僅動態(tài)范圍比HDR圖像的動態(tài)范圍低(窄)的圖像，而HDR圖像是僅動態(tài)范圍比STD圖像的動態(tài)范圍高(寬)的圖像。
[0123]在本文中，圖像包括視頻、圖形、背景(背景圖像)、字幕或其他可顯示的媒體。另夕卜，字幕(多個字幕、隱藏式字幕等)的數(shù)據(jù)格式可以是文本和圖像中的任一種。
[0124]例如，多個視頻或多個HDR圖像，如一個或更多個視頻以及一個或更多個圖形被輸入至生成設(shè)備I。
[0125]在下文中，為了簡化描述，假定HDR圖像中的一個(序列)HDR圖像的視頻(在下文中，有時被稱為HDR視頻)和HDR圖像中的一個(序列)圖像的字幕(在下文中，有時被稱為HDR ST (HDR字幕))被輸入至生成設(shè)備I。
[0126]然而，作為輸入至生成設(shè)備I的數(shù)據(jù)，可以利用任何圖像，如視頻和圖形的組合，視頻、圖形和字幕的組合，圖形和字幕的組合，或僅圖形。另外，輸入至生成設(shè)備I的視頻、字幕等的同一類型的媒體的圖像不限于一個圖像(一個序列)，而是可以使用多個圖像(序列)。
[0127]另外，如果不特別需要區(qū)分，則HDR視頻和HDR ST有時被統(tǒng)稱為HDR數(shù)據(jù)。
[0128]另外，下述STD圖像的視頻和ST (字幕)有時被分別稱為STD視頻和STD ST:其中HDR視頻和HDR ST的動態(tài)范圍被壓縮成可以由具有標(biāo)準(zhǔn)亮度的監(jiān)視器顯示的預(yù)定動態(tài)范圍。
[0129]另外，如果不特別需要區(qū)分，則有時STD視頻和STD ST被統(tǒng)稱為STD數(shù)據(jù)。
[0130]如果將STD數(shù)據(jù)的動態(tài)范圍視為例如0%至100%，則將HDR數(shù)據(jù)的動態(tài)范圍表示成0%至101%或更大，例如0%至500%、0%至1000%等的范圍。
[0131]生成設(shè)備I對例如不經(jīng)變化的原版的輸入HDR數(shù)據(jù)進(jìn)行編碼，并且將編碼數(shù)據(jù)存儲在例如MP4文件中。
[0132]可替選地，生成設(shè)備I將原版的輸入HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)，并且執(zhí)行編碼，此后，將編碼數(shù)據(jù)存儲在例如MP4文件中。
[0133]除了存儲HDR數(shù)據(jù)或STD數(shù)據(jù)以外，MP4文件還存儲表示原版的HDR數(shù)據(jù)的亮度的特征的特征信息和表示將HDR數(shù)據(jù)和STD數(shù)據(jù)中的一種數(shù)據(jù)轉(zhuǎn)換成另一種數(shù)據(jù)的轉(zhuǎn)換規(guī)則的轉(zhuǎn)換信息。
[0134]在本文中，例如，可以將水平X垂直分辨率為4096 X 2160像素、3840 X 2160像素等的所謂的4K分辨率視頻用作HDR視頻和STD視頻。
[0135]另外，例如，可以將HEVC方案、AVC方案或其他任意方案用作視頻編碼方案。也就是說，視頻編碼(解碼)方案不限于HEVC方案、AVC方案等。
[0136]如果例如根據(jù)HEVC方案將表示HDR圖像的亮度的特征的特征信息和表示將HDR圖像和STD圖像中的一種圖像轉(zhuǎn)換成另一種圖像的轉(zhuǎn)換規(guī)則的轉(zhuǎn)換信息視為HDR信息，則將tone_mapping_info規(guī)定為HDR信息。另外，根據(jù)HEVC方案，規(guī)定了以將tone_mapping_info包括在SEI中的狀態(tài)來發(fā)送作為HDR信息的tone_mapping_info。
[0137]再現(xiàn)設(shè)備2通過線纜4執(zhí)行與顯示設(shè)備3的通信，以獲取關(guān)于顯示設(shè)備3的顯示性能的信息。再現(xiàn)設(shè)備2識別顯示設(shè)備3是作為能夠顯示HDR數(shù)據(jù)的監(jiān)視器的HDR監(jiān)視器，還是作為能夠僅顯示STD數(shù)據(jù)的監(jiān)視器的STD監(jiān)視器。
[0138]另外，再現(xiàn)設(shè)備2通過讀取記錄在記錄介質(zhì)11中的MP4文件來獲取MP4文件或通過接收經(jīng)由傳輸介質(zhì)12發(fā)送的MP4文件來獲取MP4文件，并且再現(xiàn)存儲在MP4文件中的數(shù)據(jù)。
[0139]也就是說，再現(xiàn)設(shè)備2對作為存儲在MP4文件中的視頻的流的視頻流以及作為ST(字幕)的流的ST流進(jìn)行解碼。
[0140]接下來，例如，在通過解碼所獲得的數(shù)據(jù)為HDR數(shù)據(jù)并且顯示設(shè)備3被配置成包括HDR監(jiān)視器的情況下，再現(xiàn)設(shè)備2將通過解碼所獲得的HDR數(shù)據(jù)輸出到顯示設(shè)備3。在這種情況下，再現(xiàn)設(shè)備2將存儲在MP4文件中的特征信息連同HDR數(shù)據(jù)一起輸出到顯示設(shè)備3。
[0141]另一方面，在通過解碼所獲得的數(shù)據(jù)為HDR數(shù)據(jù)而顯示設(shè)備3被配置成包括STD監(jiān)視器的情況下，再現(xiàn)設(shè)備2將通過解碼所獲得的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)并且輸出STD數(shù)據(jù)。通過使用存儲在MP4文件中的轉(zhuǎn)換信息來執(zhí)行HDR數(shù)據(jù)到STD數(shù)據(jù)的轉(zhuǎn)換。
[0142]在通過解碼所獲得的數(shù)據(jù)為STD數(shù)據(jù)而顯示設(shè)備3被配置成包括HDR監(jiān)視器的情況下，再現(xiàn)設(shè)備2將通過解碼所獲得的STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)，并且將HDR數(shù)據(jù)輸出到顯示設(shè)備3。通過使用存儲在MP4文件中的轉(zhuǎn)換信息來執(zhí)行STD數(shù)據(jù)到HDR數(shù)據(jù)的轉(zhuǎn)換。在這種情況下，再現(xiàn)設(shè)備2將存儲在MP4文件中的特征信息連同HDR數(shù)據(jù)一起輸出到顯示設(shè)備3。
[0143]另外，在通過解碼所獲得的數(shù)據(jù)為STD數(shù)據(jù)并且顯示設(shè)備3被配置成包括STD監(jiān)視器的情況下，再現(xiàn)設(shè)備2將通過解碼所獲得的STD數(shù)據(jù)輸出到顯示設(shè)備3。
[0144]顯示設(shè)備3接收從再現(xiàn)設(shè)備2發(fā)送的STD數(shù)據(jù)或HDR數(shù)據(jù)，并且基于STD數(shù)據(jù)或HDR數(shù)據(jù)在監(jiān)視器上顯示與STD數(shù)據(jù)或HDR數(shù)據(jù)對應(yīng)的STD圖像或HDR圖像。
[0145]例如，在發(fā)送特征信息的情況下，顯示設(shè)備3識別到從再現(xiàn)設(shè)備2發(fā)送的數(shù)據(jù)連同特征信息為HDR數(shù)據(jù)。如上所述，將特征信息連同HDR數(shù)據(jù)發(fā)送至被配置成包括HDR監(jiān)視器的顯示設(shè)備3。
[0146]在這種情況下，顯示設(shè)備3顯示與對應(yīng)于由特征信息指定的特征的HDR數(shù)據(jù)對應(yīng)的HDR圖像。也就是說，在包括在顯示設(shè)備3中的監(jiān)視器是具有0%至500%的動態(tài)范圍的監(jiān)視器并且由特征信息指定HDR數(shù)據(jù)的動態(tài)范圍為0%至500%的預(yù)定的特征的情況下，顯示設(shè)備3根據(jù)預(yù)定的特征在0%至500%的范圍內(nèi)調(diào)整亮度以顯示HDR圖像。
[0147]通過允許指定原版的HDR數(shù)據(jù)的亮度的特征，內(nèi)容的創(chuàng)作者可以以想要的亮度顯示圖像。
[0148]通常，顯示設(shè)備如TV(電視機(jī))將外部輸入數(shù)據(jù)識別為具有0%至100%的動態(tài)范圍的數(shù)據(jù)。另外，在顯示設(shè)備的監(jiān)視器具有比上面提到的動態(tài)范圍寬(高)的動態(tài)范圍的情況下，顯示設(shè)備可以獨(dú)自根據(jù)監(jiān)視器的特性來擴(kuò)大亮度以顯示圖像。通過指定亮度的特征和根據(jù)所指定的特征來調(diào)節(jié)HDR數(shù)據(jù)的亮度，可以防止在顯示設(shè)備側(cè)執(zhí)行創(chuàng)作者的不想要的亮度調(diào)整。
[0149]另外，通常，將數(shù)據(jù)輸出到顯示設(shè)備如TV的再現(xiàn)設(shè)備根據(jù)傳輸線的特性來轉(zhuǎn)換亮度，之后輸出數(shù)據(jù)。接收數(shù)據(jù)的顯示設(shè)備根據(jù)監(jiān)視器的特性來轉(zhuǎn)換所接收的數(shù)據(jù)的亮度以顯示圖像。再現(xiàn)設(shè)備2不執(zhí)行亮度的轉(zhuǎn)換，并且將HDR數(shù)據(jù)不經(jīng)變化地從再現(xiàn)設(shè)備2輸出到顯示設(shè)備3，使得可以減少亮度轉(zhuǎn)換處理的數(shù)目，并且可以在顯示設(shè)備3上顯示具有接近于原版的亮度的亮度的圖像。
[0150]另一方面，在不發(fā)送特征信息的情況下，顯示設(shè)備3識別到從再現(xiàn)設(shè)備2發(fā)送的數(shù)據(jù)為STD數(shù)據(jù)并且顯示與STD數(shù)據(jù)對應(yīng)的STD圖像。如果從再現(xiàn)設(shè)備2發(fā)送STD數(shù)據(jù)，則顯示設(shè)備3表示包括STD監(jiān)視器的設(shè)備。
[0151]另外，在生成設(shè)備I將音頻數(shù)據(jù)存儲在MP4文件中的情況下，再現(xiàn)設(shè)備2再現(xiàn)音頻數(shù)據(jù)并且將音頻數(shù)據(jù)發(fā)送至顯示設(shè)備3。顯示設(shè)備3基于從再現(xiàn)設(shè)備2發(fā)送的音頻數(shù)據(jù)輸出與音頻數(shù)據(jù)對應(yīng)的聲音。
[0152]在下文中，以保持動態(tài)范圍的狀態(tài)將原版的HDR數(shù)據(jù)存儲在MP4文件中的處理模式被稱為模式_i，而將原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)并且將STD數(shù)據(jù)存儲在MP4文件中的處理模式被稱為模式_ii。
[0153]<模式_i的信號處理>
[0154]圖2是示出了由圖1的信號處理系統(tǒng)執(zhí)行的模式_i的信號處理的示例的圖。
[0155]被表示成由實(shí)線LI包圍的左側(cè)的處理表示由生成設(shè)備I執(zhí)行的編碼處理，而被表示成由實(shí)線L2包圍的右側(cè)的處理表示由再現(xiàn)設(shè)備2執(zhí)行的解碼處理。
[0156]在輸入原版的HDR數(shù)據(jù)的情況下，如由箭頭#1所指示的，生成設(shè)備I檢測原版的HDR數(shù)據(jù)的亮度并且生成特征信息。另外，如由箭頭#2-1所指示的，生成設(shè)備I例如根據(jù)HEVC方案對原版的HDR視頻進(jìn)行編碼以生成編碼數(shù)據(jù)，并且如由箭頭#2-2所指示的，生成設(shè)備I對原版的HDRST進(jìn)行編碼以生成作為ST的流的ST流。
[0157]如由箭頭#3所指示的，生成設(shè)備I將原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。在監(jiān)視器(未示出)上顯示與通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)對應(yīng)的STD圖像。通過調(diào)整轉(zhuǎn)換參數(shù)適當(dāng)?shù)貓?zhí)行HDR數(shù)據(jù)到STD數(shù)據(jù)的轉(zhuǎn)換，同時創(chuàng)作者視覺上檢查與所轉(zhuǎn)換的STD數(shù)據(jù)對應(yīng)的STD圖像。
[0158]如由箭頭#4所指示的，生成設(shè)備I基于由創(chuàng)作者執(zhí)行的調(diào)整來生成轉(zhuǎn)換信息。
[0159]轉(zhuǎn)換信息表示將比標(biāo)準(zhǔn)動態(tài)范圍較寬的0%至400%等的高動態(tài)范圍內(nèi)的每個亮度值和作為標(biāo)準(zhǔn)動態(tài)范圍的O %至100%的動態(tài)范圍內(nèi)的每個亮度值中的一個亮度值轉(zhuǎn)換成另一亮度值的轉(zhuǎn)換規(guī)則，使得轉(zhuǎn)換信息表示亮度值之間的對應(yīng)關(guān)系。
[0160]如由箭頭#5所指示的，生成設(shè)備I將特征信息和轉(zhuǎn)換信息作為SEI插入到HDR視頻的編碼數(shù)據(jù)中以生成視頻流。如由箭頭#11所指示的，生成設(shè)備I將所生成的視頻流和HDR ST的ST流存儲在MP4文件中，并且將MP4文件提供給再現(xiàn)設(shè)備2。[0161 ] 以這種方式，將HDR視頻和HDR ST的特征信息和轉(zhuǎn)換信息以通過使用SEI被插入到視頻流中的形式提供給再現(xiàn)設(shè)備2。
[0162]如由箭頭#20所指示的，再現(xiàn)設(shè)備2從MP4文件讀取ST流，并且對ST流進(jìn)行解碼以生成HDR STo
[0163]另外，如由箭頭#21和#22所指示的，再現(xiàn)設(shè)備2從MP4文件讀取視頻流以從視頻流的SEI提取特征信息和轉(zhuǎn)換信息。
[0164]另外，如由箭頭#23所指示的，再現(xiàn)設(shè)備2根據(jù)HEVC方案對包括在視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成HDR視頻。在顯示設(shè)備3被配置成包括HDR監(jiān)視器的情況下，再現(xiàn)設(shè)備2如由箭頭#24所指示將特征信息添加到通過解碼所獲得的HDR數(shù)據(jù)，并且如由箭頭#25所指示將添加有特征信息的HDR數(shù)據(jù)輸出到顯示設(shè)備3。
[0165]另一方面，在顯示設(shè)備3被配置成包括STD監(jiān)視器的情況下，如由箭頭#26所指示的，再現(xiàn)設(shè)備2通過使用從視頻流提取的轉(zhuǎn)換信息將通過解碼所獲得的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。如由箭頭#27所指示的，再現(xiàn)設(shè)備2將通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)輸出到顯示設(shè)備3。
[0166]以這種方式，通過解碼所獲得的HDR數(shù)據(jù)連同特征信息被輸出至被配置成包括HDR監(jiān)視器的顯示設(shè)備3?？商孢x地，在將通過解碼所獲得的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)之后，將所轉(zhuǎn)換的數(shù)據(jù)輸出至被配置成包括STD監(jiān)視器的顯示設(shè)備3。
[0167]圖3是示出了從將原版的HDR數(shù)據(jù)輸入至生成設(shè)備I的時間到從再現(xiàn)設(shè)備2輸出數(shù)據(jù)的時間模式_i的信號處理的流程的圖。
[0168]如由白色箭頭#51所指示的，將原版的HDR數(shù)據(jù)連同由生成設(shè)備I基于原版的HDR數(shù)據(jù)所生成的特征信息和轉(zhuǎn)換信息提供給再現(xiàn)設(shè)備2。特征信息包括例如表示動態(tài)范圍被擴(kuò)展至O %至400 %的范圍的信息。
[0169]在顯示設(shè)備3被配置成包括HDR監(jiān)視器的情況下，在再現(xiàn)設(shè)備2中，如由箭頭#52和#53所指示的，將特征信息添加到通過解碼所獲得的HDR數(shù)據(jù)。另外，如由箭頭#54所指示的，將添加有特征信息的HDR數(shù)據(jù)輸出到顯示設(shè)備3。
[0170]另一方面，在顯示設(shè)備3被配置成包括STD監(jiān)視器的情況下，在再現(xiàn)設(shè)備2中，如由箭頭#55和#56所指示的，通過使用轉(zhuǎn)換信息將通過解碼所獲得的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。另外，如由箭頭#57所指示的，將通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)輸出到顯示設(shè)備3。在圖3中，表示HDR數(shù)據(jù)的波形的幅值和表示STD數(shù)據(jù)的波形的幅值表示相應(yīng)的動態(tài)范圍。
[0171]以這種方式，在模式_i下，以HDR數(shù)據(jù)的狀態(tài)將原版的HDR數(shù)據(jù)存儲在MP4文件中。另外，根據(jù)要作為輸出目的地的顯示設(shè)備3的性能，進(jìn)行轉(zhuǎn)變:是將通過解碼所獲得的HDR數(shù)據(jù)不經(jīng)變化地添加到要輸出的特征信息，還是將通過解碼所獲得的HDR數(shù)據(jù)轉(zhuǎn)換成要輸出的STD數(shù)據(jù)。
[0172]<模式-1i的信號處理>
[0173]圖4是示出了由圖1的信號處理系統(tǒng)執(zhí)行的模式_ii的信號處理的示例的圖。
[0174]在輸入原版的HDR數(shù)據(jù)的情況下，如由箭頭#71所指示的，生成設(shè)備I檢測原版的HDR數(shù)據(jù)的亮度以生成特征信息。
[0175]如由箭頭#72所指示的，生成設(shè)備I將原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。在監(jiān)視器(未示出)上顯示與通過轉(zhuǎn)換所獲得的STD數(shù)據(jù)對應(yīng)的STD圖像。
[0176]如由箭頭#73所指示的，生成設(shè)備I基于創(chuàng)作者的調(diào)整來生成轉(zhuǎn)換信息。
[0177]另外，如由箭頭#74-1所指示的，生成設(shè)備I根據(jù)HEVC方案對通過原版的HDR視頻的轉(zhuǎn)換所獲得的STD視頻進(jìn)行編碼以生成編碼數(shù)據(jù)。另外，如由箭頭#74-2所指示的，生成設(shè)備I對通過原版的HDR ST的轉(zhuǎn)換所獲得的STD ST進(jìn)行編碼以生成ST流。
[0178]如由箭頭#75所指示的，生成設(shè)備I將特征信息和轉(zhuǎn)換信息作為SEI插入到編碼數(shù)據(jù)中以生成視頻流。如由箭頭#91所指示的，生成設(shè)備I將所生成的視頻流和ST流存儲在MP4文件中，并且將視頻流和ST流提供給再現(xiàn)設(shè)備2。
[0179]如由箭頭#101和#102所指示的，再現(xiàn)設(shè)備2從MP4文件讀取視頻流并且從視頻流的SEI提取特征信息和轉(zhuǎn)換信息。
[0180]另外，再現(xiàn)設(shè)備2如由箭頭#103-1所指示根據(jù)HEVC方案對包括在視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成STD視頻并且如由箭頭#103-2所指示對ST流進(jìn)行解碼以生成STDSTo在顯示設(shè)備3被配置成包括STD監(jiān)視器的情況下，如由箭頭#104所指示的，再現(xiàn)設(shè)備2將通過解碼所獲得的STD數(shù)據(jù)輸出到顯示設(shè)備3。
[0181]另一方面，在顯示設(shè)備3被配置成包括HDR監(jiān)視器的情況下，如由箭頭#105所指示的，再現(xiàn)設(shè)備2通過使用從視頻流提取的轉(zhuǎn)換信息將通過解碼所獲得的STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)。再現(xiàn)設(shè)備2如由箭頭#106所指示將特征信息添加到通過轉(zhuǎn)換所獲得的HDR數(shù)據(jù)，并且如由箭頭#107所指示將添加有特征信息的HDR數(shù)據(jù)輸出到顯示設(shè)備3。
[0182]以這種方式，在將通過解碼所獲得的SRD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)之后，將所轉(zhuǎn)換的數(shù)據(jù)連同特征信息一起輸出至包括HDR監(jiān)視器的顯示設(shè)備3。此外，通過解碼所獲得的STD數(shù)據(jù)不經(jīng)變化地輸出到包括STD監(jiān)視器的顯示設(shè)備3。
[0183]圖5是示出了從將原版的HDR數(shù)據(jù)輸入至生成設(shè)備I的時間到從再現(xiàn)設(shè)備2輸出數(shù)據(jù)的時間模式_ii的信號處理的流程的圖。
[0184]如由白色箭頭#121所指示的，在將原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)之后，將所轉(zhuǎn)換的數(shù)據(jù)連同由生成設(shè)備I基于原版的HDR數(shù)據(jù)所生成的特征信息和轉(zhuǎn)換信息一起提供給再現(xiàn)設(shè)備2。
[0185]在顯示設(shè)備3被配置成包括HDR監(jiān)視器的情況下，在再現(xiàn)設(shè)備2中，如由箭頭#122和#123所指示的，通過使用轉(zhuǎn)換信息將通過解碼所獲得的STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)。另外，如由箭頭#124和#125所指示的，將特征信息添加到通過STD數(shù)據(jù)的轉(zhuǎn)換所獲得的HDR數(shù)據(jù)，如由箭頭#126所指示的，將添加有特征信息的HDR數(shù)據(jù)輸出到顯示設(shè)備3。
[0186]另一方面，在顯示設(shè)備3被配置成包括STD監(jiān)視器的情況下，在再現(xiàn)設(shè)備2中，如由箭頭#127所指示的，將通過解碼所獲得的STD數(shù)據(jù)輸出到顯示設(shè)備3。
[0187]以這種方式，在模式_ii下，將原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)，并且將STD數(shù)據(jù)存儲在MP4文件中。另外，根據(jù)要作為輸出目的地的顯示設(shè)備3的性能，進(jìn)行轉(zhuǎn)變:是將通過解碼所獲得的STD數(shù)據(jù)轉(zhuǎn)換成HDR數(shù)據(jù)并且添加有要輸出的特征信息，還是不經(jīng)變化地輸出STD數(shù)據(jù)。
[0188]稍后將詳細(xì)描述前述生成設(shè)備I和再現(xiàn)設(shè)備2的配置和操作。
[0189]〈HEVC方案中的訪問單元的配置>
[0190]圖6是示出了根據(jù)HEVC方案的訪問單元的配置的圖。
[0191]根據(jù)HEVC方案的視頻流被配置有訪問單元，每個訪問單元是一組NAL(網(wǎng)絡(luò)提取層)單元。一個訪問單元包括例如一個圖片的視頻數(shù)據(jù)。
[0192]如圖6中所示，一個訪問單元被配置有AU分隔符(訪問單元分隔符)，VPS(視頻參數(shù)集)、SPS(序列參數(shù)集)、PPS(圖片參數(shù)集)、SE1、VCL(視頻編碼層)、EOS(序列結(jié)束)以及EOS (流結(jié)束)。
[0193]AU分隔符表示訪問單元的開頭。VPS包括表示比特流的內(nèi)容的元數(shù)據(jù)。SPS包括諸如由HEVC解碼器通過序列解碼處理需要參考的圖片大小和CTB(編碼樹塊)大小的信息。PPS包括由HEVC解碼器為執(zhí)行圖片解碼處理需要參考的信息。
[0194]SEI是包括每個圖片的計時信息或關(guān)于隨機(jī)訪問的信息等的輔助信息。根據(jù)HEVC方案的視頻流可以包括特征信息和轉(zhuǎn)換信息作為是SEI之一的tone_mapping_info。tone_mapping_info 被分配有 tone_map_id (色調(diào) _ 映射 _id)作為識別 tone_mapping_info 的識別信息。
[0195]VCL是一個圖片的編碼數(shù)據(jù)。EOS (序列結(jié)束)表示序列的結(jié)束位置，而EOS (流結(jié)束)表示流的結(jié)束位置。
[0196]<tone_mapping_info>
[0197]圖7是示出了根據(jù)HEVC方案規(guī)定的tone_mapping_info的語法的圖。
[0198]根據(jù)作為圖像的輸出目的地的監(jiān)視器的性能通過使用tone_mapping_info對通過解碼所獲得的圖像的亮度或顏色進(jìn)行轉(zhuǎn)換。另外，圖7的左側(cè)中的行數(shù)和冒號(:)不構(gòu)成語法。
[0199]在第2 行中，tone_map_id 是 tone_mapping_info 的識別信息。在第 8 行中，tone_map_m0del_id (色調(diào)_映射_模式」d)表示要用于轉(zhuǎn)換的色調(diào)映射的模型(轉(zhuǎn)換規(guī)則)。
[0200]關(guān)于tone_mapping_info 的語法，tone_map_model_id 的值可以為 0、1、2、3、4。
[0201]tone_map_model_id 的值為 0、1、2、3 中任一個的 tone_mapping_info (在下文中，適當(dāng)?shù)乜s寫成TMI)對應(yīng)于轉(zhuǎn)換信息，而tone_map_model_id的值為4的TMI對應(yīng)于特征信息。
[0202]另外，根據(jù)HEVC方案，對于作為轉(zhuǎn)換信息的TMI，可以允許tone_map_model_id具有0、2或3。在本實(shí)施方式中，假定作為轉(zhuǎn)換信息的TMI的tone_map_model_id的值為O、2、3中任一個。
[0203]生成設(shè)備I將HDR信息，即，轉(zhuǎn)換信息和特征信息兩者包括在MP4文件中。因此，在生成設(shè)備I中，生成tone_map_model_id的值為0、2、3中任一個的TMI中至少之一作為轉(zhuǎn)換信息，并且生成tone_map_model_id的值為4的TMI中至少之一作為特征信息。
[0204]圖7中的第9行至第11行是用于tone_map_model_id = O的描述。在tone_map_model_id = O的情況下，描述min_value (最小值)和max_value (最大值)。
[0205]圖7中的第15行至第17行是用于tone_map_model_id = 2的描述。在tone_map_model_id = 2的情況下，描述具有與max_target_data(最大目標(biāo)數(shù)據(jù))的數(shù)目相同的數(shù)目且表示階躍函數(shù)的 start_of_coded_interval [i]。
[0206]圖7中的第18行至第23行是用于tone_map_model_id = 3的描述。在tone_map_model_id = 3的情況下，描述具有由num_pivots指定的數(shù)目且表示折線函數(shù)的coded_pivot_value[i]和 target_pivot_value[i]。
[0207]圖7中的第24行至第39行是用于tone_map_model_id = 4的描述。在關(guān)于tone—map—model—id = 4 的信息中，例如，ref_ _screen_luminance_white、extended_range_white_level、nominal_black_level_code_value、nominal_white_level_code_value 和extended_white_level_code_value 是構(gòu)成特征信息的參數(shù)。
[0208]圖8是示出了設(shè)置每個值作為tone_map_model_id的TMI與轉(zhuǎn)換信息和特征信息之間的關(guān)系的圖。
[0209]如圖8中所示，設(shè)置值0、2、3中任一個作為tone_map_model_id的TMI對應(yīng)于轉(zhuǎn)換信息，而設(shè)置值4作為tone_map_model_id的TMI對應(yīng)于特征信息。
[0210]圖9是示出了作為由作為轉(zhuǎn)換信息的具有tone_map_model_id = O的tone_mapping_info表示的轉(zhuǎn)換規(guī)則的色調(diào)曲線的示例的圖。
[0211]圖9中的水平軸表示coded_data (編碼_數(shù)據(jù))(轉(zhuǎn)換之前的RGB值)，垂直軸表示target_data(目標(biāo)_數(shù)據(jù))(轉(zhuǎn)換之后的RGB值)。在使用圖9的色調(diào)曲線的情況下，如由白色箭頭#151所指示的，低于值Dl的RGB值被轉(zhuǎn)換成由min_value表示的RGB值。另夕卜，如由白色箭頭#152所指示的，等于或高于值D2 ( > Dl)的RGB值被轉(zhuǎn)換成由max_value表示的RGB值。
[0212]在使用具有tone_map_model_id = O的TMI的轉(zhuǎn)換中，雖然不存在超過max_value的亮度和min_value之下的亮度(由RGB值表示的亮度)，但是降低了轉(zhuǎn)換處理的負(fù)荷。
[0213]圖10是示出了作為由作為轉(zhuǎn)換信息的具有tone_map_model_id = 2的TMI表示的轉(zhuǎn)換規(guī)則的階躍函數(shù)的示例的圖。
[0214]在使用圖10的階躍函數(shù)的情況下，例如，coded_data(編碼_數(shù)據(jù))=5被轉(zhuǎn)換成 target_data(目標(biāo) _ 數(shù)據(jù))=3。
[0215]雖然具有tone_map_model_id = 2的TMI具有大的數(shù)據(jù)量，但是降低了轉(zhuǎn)換處理的負(fù)荷。
[0216]圖11是示出了作為由作為轉(zhuǎn)換信息的具有tone_map_model_id = 3的TMI表示的轉(zhuǎn)換規(guī)則的折線函數(shù)的示例的圖。
[0217]在使用圖11的折線函數(shù)的情況下，例如，coded_data (編碼_數(shù)據(jù))=Dll被轉(zhuǎn)換成target_data(目標(biāo)_數(shù)據(jù))=Dll’，并且coded_data(編碼_數(shù)據(jù))=D12被轉(zhuǎn)換成target_data(目標(biāo) _ 數(shù)據(jù))=D12’。
[0218]圖12是示出了包括在特征信息中的每條信息的示例的圖。
[0219]圖12中的水平軸表示亮度值。在位長度為10位的情況下，亮度值的值為O至1023。圖12中的垂直軸表示亮度。曲線Lll表示亮度值與具有標(biāo)準(zhǔn)亮度的監(jiān)視器的亮度之間的關(guān)系。具有標(biāo)準(zhǔn)亮度的監(jiān)視器的動態(tài)范圍為0%至100%。
[0220]ref_screen_luminance_white (圖7)表示標(biāo)準(zhǔn)監(jiān)視器的亮度(STD圖像的最大亮度)(cd/m2)。extended_range_white_level表示擴(kuò)展的動態(tài)范圍的亮度(HDR圖像的最大亮度)。在圖12的示例的情況下，把400設(shè)置作為extended_range_white_level的值。
[0221]nominal_black_level_code_value 表示黑色(亮度 0%)的亮度值，而 nominal_white_level_code_value表示具有標(biāo)準(zhǔn)亮度的監(jiān)視器的白色(亮度100% )的亮度值。extended_white_level_code_value表示在擴(kuò)展的動態(tài)范圍內(nèi)白色的亮度值。
[0222]在圖12的示例的情況下，如由白色箭頭#161所指示的，根據(jù)extended_range_white_level的值，將0%至100%的動態(tài)范圍擴(kuò)展至0%至400%的動態(tài)范圍。另外，由extended_white_level_code_value表不對應(yīng)于400%的亮度的亮度值。
[0223]對于HDR 數(shù)據(jù)的亮度的特征，nominal_black_level_code_value 的值、nominal—white_level_code_value 的值和 extended_white_level_code_value 的值分別變成由米用亮度O %、100 %和400 %的曲線LI2表示的特征。
[0224]以這種方式，設(shè)置值4作為tone_map_model_id的TMI表示原版的HDR數(shù)據(jù)的亮度的特征。
[0225]〈MP4 文件 >
[0226]圖13是示出了 MP4文件的影片的示例的圖。
[0227]在本文中，在IS0/IEC(標(biāo)準(zhǔn)化國際組織/國際電工委員會)14496-12中規(guī)定MP4文件的細(xì)節(jié)。
[0228]在MP4文件中，將一組媒體數(shù)據(jù)如作為再現(xiàn)對象的視頻、音頻或ST (字幕)稱作影片，并且影片被配置有一個或更多個軌道。
[0229]作為再現(xiàn)對象的視頻、ST等中的獨(dú)立的一種的媒體數(shù)據(jù)(數(shù)據(jù)流(例如，es (基本流)))可以構(gòu)成一個軌道，并且可以同時再現(xiàn)包括在影片中的一個或更多個軌道。
[0230]在圖13中，影片被配置有三個軌道#1、#2、#3。另外，軌道#1被配置有視頻的數(shù)據(jù)流；軌道#2被配置有伴隨視頻的一通道音頻的數(shù)據(jù)流；以及軌道#3被配置有與視頻疊加的一通道ST的數(shù)據(jù)流。
[0231]每個軌道的媒體數(shù)據(jù)被配置有樣本。
[0232]在訪問MP4文件中的媒體數(shù)據(jù)的情況下，樣本表示第一單元(訪問單元)。因此，不可以以比樣本更詳細(xì)的單元訪問MP4文件中的媒體數(shù)據(jù)。
[0233]對于視頻的媒體數(shù)據(jù)，例如，I個幀(或I個字段)等變成I個樣本。另外，對于音頻的媒體，例如，由音頻的媒體數(shù)據(jù)的標(biāo)準(zhǔn)定義的I個音頻幀等變成I個樣本。
[0234]圖14是示出了媒體數(shù)據(jù)(影片)在MP4文件中的邏輯布置的示例的圖。
[0235]以均稱作組塊(chunk)的單元來布置媒體數(shù)據(jù)。
[0236]在多種數(shù)據(jù)，即例如視頻的數(shù)據(jù)流、音頻的數(shù)據(jù)流和ST的數(shù)據(jù)流這三種數(shù)據(jù)流作為影片的媒體數(shù)據(jù)而存在的情況下，以多種數(shù)據(jù)以組塊為單位交織的狀態(tài)來布置多種媒體數(shù)據(jù)。
[0237]在本文中，組塊是被布置在邏輯上連續(xù)的地址處的一個或更多個樣本的集合。
[0238]圖15是示出了 MP4文件的數(shù)據(jù)結(jié)構(gòu)的圖。
[0239]MP4文件以稱作盒的單位被配置為存儲數(shù)據(jù)的容器，并且具有稱作盒結(jié)構(gòu)的結(jié)構(gòu)。
[0240]盒包括4字節(jié)的‘大小’(盒大小)、4字節(jié)的‘類型’(盒類型)和實(shí)際數(shù)據(jù)(data)。
[0241]‘大小’表示整個盒的大小，而‘類型’表示盒中的實(shí)際數(shù)據(jù)的類型。
[0242]例如，可以利用上述媒體數(shù)據(jù)本身和其他盒的數(shù)據(jù)作為實(shí)際數(shù)據(jù)。
[0243]也就是說，盒可以包括作為實(shí)際數(shù)據(jù)的盒。因此，可以構(gòu)造層級結(jié)構(gòu)。
[0244]圖16是示出了存儲在媒體數(shù)據(jù)中的MP4文件的數(shù)據(jù)結(jié)構(gòu)的示例的圖。
[0245]在圖16中，MP4文件被配置有ftyp盒(文件類型兼容(File TypeCompatibility)盒)、moov 盒(影片(Movie)盒)和 mdat 盒(媒體數(shù)據(jù)(Media Data)盒)。
[0246]ftyp盒包括文件格式的信息，S卩，例如文件為MP4文件的信息、盒的版本、制造MP4文件的制造商的名稱等。
[0247]moov盒包括元數(shù)據(jù)如時間軸或用于管理媒體數(shù)據(jù)的地址。
[0248]mdat盒包括媒體數(shù)據(jù)(AV數(shù)據(jù))。
[0249]圖17是示出了分片段的影片的MP4文件的示例和非分片段的影片的MP4文件的示例的圖。
[0250]分片段的影片的MP4文件被配置成包括moov盒(影片盒)(Movie Box)、moof盒(影片分段盒)(MovieFragmentBox)、mdat 盒(媒體數(shù)據(jù)盒)(MediaDataBox)。
[0251]非分片段的影片的MP4文件被配置成包括moov盒和mdat盒。
[0252]在本文中，在圖17中，moov盒包括trak盒(軌道盒)(TrackBox)，而moof盒包括traf 盒(軌道分段盒)(TrackFragmentBox)。
[0253]在moov盒和moof盒中存儲再現(xiàn)存儲在mdat盒中的視頻、音頻、ST等的媒體數(shù)據(jù)(實(shí)際數(shù)據(jù))所需要的信息(例如，顯示時間等)。
[0254]在trak盒和traf盒中存儲軌道的數(shù)據(jù)(視頻、音頻、ST等的數(shù)據(jù))中的每種的獨(dú)立數(shù)據(jù)序列信息(例如，顯示大小等)等。
[0255]在mdat盒中存儲媒體數(shù)據(jù)(實(shí)際數(shù)據(jù))，如視頻、音頻和ST。
[0256]moof盒和mdat盒的集合被稱作片段。分片段的影片的MP4文件被配置有moov盒以及一個或更多個片段，并且適于流送。
[0257]另一方面，非分片段的影片的MP4文件不具有片段，如上所述，MP4文件包括moov盒和mdat盒。
[0258]圖18是用于描述DECE(數(shù)字娛樂內(nèi)容生態(tài)系統(tǒng))CFF(通用文件格式)的圖。
[0259]DECE CFF是基于MP4文件且由DECE規(guī)定的文件格式，并且利用分片段的影片的MP4文件。
[0260]在分片段的影片的MP4文件中，可以將多種es (基本流)存儲在一個片段的mdat盒中。然而，在DECE CFF中，將一個es存儲在一個片段的mdat盒中。
[0261]另外，在DECE CFF中，在分片段的影片的MP4文件中被復(fù)用的es可以被限制。
[0262]在DECE CFF中，具有例如AVC音頻:MPEG4 (運(yùn)動圖像專家組)-ACC (高級音頻編碼)和杜比AC-3，作為可以在分片段的影片中被復(fù)用的音頻的es ;以及具有例如SMPTE (電影與電視工程師協(xié)會)-TT (定時文本)，作為ST (字幕)的es。
[0263]圖19是示出了 SMPTE-TT的ST的數(shù)據(jù)的示例的圖。
[0264]SMPTE-TT是如下標(biāo)準(zhǔn):將PNG顯示函數(shù)添加到具有由W3C標(biāo)準(zhǔn)化的XML(可擴(kuò)展標(biāo)記語言)的規(guī)范并且規(guī)定向XML提供時間概念的ST的數(shù)據(jù)格式的TTML(定時文本標(biāo)記語言)。
[0265]根據(jù)圖19的SMPTE-TT的數(shù)據(jù)(文檔)，例如，在元素1001中，在從時間“00:00:05:05”到時間“00:00:10:05”的時間間隔中顯示文本“subtitle#lispresented (呈現(xiàn)字幕#1) ”作為ST。
[0266]另外，例如，在元素1002中，在從時間“00:00:10:05”到時間“00:00:15:05”的時間間隔中顯示文本“subtitle#2is presented(呈現(xiàn)字幕#2) ”作為ST。
[0267]在本實(shí)施方式中，雖然利用SMPTE-TT作為ST的數(shù)據(jù)(格式)，但是除了 XML以外，可以利用使用除了 HTML(超文本標(biāo)記語言)以外的標(biāo)記語言的格式或其他任意格式作為ST的數(shù)據(jù)。
[0268]<生成設(shè)備I的第一配置示例>
[0269]圖20是示出了圖1的生成設(shè)備I的第一配置示例的框圖。
[0270]在圖20中，生成設(shè)備I被配置成包括控制器21、編碼處理單元22和文件生成單元23ο
[0271]在圖20的生成設(shè)備I中，原版的HDR數(shù)據(jù)被輸入至編碼處理單元22。
[0272]控制器21被配置成包括CPU (中央處理單元)、R0M(只讀存儲器)、RAM(隨機(jī)存取存儲器)等?？刂破?1通過執(zhí)行預(yù)定的程序來控制生成設(shè)備I的整體操作。
[0273]在控制器21中，執(zhí)行預(yù)定的程序，使得實(shí)現(xiàn)報頭信息生成單元21A。
[0274]報頭信息生成單元21A生成moof盒和moov盒作為報頭信息，并且將該報頭信息提供給文件生成單元23，moof盒包括存儲由編碼處理單元22提供作為tone_mapping_info_id_ref 的 tone_map_id 的 tirf 盒(ToneMappingInformat1nReferenceBox) ,moov 盒包括 vtmi 盒(reference_type 是“vtmi，，的 TrackReferenceTypeBox)。
[0275]可替代地，報頭信息生成單元21A生成tirf盒和moov盒作為報頭信息，并且將報頭信息提供給文件生成單元23，tirf盒存儲由編碼處理單元22提供作為tone_mapping_info_id_ref 的 tone_map_id，moov 盒包括 vtmi 盒。
[0276]下文將描述tirf盒和vtmi盒。
[0277]編碼處理單元22通過對原版的HDR數(shù)據(jù)進(jìn)行編碼來生成視頻流和ST流，并且將視頻流和ST流輸出至文件生成單元23。
[0278]另外，編碼處理單元22將要被應(yīng)用于視頻或ST的TMI (tone_mapping_info)的tone_map_id提供給控制器21 (其報頭信息生成單元21A)。
[0279]文件生成單元23生成存儲由控制器21 (其報頭信息生成單元21A)提供的報頭信息以及由編碼處理單元22提供的視頻流和ST流的MP4文件，并且輸出MP4文件。
[0280]圖21是示出了由圖1的生成設(shè)備I生成的MP4文件的示例的圖。
[0281]圖21的MP4文件是包括片段的分片段的影片的MP4文件，并且moov盒包括視頻的trak盒、音頻的trak盒以及ST的trak盒。
[0282]因此，圖21的MP4文件被配置成包括視頻的軌道、音頻的軌道以及ST的軌道。
[0283]在本文中，存儲在MP4文件中的視頻流是通過例如根據(jù)HEVC方案對視頻進(jìn)行編碼所獲得的流，并且如果視頻流是包括TMI的流，則TMI被包括在視頻的軌道中。
[0284]可以將圖21的MP4文件(下文將描述的圖25的MP4文件相同)應(yīng)用于以下情況:將包括TMI (包括相同的HDR信息(特征信息和轉(zhuǎn)換信息)作為TMI)的視頻流如除了根據(jù)HEVC方案被編碼的視頻流以外的根據(jù)例如AVC方案被編碼的視頻流存儲在MP4文件中。
[0285]圖20的生成設(shè)備I通過參照包括在視頻的軌道中的TMI根據(jù)例如除了視頻的軌道以外的ST的軌道來生成可以有用地應(yīng)用于ST的軌道的MP4文件。
[0286]因此，moov盒的 ST (字幕)的 trak 盒包括 tref 盒(TrackReferenceBox)，tref盒包括vtmi盒。
[0287]tref盒可以包括TrackReferenceTypeBox，然而vtmi盒是最新被定義為一種TrackReferenceTypeBox 的盒。
[0288]現(xiàn)在，如果將包括vtmi盒的ST的軌道視為關(guān)注的目標(biāo)軌道，則將包括要被應(yīng)用于目標(biāo)軌道的TMI (HDR信息)的軌道的track_id (下述表示track_id的track_IDs [])，即，在本文中，視頻的軌道作為指定視頻的軌道的軌道指定信息存儲在vtmi盒中，vtmi盒包括在作為目標(biāo)軌道的ST的軌道中。
[0289]因此，被稱作包括要被應(yīng)用于目標(biāo)軌道的TMI的軌道的參考軌道可以由存儲在vtmi盒中的track_id識別，vtmi盒包括在作為目標(biāo)軌道的ST的軌道中。
[0290]另外，如果將包括TMI的視頻的軌道視為目標(biāo)軌道，則作為目標(biāo)軌道的視頻的軌道變成被稱作包括要被應(yīng)用于視頻的軌道的TMI的軌道。
[0291]以這種方式，在目標(biāo)軌道是包括要被應(yīng)用于目標(biāo)軌道的TMI的參考軌道的情況下，對于目標(biāo)軌道，可以省略將包括存儲參考軌道的track_id的vtmi盒的tref盒存儲在moov盒的目標(biāo)盒的trak盒中。
[0292]在這種情況下，在包括vtmi盒的tref盒不存在于moov盒的目標(biāo)盒的trak盒中的情況下，可以認(rèn)識到目標(biāo)軌道是參考軌道。
[0293]在圖21中，包括vtmi盒的tref盒未存儲在moov盒的視頻的trak盒中，因此，對于視頻的軌道，將視頻的軌道識別為參考軌道。
[0294]在本文中，甚至在目標(biāo)軌道是包括要被應(yīng)用于目標(biāo)軌道的TMI的參考軌道的情況下，包括存儲參考軌道的track_id的vtmi盒的tref盒可以被存儲在moov盒的目標(biāo)盒的trak盒中。
[0295]也就是說，例如，在圖21中，對于視頻的軌道，類似于ST的軌道，包括存儲視頻的軌道的track_id作為參考軌道的vtmi盒的tref盒可以被存儲在moov盒的目標(biāo)盒的trak盒中。
[0296]另外，通過確定預(yù)先變成參考軌道的軌道的track_id，可以省略包括vtmi盒的tref 盒。
[0297]在圖21的MP4文件中，視頻和ST的每個軌道的moof盒包括traf盒，traf盒包括存儲將tone_map_id表示為指定要被應(yīng)用于軌道的TMI的HDR指定信息的tone_mapping_info_id_ref 的 tirf 盒。
[0298]通過參照存儲在目標(biāo)盒的tirf盒中的tone_mapping_info_id_ref，將具有由tone_mapping_info_id_ref表示的tone_map_id的TMI識別為要被應(yīng)用于目標(biāo)軌道的TM10
[0299]另外，分片段的影片的MP4文件包括每個片段的moof盒。具有由存儲在片段的moof 盒中包括的 tirf 盒中的 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 中的有效TMI被應(yīng)用于某些片段的數(shù)據(jù)。
[0300]有效TMI是例如完成其解碼(所需要的)的TMI中的最新的TMI。
[0301]如圖21中所示，在分片段的影片的MP4文件中，將存儲表示要被應(yīng)用于視頻的軌道的 TMI 的 tone_map_id 的 tone_mapping_info_id_ref 的 tirf 盒 B#2 存儲在 traf 盒中，traf盒包括在包括TMI的視頻的軌道的moof盒中。
[0302]另外，對于參照包括在視頻的軌道中的TMI的ST的軌道，將存儲視頻的軌道的track_id作為參考軌道的vtmi盒B#1存儲在moov盒的ST(字幕)的軌道的trak盒的tref盒中。
[0303]另外，對于ST的軌道，將存儲表示要被應(yīng)用于ST的軌道的TMI (TMI包括在作為參考軌道的視頻的軌道中)的tone_map_id的tone_mapping_info_id_ref的tirf盒B#3存儲在traf盒中，traf盒包括在ST的軌道中的moof盒中。
[0304]因此，根據(jù)圖21的MP4文件，例如，如果視頻的軌道被視為目標(biāo)軌道，則由于moov盒的視頻的trak盒不包括包括vtmi盒的tref盒，所以可以認(rèn)識到:為目標(biāo)軌道的視頻的軌道是包括要被應(yīng)用于視頻的軌道的TMI的參考軌道。
[0305]另外，可以認(rèn)識到:包括在參考軌道中的TMI中的具有由存儲在為目標(biāo)軌道的視頻的軌道的moof/tarf/tirf盒B#2 (tirf盒包括在tarf盒中，tarf盒包括在moof盒中)中的tone_mapping_info_id_ref表示的tone_map_id的TMI是要被應(yīng)用于目標(biāo)軌道的TM10
[0306]另外，根據(jù)圖21的MP4文件，例如，如果ST的軌道被視為目標(biāo)軌道，則可以由存儲在moov盒的ST的trak/tref/vtmi盒B#1 (vtmi盒包括在tref盒，tref盒包括在trak盒中)中的track_id認(rèn)識到:視頻的軌道是包括要被應(yīng)用于ST的軌道的TMI的的參考軌道。
[0307]另外，可以認(rèn)識到:包括在參考軌道中的TMI中的具有由存儲在為目標(biāo)軌道的ST的軌道的 moof/tarf/tirf 盒 B#3 中的 tone_mapping_info_id_ref 表不的 tone_map_id 的TMI是要被應(yīng)用于目標(biāo)軌道的TMI。
[0308]圖22是示出了 tref盒的定義的圖。
[0309]如參照圖21 所述，tref 盒可以包括 TrackReferenceTypeBox。
[0310]對于TrackReferenceTypeBox，TrackReferenceTypeBox 的 reference_type 可以任意地被定義成根據(jù)TrackReferenceTypeBox的用途被使用。
[0311]在該實(shí)施方式中，“vtmi”最新被定義為表示TrackReferenceTypeBox要用于存儲包括 TMI 的視頻的軌道的 track_id 的 reference_type，并且 reference_type 變成“vtmi”的TrackReferenceTypeBox用作存儲包括TMI的視頻的軌道的track_id的vtmi盒。
[0312]圖23是示出了作為vtmi盒的TrackReferenceTypeBox的定義的示例的圖。
[0313]vtmi 盒包括(存儲)表示 track_id 的 track_IDs[]。
[0314]track_IDs□是陣列變量并且可以存儲多個track_id。因此，根據(jù)vtmi盒，可以將多個軌道指定為包括要被應(yīng)用于ST的軌道的TMI的軌道。
[0315]圖24是示出了 tirf盒的定義的示例的圖。
[0316]tirf 盒(色調(diào)映射信息參考盒)(ToneMappingInformat1nReferenceBox)是最新被定義為存儲表示要被應(yīng)用于包括tirf盒的軌道的TMI的tone_map_id的tone_mapping_info_id_ref的盒，并且tirf盒被存儲在trak盒(其中存儲stbl盒(樣本表格盒))或traf盒中。
[0317]在圖24中，sample_count等于存儲在stsz盒、stz2盒或trun盒中的sample_count，并且表示樣本的數(shù)量。
[0318]在圖24中，對于每個樣本，可以存儲在tirf盒中的tone_mapping_info_id_ref的數(shù)量僅是 number_of_tone_mapping_info_id_ref ο
[0319]因此，根據(jù)tirf盒，對于一個樣本，可以被指定為要被應(yīng)用于一個樣本的具有由 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 的數(shù)量僅是 number_of_tone_mapping_info_id_ref0
[0320]圖25是示出了由圖20的生成設(shè)備I生成的MP4文件的另一示例的圖。
[0321]圖25的MP4文件是不包括任何片段的非分片段的影片的MP4文件，并且moov盒包括視頻的trak盒、音頻的trak盒以及ST的trak盒。
[0322]因此，圖25的MP4文件被配置成包括視頻的軌道、音頻的軌道以及ST的軌道。
[0323]類似于圖21，在圖25中，視頻的軌道還包括TMI，并且包括在視頻的軌道中的TMI可以應(yīng)用于例如除了視頻的軌道以外的ST的軌道。
[0324]也就是說，在非分片段的影片的MP4文件中，如圖25所示，存儲表示要被應(yīng)用于視頻的軌道的 TMI 的 tone_map_id 的 tone_mapping_info_id_ref 的 tirf 盒 B#ll 被存儲在stbl盒中，stbl盒包括在包括moov盒的TMI的視頻的軌道的trak盒中。
[0325]另外，對于ST的軌道，參考包括在視頻的軌道中的TMI，存儲表示作為參考軌道的視頻的軌道的track」d的track_IDs[](圖23)的vtmi盒B#12被存儲在tref盒中，tref盒包括在moov盒的ST的軌道的trak盒中。
[0326]另外，對于ST的軌道，存儲表示要被應(yīng)用于ST的軌道的TMI (TMI包括在作為參考軌道的視頻的軌道中)的 tone_map_id 的 tone_mapping_info_id_ref 的 tirf 盒 B#13 被存儲在stbl盒中，stbl盒包括在moov盒的ST的軌道的trak盒中。
[0327]因此，根據(jù)圖25的MP4文件，如果視頻的軌道被視為目標(biāo)軌道，則由于moov盒的視頻的trak盒不包括包括vtmi盒的tref盒，則可以認(rèn)識到為要被應(yīng)用于目標(biāo)軌道的TMI的視頻的軌道是包括視頻的軌道的參考軌道。
[0328]另夕卜，由于moov盒的視頻的trak/stbl盒(stbl盒包括在trak盒中)包括tirf盒B#ll，則可以認(rèn)識到包括在參考盒(在本文中，視頻的軌道)中的TMI中的具有由存儲在視頻的trak/stbl/tirf盒B#ll(tirf盒包括在stbl盒中，stbl盒包括在trak盒中)中的tone_mapping_info_id_ref表示的tone_map_id的TMI是要被應(yīng)用于目標(biāo)軌道的TM10
[0329]另外，在圖25中，例如，如果ST的軌道被視為目標(biāo)軌道，則由于存在moov盒的ST的 trak/tref/vtmi 盒 B#12，所以可以由包括在 trak/tref/vtmi 盒 B#12 中的 track_id 認(rèn)識到:視頻的軌道是包括要被應(yīng)用于ST的軌道的TMI的參考軌道。
[0330]另外，由于存在為moov盒的目標(biāo)盒的ST的軌道的tark/stbl/tirf盒B#13，則可以認(rèn)識到:包括在參考軌道中的TMI中的具有由存儲在為目標(biāo)軌道的ST的軌道的tark/stbl/tirf 盒 B#13 中的 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 是要被應(yīng)用于目標(biāo)軌道的TMI。
[0331]另外，在非分片段的影片的MP4文件中，具有由存儲在目標(biāo)軌道的tirf盒中的tone_mapping_info_id_ref表示的tone_map_id的TMI中的有效TMI被應(yīng)用于目標(biāo)軌道。
[0332]如上所述，有效TMI是例如完成其解碼(所需要的)的TMI中的最新的TMI。
[0333]如上所述，在圖20的生成設(shè)備I中，由于生成了存儲包括作為HDR信息的TMI的視頻的軌道以及包括作為執(zhí)行要被應(yīng)用于包括在視頻的軌道中的TMI中的ST的軌道的TMI的HDR指定信息的tone_mapping_info_id_ref的ST的軌道的MP4文件，所以可以將包括在視頻的軌道中的TMI轉(zhuǎn)用于ST，使得不需要單獨(dú)將TMI添加到ST。
[0334]因此，在不單獨(dú)將TMI添加到ST的情況下，可以將包括具有存儲在例如藍(lán)光(注冊商標(biāo))盤中的m2ts格式的TMI以及與視頻一起被再現(xiàn)的ST的視頻轉(zhuǎn)換成MP4文件。
[0335]因此，便于TMI到MP4文件的引入，使得可以增加用戶享受HDR圖像如HDR視頻或HDR ST的機(jī)會。
[0336]<編碼處理單元22的配置示例>
[0337]圖26是示出了圖20的編碼處理單元22的配置示例的框圖。
[0338]編碼處理單元22被配置成包括特征信息生成單元31、編碼器32、轉(zhuǎn)換單元33、轉(zhuǎn)換信息生成單元34、編碼器35以及流生成單元36。
[0339]特征信息生成單元31檢測輸入到編碼處理單元22的原版的HDR數(shù)據(jù)的亮度以生成TMI (tone_mapping_info)作為包括參照圖12所描述的信息的特征信息。特征信息生成單元31將所生成的TMI作為特征信息提供給流生成單元36。
[0340]另外，特征信息生成單元31檢測例如原版的HDR數(shù)據(jù)中的HDR視頻的亮度以生成TMI作為視頻(HDR視頻)的特征信息。另外，例如，對于HDR ST，特征信息生成單元31將作為與原版的HDR數(shù)據(jù)中的HDR ST同時顯示的HDR視頻的特征信息的TMI用作作為ST(HDRST)的特征信息的TMI。
[0341]在處理模式為模式_i的情況下，編碼器32例如根據(jù)HEVC方案對原版的輸入HDR視頻進(jìn)行編碼。另外，在處理模式是模式_ii的情況下，編碼器32根據(jù)HEVC方案對由轉(zhuǎn)換單元33提供的STD視頻進(jìn)行編碼。編碼器32將HDR視頻的編碼數(shù)據(jù)或STD視頻的編碼數(shù)據(jù)提供給流生成單元36。另外，視頻編碼方案不限于HEVC方案。
[0342]轉(zhuǎn)換單元33將輸入到編碼處理單元22的原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)。根據(jù)由創(chuàng)作者輸入的轉(zhuǎn)換參數(shù)適當(dāng)?shù)貓?zhí)行通過轉(zhuǎn)換單元33的轉(zhuǎn)換。轉(zhuǎn)換單元33將表示輸入數(shù)據(jù)與輸出數(shù)據(jù)之間的關(guān)系的信息輸出至轉(zhuǎn)換信息生成單元34，其中，將HDR數(shù)據(jù)的RGB信號設(shè)置成輸入數(shù)據(jù)，而將STD數(shù)據(jù)的RGB信號設(shè)置成輸出數(shù)據(jù)。
[0343]另外，在處理模式是模式_ii的情況下，轉(zhuǎn)換單元33將通過HDR視頻的轉(zhuǎn)換所獲得的STD視頻提供給編碼器32，并且將通過HDR ST的轉(zhuǎn)換所獲得的STD ST提供給編碼器35ο
[0344]轉(zhuǎn)換信息生成單元34基于由轉(zhuǎn)換單元33提供的信息來生成TMI作為轉(zhuǎn)換信息。
[0345]例如，在使用tone_map_model_id = O的情況下，轉(zhuǎn)換信息生成單元34生成包括圖 9 的 min_value 和 max_value 的值的 TMI (tone_mapping_info)作為轉(zhuǎn)換信息。
[0346]另外，在使用tone_map_model_id = 2的情況下，轉(zhuǎn)換信息生成單元34生成包括圖 10 的 start_of_coded_interval [i]的 TMI 作為轉(zhuǎn)換信息。
[0347]另外，在使用tone_map_model_id = 3的情況下，轉(zhuǎn)換信息生成單元34生成包括由圖 11 的 num_pivots 指定的數(shù)量的 coded_pivot_value[i]和 target_pivot_value[i]的TMI作為轉(zhuǎn)換信息。
[0348]另外，例如，轉(zhuǎn)換信息生成單元34對于視頻生成TMI作為轉(zhuǎn)換信息，而對于ST將作為與ST —起同時顯示的值的轉(zhuǎn)換信息的TMI用作作為ST的轉(zhuǎn)換信息的TMI。
[0349]在處理模式是模式-1的情況下，編碼器35將輸入至編碼處理單元22的原版的HDR ST編碼成具有SMPTE-TT格式的ST的數(shù)據(jù)。另外，在處理模式是模式_ii的情況下，編碼器35將由轉(zhuǎn)換單元33提供的STD ST編碼成具有SMPTE-TT格式的ST的數(shù)據(jù)。編碼器35將作為編碼的結(jié)果而獲得的ST的數(shù)據(jù)提供給流生成單元36。
[0350]流生成單元36將由特征信息生成單元31提供作為視頻和ST的特征信息的TMI的tone_map_id提供給控制器21 (圖20)。
[0351]另外，流生成單元36將由轉(zhuǎn)換信息生成單元34提供作為視頻和ST的轉(zhuǎn)換信息的TMI的tone_map_id提供給控制器21。
[0352]另外，流生成單元36將視頻的TMI (也是ST的TMI)作為SEI插入由編碼器32提供的視頻的編碼數(shù)據(jù)中以生成視頻流。
[0353]另外，流生成單元36將由編碼器35提供的ST的數(shù)據(jù)作為ST流連同視頻流提供給圖20的文件生成單元23。
[0354]圖27是示出了通過圖26的轉(zhuǎn)換單元33將HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)的轉(zhuǎn)換處理的示例的圖。
[0355]如由箭頭#201所示，轉(zhuǎn)換單元33將輸入至編碼處理單元22的原版的HDR數(shù)據(jù)的YCrCb信號轉(zhuǎn)換成RGB (紅、綠、藍(lán))信號，并且執(zhí)行將RGB的相應(yīng)信號作為轉(zhuǎn)換對象轉(zhuǎn)換(色調(diào)映射)成STD數(shù)據(jù)的RGB的相應(yīng)信號。
[0356]轉(zhuǎn)換單元33將表示為輸入數(shù)據(jù)的HDR數(shù)據(jù)的RGB信號與為輸出數(shù)據(jù)的STD數(shù)據(jù)的RGB信號之間的關(guān)系的信息輸出至轉(zhuǎn)換信息生成單元34。如由箭頭#202所示，輸出至轉(zhuǎn)換信息生成單元34的信息用于生成轉(zhuǎn)換信息。
[0357]另外，如由箭頭#203所示，轉(zhuǎn)換單元33將STD數(shù)據(jù)的RGB信號轉(zhuǎn)換成YCrCb信號并且輸出YCrCb信號。
[0358]圖28是示出了色調(diào)映射的示例的圖。
[0359]例如，如圖28中所示，通過對高亮度分量進(jìn)行壓縮以擴(kuò)展中間范圍或低范圍亮度分量來將HDR數(shù)據(jù)的RGB信號轉(zhuǎn)換成STD數(shù)據(jù)的RGB信號。轉(zhuǎn)換信息生成單元34生成與將圖28中示出的HDR數(shù)據(jù)的RGB信號與STD數(shù)據(jù)的RGB信號映射的函數(shù)F對應(yīng)的信息作為轉(zhuǎn)換信息。
[0360]另外，與圖28中示出的函數(shù)F對應(yīng)的轉(zhuǎn)換信息對應(yīng)于具有用參照圖11所描述的折線函數(shù)表示 coded_data 與 target_data 之間的關(guān)系的 tone_map_model_id = 3 的 TM10[0361 ] <生成設(shè)備I的第一生成處理>
[0362]圖29是用于描述由圖20的生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0363]如果將原版的HDR數(shù)據(jù)輸入至生成設(shè)備1，則在步驟SI中，生成設(shè)備I的控制器21確定處理模式是否是模式_i。處理模式由例如創(chuàng)作者來設(shè)置。
[0364]在在步驟SI中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S2，編碼處理單元22執(zhí)行模式_i的編碼處理。將通過模式_i的編碼處理所生成的視頻流和ST流從編碼處理單元22提供給文件生成單元23。
[0365]另一方面，在在步驟SI中確定處理模式是模式_ii的情況下，該過程進(jìn)行至步驟S3，編碼處理單元22執(zhí)行模式-1i的編碼處理。將通過模式_ii的編碼處理所生成的視頻流和ST流從編碼處理單元22提供給文件生成單元23。
[0366]在步驟S2或S3之后，該過程進(jìn)行至步驟S4,報頭信息生成單元21A執(zhí)行報頭信息生成處理。將在報頭信息生成處理中所生成的報頭信息從報頭信息生成單元21A提供給文件生成單元23，然后該過程進(jìn)行至步驟S5。
[0367]在步驟S5中，文件生成單元23生成和輸出圖21或圖25的存儲由編碼處理單元22提供的視頻流和ST流以及由報頭信息生成單元21A提供的報頭信息的MP4文件，然后結(jié)束文件生成處理。
[0368]圖30是用于描述在圖29的步驟S2中執(zhí)行的模式-1的編碼處理的示例的流程圖。
[0369]在步驟Sll中，編碼處理單元22 (圖26)的特征信息生成單元31檢測原版的HDR數(shù)據(jù)的亮度以生成TMI作為視頻和ST的特征信息，并且將該TMI提供給流生成單元36，然后該過程進(jìn)行至步驟S12。
[0370]在步驟S12中，編碼器32根據(jù)HEVC方案對原版的HDR視頻進(jìn)行編碼以生成HDR視頻的編碼數(shù)據(jù)，并且將該編碼數(shù)據(jù)提供給流生成單元36，然后該過程進(jìn)行至步驟S13。另夕卜，視頻編碼方案不限于HEVC方案。
[0371]在步驟S13中，編碼器35對原版的HDR ST進(jìn)行編碼以生成具有SMPTE-TT格式的ST的數(shù)據(jù)，并且將ST的數(shù)據(jù)提供至流生成單元36，然后該過程進(jìn)行至步驟S14。
[0372]在步驟S14中，轉(zhuǎn)換單元33將原版的輸入HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)，并且將表示輸入數(shù)據(jù)與輸出數(shù)據(jù)之間的關(guān)系的信息提供給轉(zhuǎn)換信息生成單元34，其中，HDR數(shù)據(jù)的RGB信號是輸入數(shù)據(jù)，STD數(shù)據(jù)的RGB信號是輸出數(shù)據(jù)。
[0373]之后，該過程從步驟S14進(jìn)行至步驟S15，轉(zhuǎn)換信息生成單元34基于從轉(zhuǎn)換單元33提供的信息來生成TMI作為視頻和ST的轉(zhuǎn)換信息，并且將該TMI提供給流生成單元36。該過程進(jìn)行至步驟S16。
[0374]在步驟S16中，流生成單元36將由特征信息生成單元31提供作為特征信息的TMI和由轉(zhuǎn)換信息生成單元34提供作為轉(zhuǎn)換信息的TMI作為編碼數(shù)據(jù)的SEI插入到由編碼器32提供的編碼數(shù)據(jù)中，以生成視頻流。
[0375]接下來，流生成單元36將由編碼器35提供的ST的數(shù)據(jù)連同視頻流一起提供給文件生成單元23 (圖20)。
[0376]另外，流生成單元36將視頻的TMI (要被應(yīng)用于視頻的TMI)的tone_map_id和ST的TMI (要被應(yīng)用于ST的TMI)的tone_map_id提供給控制器21 (圖20)，然后結(jié)束(返回)模式_i的編碼處理。
[0377]圖31是用于描述在圖29的步驟S3中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0378]在步驟S21中，編碼處理單元22的特征信息生成單元31檢測原版的HDR數(shù)據(jù)的亮度以生成TMI作為視頻和ST的特征信息，并且將該TMI提供給流生成單元36。
[0379]之后，在步驟S22中，轉(zhuǎn)換單元33將原版的輸入HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)，并且轉(zhuǎn)換單元33將STD數(shù)據(jù)中的STD視頻提供給編碼器32而將STD ST提供給編碼器35。
[0380]另外，轉(zhuǎn)換單元33將表示輸入數(shù)據(jù)與輸出數(shù)據(jù)之間的關(guān)系的信息提供給轉(zhuǎn)換信息生成單元34，其中，HDR數(shù)據(jù)的RGB信號是輸入數(shù)據(jù)，STD數(shù)據(jù)的RGB信號是輸出數(shù)據(jù)，然后該過程從步驟S22進(jìn)行至步驟S23。
[0381 ] 在步驟S23中，轉(zhuǎn)換信息生成單元34基于由轉(zhuǎn)換單元33提供的信息來生成TMI作為視頻和ST的轉(zhuǎn)換信息，并且將該TMI提供給流生成單元36，然后該過程進(jìn)行至步驟S24。
[0382]在步驟S24中，編碼器32根據(jù)HEVC方案對從轉(zhuǎn)換單元33提供的STD視頻進(jìn)行編碼以生成STD視頻的編碼數(shù)據(jù)，并且將該編碼數(shù)據(jù)提供給流生成單元36。另外，視頻編碼方案不限于HEVC方案。
[0383]之后，在步驟S25中，編碼器25對由轉(zhuǎn)換單元33提供的STD ST進(jìn)行編碼以生成具有SMPTE-TT格式的ST的數(shù)據(jù)，并且將ST的數(shù)據(jù)提供給流生成單元36。
[0384]接下來，在步驟S26中，流生成單元36將由特征信息生成單元31提供作為特征信息的TMI和由轉(zhuǎn)換信息生成單元34提供作為轉(zhuǎn)換信息的TMI作為編碼數(shù)據(jù)的SEI插入到由編碼器32提供的編碼數(shù)據(jù)中，以生成視頻流。
[0385]另外，流生成單元36將由編碼器35提供的ST的數(shù)據(jù)作為ST流連同視頻流一起提供給文件生成單元23 (圖20)。
[0386]另外，流生成單元36將視頻的TMI的tone_map_id和ST的TMI的tone_map_id提供給控制器21 (圖20)，然后結(jié)束(返回)模式-1i的編碼處理。
[0387]圖32是用于描述在圖29的步驟S4中執(zhí)行的報頭信息生成處理的示例的流程圖。
[0388]在步驟S31中，控制器21 (圖20)的報頭信息生成單元21A生成存儲表示由編碼處理單元22 (其流生成單元36 (圖26))提供的視頻的TMI (要被應(yīng)用于視頻的TMI)的tone_map_id 的 tone_mapping_info_id_ref 的 tirf 盒(圖 21、圖 24、圖 25)。
[0389]另外，報頭信息生成單元21A生成存儲表示由編碼處理單元22提供的ST的TMI (要被應(yīng)用于 ST 的 TMI)的 tone_map_id 的 tone_mapping_info_id_ref 的 tirf 盒(圖21、圖 24、圖 25)。
[0390]另外，報頭信息生成單元21A生成存儲表示包括要被應(yīng)用于ST的TMI的視頻流的軌道的track_id的track_IDs[]的vtmi盒(圖21、圖23、圖25)，然后該過程從步驟S31進(jìn)行至步驟S32。
[0391]在步驟S32中，報頭信息生成單元21A產(chǎn)生包括vtmi盒的moov盒以及包括tirf盒的moof盒或產(chǎn)生包括vtmi盒和tirf盒的moov盒，并且將所產(chǎn)生的盒作為報頭信息提供給文件生成單元23 (圖20)，然后結(jié)束報頭信息生成處理。
[0392]也就是說，在文件生成單元23中，在生成分片段的影片的MP4文件的情況下，如圖21中所示，報頭信息生成單元21A生成在ST的軌道的trak/tref盒中包括vtmi盒的moov
合
ΙΤΓΤ.0
[0393]另外，如圖21中所示，報頭信息生成單元21A生成在視頻的軌道的traf盒中包括tirf盒的moof盒以及在ST的軌道的traf盒中包括tirf盒的moof盒。
[0394]另一方面，在文件生成單元23中，在生成非分片段的影片的MP4文件的情況下，如圖25中所示，報頭信息生成單元21A生成如下moov盒:在視頻的軌道的trak盒中包括的stbl盒中包tirf盒，在ST的軌道的trak/tref盒中包括vtmi盒，以及在ST的軌道的trak盒中包括的stbl盒中包括tirf盒。
[0395]<再現(xiàn)設(shè)備2的第一配置示例>
[0396]圖33是示出了圖1的再現(xiàn)設(shè)備2的第一配置示例的框圖。
[0397]在圖33中，再現(xiàn)設(shè)備2被配置成包括文件采集單元51、分解單元52、操縱輸入單元53、控制器54、解碼處理單元55和組合輸出單元56。
[0398]文件采集單元51從記錄介質(zhì)11或傳輸介質(zhì)12(圖1)獲取MP4文件，并且將該MP4文件提供給分解單元52。
[0399]分解單元52從由文件采集單元51提供的MP4文件提取(獲取)moov盒或moof盒作為報頭信息，并且將moov盒或moof盒提供給控制器54。
[0400]另外，分解單元52從由文件采集單元51提供的MP4文件提取(獲取)視頻流或ST流作為存儲在mdat盒中的實(shí)際數(shù)據(jù)，并且將視頻流或ST流提供給解碼處理單元55。
[0401]操縱輸入單元53被配置有接收信號如從諸如按鈕、鍵盤或觸摸板或預(yù)定的遙控器的輸入設(shè)備發(fā)送的紅外信號的接收單元以接收用戶的操縱。接下來，操縱輸入單元53將與用戶的操縱對應(yīng)的操作信號提供給控制器54。
[0402]控制器54被配置成包括CPU、ROM、RAM等。控制器54通過執(zhí)行預(yù)定的程序來控制再現(xiàn)設(shè)備2的整體操作。
[0403]例如，控制器54將存儲在由分解單元52提供的moov盒中包括的vtmi盒中的track_IDs [](圖 21、圖 23、圖 2δ)以及存儲在 tirf 盒中的 tone_mapping_info_id_ref (圖21、圖24、圖25)提供給解碼處理單元55。另外，例如，控制器54將存儲在由分解單元52提供的moof盒中包括的tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元55。
[0404]解碼處理單元55被配置成包括解碼器55A和解碼器55B。
[0405]解碼器55A用作將視頻的軌道識別為參考軌道(被稱作包括要應(yīng)用的TMI的軌道的軌道)的采集單元，并且從由分解單元52提供的視頻的軌道的視頻流的SEI獲取作為特征信息和轉(zhuǎn)換信息的TMI (tone_mapping_info)作為包括在參考軌道中的TMI。
[0406]另外，解碼器55A根據(jù)HEVC方案對包括在由分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼。
[0407]另外，解碼器55A從包括在作為參考軌道的視頻的軌道中的TMI中獲取具有由存儲在視頻的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于視頻的TMI。
[0408]接下來，如果需要，解碼器55A基于要被應(yīng)用于視頻的TMI作為轉(zhuǎn)換信息將作為解碼的結(jié)果而獲得的HDR視頻或STD視頻轉(zhuǎn)換成STD視頻或HDR視頻，并且將STD視頻或HDR視頻輸出至組合輸出單元56。
[0409]在輸出HDR視頻的情況下，解碼器55A將作為特征信息要被應(yīng)用于視頻的TMI連同HDR視頻一起輸出至組合輸出單元56。
[0410]解碼器55B對由分解單元52提供的ST流進(jìn)行解碼。
[0411]另外，解碼器55B用作將具有由存儲在ST的軌道的vtmi盒中且由控制器54提供的的track_IDs []表示的track_id的軌道，即，在該實(shí)施方式中，視頻的軌道識別為參考軌道的采集單元，并且獲取包括在參考軌道中的TMI。
[0412]更具體地，解碼器55B從作為參考軌道的視頻的軌道的視頻流的SEI獲取由分解單元52提供作為特征信息和轉(zhuǎn)換信息的TMI作為包括在參考軌道中的TMI。
[0413]另外，解碼器55B從包括在作為參考軌道的視頻的軌道中的TMI中獲取具有由存儲在ST的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于ST的TMI。
[0414]接下來，如果需要，解碼器55B基于作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI將作為解碼的結(jié)果而獲得的HDR ST或STD ST轉(zhuǎn)換成STD ST或HDR ST，并且將STD ST或HDR ST輸出至組合輸出單元56。
[0415]在解碼器55B輸出HDR ST的情況下，解碼器55B將作為特征信息要被應(yīng)用于ST的TMI連同HDR ST 一起輸出至組合輸出單元56。
[0416]組合輸出單元56通過電纜4 (圖1)執(zhí)行與顯示設(shè)備3的通信。例如，組合輸出單元56獲取關(guān)于包括在顯示設(shè)備3的監(jiān)視器的性能的信息，并且將該信息輸出至控制器54。
[0417]另外，組合輸出單元56將由解碼器55A提供的HDR視頻或STD視頻以及由解碼器55B提供的HDR ST或STD ST，在其組合(如果需要)之后，輸出到顯示設(shè)備3。
[0418]另外，組合輸出單元56將由解碼器55A和解碼器55B提供的TMI作為特征信息輸出到顯示設(shè)備3。
[0419]<再現(xiàn)設(shè)備2的再現(xiàn)處理>
[0420]圖34是用于描述由圖33的再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0421]另外，假定:在再現(xiàn)設(shè)備2中，在開始再現(xiàn)處理之前，控制器54控制組合輸出單元56與顯示設(shè)備3通信以獲取例如EDID (擴(kuò)展顯示識別數(shù)據(jù))作為表示顯示設(shè)備3的性能的信息。
[0422]在步驟S41中，文件采集單元51獲取由生成設(shè)備I生成的MP4文件，并且將該MP4文件提供給分解單元52。
[0423]分解單元52從由文件采集單元51提供的MP4文件讀取moov盒或moof盒作為報頭信息，并且讀取視頻流或ST流作為存儲在mdat盒中的實(shí)際數(shù)據(jù)。
[0424]接下來，分解單元52將moov盒或moof盒作為報頭信息提供給控制器54，并且將視頻流或ST流提供給解碼處理單元55。
[0425]另外，控制器54將存儲在由分解單元52提供的moov盒中包括的vtmi盒中的track_IDs[]以及存儲在tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元
55。另外，控制器54將存儲在由分解單元52提供的moof盒中包括的tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元55。
[0426]之后，該過程從步驟S41進(jìn)行至步驟S42，控制器54確定由文件采集單元51獲取的MP4文件的處理模式是模式_i還是模式_ii，即，由文件采集單元51獲取的MP4文件是通過模式-1的編碼處理所獲得的文件還是通過模式_ii的編碼處理所獲得的文件。
[0427]在本文中，允許表示MP4文件的處理模式的信息作為報頭信息包括在moov盒中，并且可以例如基于該信息執(zhí)行在步驟S42中通過控制器54確定處理模式。
[0428]在在步驟S42中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S43，并且解碼處理單元55執(zhí)行模式-1的解碼處理。
[0429]另一方面，在在步驟S42中確定處理模式是模式_ii的情況下，該過程進(jìn)行至步驟S44，并且解碼處理單元55執(zhí)行模式-1i的解碼處理。
[0430]在在步驟S43或步驟S44中執(zhí)行解碼處理之后，結(jié)束再現(xiàn)處理。
[0431]圖35是用于描述圖34的步驟S43中的模式_i的解碼處理的流程圖。
[0432]在步驟S61中，解碼器55A將視頻的軌道識別為參考軌道，并且從由分解單元52提供的視頻的軌道的視頻流的SEI獲取作為特征信息和轉(zhuǎn)換信息的TMI作為包括在參考軌道中的TMI。
[0433]另外，在步驟S61中，解碼器55B將為具有由存儲在ST的軌道的vtmi盒中且由控制器54提供的track_IDs[]表示的track_id的軌道(由作為軌道指定信息的track_IDs []指定的軌道)的視頻的軌道識別為參考軌道，并且獲取包括在參考軌道中的TMI。
[0434]也就是說，類似于解碼器55A，解碼器55B從由分解單元52提供作為參考軌道的視頻的軌道的視頻流的SEI獲取作為特征信息和轉(zhuǎn)換信息的TMI作為包括在參考軌道中的TM10
[0435]之后，該過程從步驟S61進(jìn)行至步驟S62，解碼器55A根據(jù)HEVC方案對包括在從分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成HDR視頻，并且該過程進(jìn)行至步驟S63?另外，視頻解碼(編碼)方案不限于HEVC方案。
[0436]在步驟S63中，解碼器55B將由分解單元52提供的ST流，即，例如具有SMPTE-TT格式的ST的數(shù)據(jù)的流解碼成HDR ST，然后該過程進(jìn)行至步驟S64。
[0437]在步驟S64中，控制器54確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0438]在本文中，如參照圖34所描述的，控制器54從顯示設(shè)備3獲取EDID作為表示顯示設(shè)備3的性能的信息，并且基于EDID確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0439]在在步驟S64中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S65。
[0440]在步驟S65中，解碼器55A從包括在作為參考軌道的視頻的軌道中的TMI中獲取具有由存儲在視頻的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由作為HDR指定信息的tone_mapping_info_id_ref指定的TMI)作為要被應(yīng)用于視頻的TMI。
[0441]另外，解碼器55B從包括在作為參考軌道的視頻的軌道的TMI中獲取具有由存儲在ST的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由作為HDR指定信息的tone_mapping_info_id_ref指定的TMI)作為要被應(yīng)用于ST的TMI。
[0442]之后，該過程從步驟S65進(jìn)行至步驟S66，解碼器55A將HDR視頻連同作為特征信息要被應(yīng)用于視頻的TMI —起提供給組合輸出單元56。另外，解碼器55B將HDR ST連同作為特征信息要被應(yīng)用于ST的TMI —起提供給組合輸出單元56。
[0443]在組合輸出單元56中，如果需要，將HDR視頻和HDR ST組合以與作為特征信息的TMI 一起提供(發(fā)送)給顯示設(shè)備3 (圖1)。
[0444]另一方面，在步驟S64中確定包括在顯示設(shè)備3中的監(jiān)視器不是HDR監(jiān)視器而是STD監(jiān)視器，該過程進(jìn)行至步驟S67。
[0445]在步驟S67中，解碼器55A從包括在作為參考軌道的視頻的軌道中的TMI中獲取具有由存儲在視頻的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由作為HDR指定信息的tone_mapping_info_id_ref指定的TMI)作為要被應(yīng)用于視頻的TMI。
[0446]另外，解碼器55B從包括在作為參考軌道的視頻的軌道的TMI中獲取具有由存儲在ST的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由作為HDR指定信息的tone_mapping_info_id_ref指定的TMI)作為要被應(yīng)用于ST的TMI。
[0447]之后，該過程從步驟S67進(jìn)行至步驟S68，解碼器55A基于作為轉(zhuǎn)換信息要被應(yīng)用于視頻的TMI將作為解碼的結(jié)果而獲得的HDR視頻轉(zhuǎn)換成STD視頻。
[0448]另外，解碼器55B基于作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI將作為解碼的結(jié)果而獲得的HDR ST視頻轉(zhuǎn)換成STD STo
[0449]接下來，該過程從步驟S68進(jìn)行至步驟S69，解碼器55A將STD視頻提供給組合輸出單元56。另外，解碼器55B將STD ST提供給組合輸出單元56。
[0450]在組合輸出單元56中，如果需要，將STD視頻和STD ST組合以提供(發(fā)送)給顯不設(shè)備3 (圖1)。
[0451]在步驟S66或S69之后，該過程進(jìn)行至步驟S70，控制器54確定是否結(jié)束再現(xiàn)。
[0452]在在步驟S70中確定不結(jié)束再現(xiàn)的情況下，該處理返回至步驟S61，并且重復(fù)執(zhí)行相同的處理。另一方面，在在步驟S70中確定結(jié)束再現(xiàn)的情況下，結(jié)束模式_i的解碼處理。
[0453]圖36是用于描述圖34的步驟S44中的模式_ii的解碼處理的流程圖。
[0454]在步驟S81中，類似于圖35的步驟S61，解碼器55A和55B獲取包括在參考軌道中的 TMI ο
[0455]也就是說，解碼器55A將視頻的軌道識別為參考軌道，并且從由分解單元52提供的視頻的軌道的視頻流的SEI獲取作為特征信息和轉(zhuǎn)換信息的TMI作為包括在參考軌道中的 TMI ο
[0456]解碼器55B將為具有由存儲在ST的軌道的vtmi盒中的track_IDs[]表示的track_id且由控制器54提供的軌道(由作為軌道指定信息的track_IDs[]指定的軌道)的視頻的軌道識別為參考軌道，并且從由分解單元52提供作為參考軌道的視頻的軌道的視頻流的SEI獲取作為特征信息和轉(zhuǎn)換信息的TMI作為包括在參考軌道中的TMI。
[0457]之后，該過程從步驟S81進(jìn)行至步驟S82，解碼器55A根據(jù)HEVC方案對包括在從分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成STD視頻。該過程進(jìn)行至步驟S83。另外，視頻解碼(編碼)方案不限于HEVC方案。
[0458]在步驟S83中，解碼器55B將ST流，即，例如SMPTE-TT格式下的ST的數(shù)據(jù)的流解碼成STD ST，然后該過程進(jìn)行至步驟S84。
[0459]在步驟S84中，例如，類似于圖35的步驟S64，控制器54確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0460]在在步驟S84中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S85。
[0461]在步驟S85中，解碼器55A從包括在作為參考軌道的視頻的軌道中的TMI中獲取具有由存儲在視頻的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由作為HDR指定信息的tone_mapping_info_id_ref指定的TMI)作為要被應(yīng)用于視頻的TMI。
[0462]另外，解碼器55B從包括在作為參考軌道的視頻的軌道的TMI中獲取具有由存儲在ST的軌道的tirf盒中且由控制器54提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由作為HDR指定信息的tone_mapping_info_id_ref指定的TMI)作為要被應(yīng)用于ST的TMI。
[0463]之后，該過程從步驟S85進(jìn)行至步驟S86，解碼器55A基于作為轉(zhuǎn)換信息要被應(yīng)用于視頻的TMI將作為解碼的結(jié)果而獲得的STD視頻轉(zhuǎn)換成HDR視頻。另外，解碼器55B基于將作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI將作為解碼的結(jié)果而獲得的STD ST轉(zhuǎn)換成HDR ST。
[0464]接下來，該過程從步驟S86進(jìn)行至步驟S87，解碼器55A將HDR視頻連同作為特征信息要被應(yīng)用于視頻的TMI —起提供給組合輸出單元56。另外，解碼器55B將HDR ST連同作為特征信息要被應(yīng)用于ST的TMI —起提供給組合輸出單元56。
[0465]在組合輸出單元56中，如果需要，將HDR視頻和HDR ST組合以與作為特征信息的TMI 一起提供給顯示設(shè)備3 (圖1)。
[0466]另一方面，在步驟S84中確定包括在顯示設(shè)備3中的監(jiān)視器是STD監(jiān)視器，該過程進(jìn)行至步驟S88，解碼器55A將通過步驟S82的解碼所獲得的STD視頻提供給組合輸出單元
56。另外，解碼器55B將通過步驟S83的解碼所獲得的STD ST提供給組合輸出單元56。
[0467]在組合輸出單元56中，如果需要，將STD視頻和STD ST組合以提供給顯示設(shè)備3(圖1)。
[0468]在步驟S87或S88之后，該過程進(jìn)行至步驟S89，控制器54確定是否結(jié)束再現(xiàn)。
[0469]在在步驟S89中確定不結(jié)束再現(xiàn)的情況下，該過程返回至步驟S81，并且重復(fù)執(zhí)行相同的處理。另一方面，在在步驟S89中確定結(jié)束再現(xiàn)的情況下，結(jié)束模式-1i的解碼處理。
[0470]<顯示設(shè)備3的配置示例>
[0471]圖37是示出了圖1的顯示設(shè)備3的配置示例的框圖。
[0472]顯示設(shè)備3被配置成包括控制器101、通信單元102、信號處理單元103和監(jiān)視器104?？刂破?01被配置成包括存儲器101A，存儲器1lA存儲例如表示監(jiān)視器104的性能的EDID (擴(kuò)展顯示識別數(shù)據(jù))等。
[0473]控制器101被配置成包括CPU、ROM、RAM等?？刂破?01通過執(zhí)行預(yù)定的軟件來控制顯示設(shè)備3的整體操作。
[0474]例如，在執(zhí)行關(guān)于再現(xiàn)設(shè)備2的認(rèn)證時，控制器101將存儲在存儲器1lA中的EDID輸出至通信單元102，并且使得EDID能夠被發(fā)送至再現(xiàn)設(shè)備2。再現(xiàn)設(shè)備2基于EDID指定顯示設(shè)備3的監(jiān)視器104的性能。
[0475]通信單元102通過電纜4 (圖1)執(zhí)行與再現(xiàn)設(shè)備2的通信。通信單元102接收從再現(xiàn)設(shè)備2發(fā)送的HDR數(shù)據(jù)或STD數(shù)據(jù)，并且將HDR數(shù)據(jù)或STD數(shù)據(jù)輸出至信號處理單元103。另外，通過單元102將由控制器101提供的EDID發(fā)送至再現(xiàn)設(shè)備2。
[0476]信號處理單元103對由通信單元102提供的HDR數(shù)據(jù)或STD數(shù)據(jù)執(zhí)行處理，并且在監(jiān)視器104上顯示圖像。
[0477]<顯示設(shè)備3的顯示處理>
[0478]圖38是用于描述圖37的顯示設(shè)備3的顯示處理的示例的流程圖。
[0479]在本文中，將對包括在顯示設(shè)備3中的監(jiān)視器104是HDR監(jiān)視器的情況進(jìn)行描述。將添加有特征信息的HDR數(shù)據(jù)從再現(xiàn)設(shè)備2發(fā)送至包括HDR監(jiān)視器的顯示設(shè)備3。
[0480]在步驟SlOl中，顯示設(shè)備3的通信單元102接收從再現(xiàn)設(shè)備2發(fā)送的HDR數(shù)據(jù)和特征信息，然后該過程進(jìn)行至步驟S102。
[0481]在步驟S102中，控制器101參照特征信息來確定是否可以不經(jīng)變化地顯示從再現(xiàn)設(shè)備2發(fā)送的HDR數(shù)據(jù)。特征信息包括原版的HDR數(shù)據(jù)，即，作為表示從再現(xiàn)設(shè)備2發(fā)送的HDR數(shù)據(jù)的亮度的特征的特征信息的TMI。通過將由作為特征信息的TMI指定的HDR數(shù)據(jù)的亮度的特征與監(jiān)視器104的顯示性能進(jìn)行比較來執(zhí)行步驟S102的確定。
[0482]例如，在由作為特征信息的TMI指定的HDR數(shù)據(jù)的動態(tài)范圍為0%至400%而監(jiān)視器104的動態(tài)范圍為0%至500% (例如，500cd/m2，如果100%的亮度為100cd/m2的話)的情況下，確定可以不經(jīng)變化地顯示HDR數(shù)據(jù)。另一方面，在由作為特征信息的TMI指定的HDR數(shù)據(jù)的動態(tài)范圍為O %至400 %而監(jiān)視器104的動態(tài)范圍為O %至300 %的情況下，確定不能夠不經(jīng)變化地顯示HDR數(shù)據(jù)。
[0483]在在步驟S102中確定可以不經(jīng)變化地顯示HDR數(shù)據(jù)的情況下，該過程進(jìn)行至步驟S103，信號處理單元103根據(jù)由作為特征信息的TMI指定的亮度在監(jiān)視器104上顯示與HDR數(shù)據(jù)對應(yīng)的HDR圖像。例如，在由圖12的曲線L12表示的亮度的特征由作為特征信息的TMI指定的情況下，每個亮度值表示由曲線L12表示的0%至400%的范圍內(nèi)的亮度。
[0484]另一方面，在在步驟S102中確定不允許不經(jīng)變化地顯示HDR數(shù)據(jù)的情況下，該過程進(jìn)行至步驟S104，信息處理單元103根據(jù)監(jiān)視器104的顯示性能來調(diào)整HDR數(shù)據(jù)的亮度，并且顯示與調(diào)整其亮度的HDR數(shù)據(jù)對應(yīng)的HDR圖像。例如，在由圖12的曲線L12表示的亮度的特征由特征信息指定并且監(jiān)視器104的范圍為0%至300%的情況下，執(zhí)行壓縮，使得每個亮度值表示0%至300%的范圍內(nèi)的亮度。
[0485]另外，在步驟S103中，在在步驟S104中顯示與HDR數(shù)據(jù)對應(yīng)的HDR圖像之后，該過程進(jìn)行至步驟S105，控制器101確定是否結(jié)束顯示。在確定不結(jié)束顯示的情況下，重復(fù)步驟SlOl之后的處理。在在步驟S105中確定結(jié)束顯示的情況下，顯示處理結(jié)束。
[0486]由于上述一系列處理，所以生成設(shè)備I以HDR數(shù)據(jù)的狀態(tài)將原版的HDR數(shù)據(jù)存儲在MP4文件中，使得HDR數(shù)據(jù)能夠在再現(xiàn)設(shè)備2中被再現(xiàn)，并且使得能夠在顯示設(shè)備3上顯示與HDR數(shù)據(jù)對應(yīng)的HDR圖像。
[0487]另外，生成設(shè)備I將原版的HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)以將STD數(shù)據(jù)存儲在MP4文件中，使得能夠在再現(xiàn)設(shè)備2中將STD數(shù)據(jù)恢復(fù)成HDR數(shù)據(jù)，并且使得能夠在顯示設(shè)備3上顯示與HDR數(shù)據(jù)對應(yīng)的HDR圖像。
[0488]在HDR數(shù)據(jù)的再現(xiàn)期間，允許原版的HDR數(shù)據(jù)的亮度的特征由作為特征信息的TMI指定，使得內(nèi)容的創(chuàng)作者可以用意在的亮度顯示與HDR數(shù)據(jù)對應(yīng)的HDR圖像。
[0489]另外，生成設(shè)備I將包括TMI的視頻(其流)的軌道和ST(其流)的軌道作為HDR信息(特征信息和轉(zhuǎn)換信息)存儲在MP4文件中。
[0490]因此，ST的軌道可以包括vtmi盒和tirf盒，vtmi盒存儲track_IDs []作為指定包括要被應(yīng)用于ST的軌道的TMI的視頻的軌道的軌道指定信息，tirf盒存儲tone_mapping_info_id_ref作為指定要被應(yīng)用于ST的軌道的TMI的HDR指定信息。
[0491]因此，再現(xiàn)設(shè)備2從由存儲在ST的軌道中包括的vtmi盒中的track_IDs[]表示的包括在視頻的軌道中的TMI (具有track_id)中獲取由存儲在ST的軌道中包括的tirf盒中的tone_mapping_info_id_ref指定的TMI (具有tone_map_id)作為要被應(yīng)用于ST的TMI，并且可以將該TMI用于ST的處理。
[0492]因此，在圖20的第一配置示例的生成設(shè)備I中生成的MP4文件(在下文中，有時被稱作第一 MP4文件)中，由于可以將包括在視頻的軌道中的TMI轉(zhuǎn)用于ST，所以不需要單獨(dú)地將TMI添加到ST。
[0493]另外，在上述情況下，在第一 MP4文件的生成期間，對于ST，由于將與ST同時顯示的視頻的TMI用作ST的TMI，所以ST的TMI依賴于視頻的TMI。
[0494]然而，對于視頻和ST，獨(dú)立地生成TMI，除了視頻的TMI以外，ST的TMI包括在視頻的流中，使得可以防止ST的TMI依賴于視頻的TMI。
[0495]<生成設(shè)備I的第二配置示例>
[0496]圖39是示出了圖1的生成設(shè)備I的第二配置示例的框圖。
[0497]另外，在圖中與圖20的情況相對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0498]在圖39中，生成設(shè)備I被配置成包括控制器21、文件生成單元23和編碼處理單元122。
[0499]因此，圖39的生成設(shè)備I與圖20的情況的生成設(shè)備I相同之處在于:生成設(shè)備I被配置成包括控制器21和文件生成單元23，而生成設(shè)備I與圖20的情況的生成設(shè)備I不同之處在于:安裝編碼處理單元122代替編碼處理單元22。
[0500]另外，圖39的生成設(shè)備I與圖20的情況的生成設(shè)備I不同之處在于:控制器21被配置成包括報頭信息生成單元121A代替報頭信息生成單元21A。
[0501]在圖39的生成設(shè)備I中，原版的HDR數(shù)據(jù)被輸入至編碼處理單元22。
[0502]類似于圖20的報頭信息生成單元21A，報頭信息生成單元121A生成存儲由編碼處理單元 122 提供的 tone_map_id 作為 tone_mapping_info_id_ref 的 tirf 盒(圖 24)。
[0503]另外，報頭信息生成單元121A生成存儲由編碼處理單元122提供的TMI(tone_mapping_info)作為 ToneMapInfo (類對象)的 tinf 盒(ToneMappingInformat1nBox)。
[0504]接下來，報頭信息生成單元121A生成包括tirf盒和tinf盒的moof盒或moov盒作為報頭信息，并且將該報頭信息提供給文件生成單元23。
[0505]下文將描述tinf盒。
[0506]類似于圖20的編碼處理單元22，編碼處理單元122通過對原版的HDR數(shù)據(jù)執(zhí)行編碼來生成視頻流和ST流，并且將視頻流和ST流提供給文件生成單元23。
[0507]另外，類似于圖20的編碼處理單元22，編碼處理單元122將要被應(yīng)用于視頻或ST的TMI (tone_mapping_info)的tone_map_id提供給控制器21 (其報頭信息生成單元121A)。
[0508]另外，編碼處理單元122將要被應(yīng)用于視頻和ST的TMI提供給控制器21 (其報頭信息生成單元121A)。
[0509]圖40是示出了由圖39的生成設(shè)備I生成的MP4文件(在下文中，有時被稱作第二 MP4文件)的示例的圖。
[0510]圖40的第二 MP4文件是具有片段的分片段的影片的MP4文件，并且moov盒包括視頻、音頻和ST的trak盒。
[0511]因此，圖40的第二 MP4文件包括視頻的軌道、音頻的軌道和ST的軌道。
[0512]在本文中，在第一 MP4文件(圖21、圖25)中，由于TMI包括在視頻的軌道中而不包括在ST的軌道中，所以將包括在視頻的軌道中的TMI轉(zhuǎn)用于ST。然而，在第二 MP文件中，要被應(yīng)用于媒體的TMI被包括在每種媒體如視頻或ST的軌道中。
[0513]也就是說，圖39的生成設(shè)備I生成將要被應(yīng)用于媒體的TMI包括在媒體的軌道中的MP4文件作為每種媒體的第二 MP4文件。
[0514]因此，在圖40中，每種媒體的moof/traf盒包括tirf盒和tinf盒(ToneMappingInformat1nBox)(色調(diào)映射信息盒)。
[0515]如參照圖21所描述的，tirf盒是最新被定義成指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的 TMI 并且存儲表示 tone_map_id 的 tone_mapping_info_id_ref 的盒。
[0516]tinf盒是最近被定義成存儲TMI (tone_mapping_info)的盒。
[0517]在分片段的影片的MP4文件中，如圖40中所示，在視頻的軌道的moof/traf盒中存儲tinf盒B#22和tirf盒B#21，tinf盒B#22存儲要被應(yīng)用于影片(其軌道)的TMI，tirf盒B#21存儲表示存儲在tinf盒B#22中的TMI中的要被應(yīng)用于視頻的TMI的tone_map_id 的 tone_mapping_info_id_ref0
[0518]類似地，在ST的軌道的moof/traf盒中存儲tinf盒B#2和tirf盒B#23，tinf?盒B#2存儲要被應(yīng)用于ST (其軌道)的TMI，tirf盒B#23存儲表示存儲在tinf盒B#24中的TMI 中的要被應(yīng)用于 ST 的 TMI 的 tone_map_id 的 tone_mapping_info_id_ref。
[0519]因此，根據(jù)圖40的第二 MP4文件，例如，如果視頻的軌道被視為目標(biāo)軌道，則可以認(rèn)識到存儲在目標(biāo)軌道的moof/traf/tinf盒B#22中的TMI中的具有由存儲在目標(biāo)軌道的moof/tarf/tirf 盒 B#21 中的 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 是要被應(yīng)用于目標(biāo)軌道的TMI。
[0520]另外，根據(jù)圖40的MP4文件，例如，如果ST的軌道被視為目標(biāo)軌道，則還可以認(rèn)識到存儲在目標(biāo)軌道的moof/traf/tinf盒B#24中的TMI中的由存儲在目標(biāo)軌道的moof/tarf/tirf 盒 B#23 中的 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 是要被應(yīng)用于目標(biāo)軌道的TMI。
[0521]另外，盡管分片段的影片的MP4文件包括每個片段的moof盒，但是具有由存儲在片段的 moof/traf/tirf 盒中的 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 中的有效TMI被應(yīng)用于一些片段的數(shù)據(jù)。
[0522]圖41是示出了 tinf盒的定義的示例的圖。
[0523]tinf盒(ToneMappingInformat1nBox)(色調(diào)映射信息盒)是最新被定義為存儲要被應(yīng)用于包括tinf盒作為ToneMapInfo (類對象tonemap)的軌道的TMI的盒，并且tinf盒被存儲在trak盒(其中存儲stbl盒)或traf盒中。
[0524]圖42是示出了 ToneMapInfo的語法的第一示例的圖。
[0525]除了插入用于字節(jié)對準(zhǔn)的padding_value以外，圖42的ToneMapInfo具有與圖7的 TMI (tone_mapping_info)相同的配置。
[0526]圖43是示出了 ToneMapInfo的語法的第二示例的圖。
[0527]除了最新定義的component_idc以外，圖43的ToneMapInfo具有與圖42的情況相同的配置。
[0528]在component_idc為例如O的情況下，由圖43的ToneMapInfo表示的TMI通常被應(yīng)用于例如作為構(gòu)成圖像的多個分量的所有分量R、G、B。
[0529]另外，在component_idc為例如I的情況下，由圖43的ToneMapInfo表示的TMI通常被應(yīng)用于例如為構(gòu)成圖像的分量R、G、B之一的僅R。
[0530]另外，在component_idc為例如2的情況下，由圖43的ToneMapInfo表示的TMI通常被應(yīng)用于例如為構(gòu)成圖像的分量R、G、B之一的僅G。另外，在component_idc為例如3的情況下，由圖43的ToneMapInfo表示的TMI通常被應(yīng)用于例如為構(gòu)成圖像的分量R、G、B之一的僅B。
[0531]根據(jù)圖43的ToneMapInfo，要被應(yīng)用的TMI可以以分量為單位來變化。
[0532]圖44是示出了 ToneMapInfo的語法的第三示例的圖。
[0533]除了最新定義num_of_components之外，圖44的ToneMapInfo具有與圖42的情況相同的配置。
[0534]在num_of_components為例如O的情況下，由圖44的ToneMapInfo表不的TMI通常被應(yīng)用于例如作為構(gòu)成圖像的多個分量的所有分量R、G、B。
[0535]另外，在num_of_components為例如3的情況下，在圖43的ToneMapInfo中例如按該順序?qū)Ρ粦?yīng)用于構(gòu)成圖像的分量R、G、B的R的TM1、G的TMI以及B的TMI進(jìn)行描述。
[0536]根據(jù)圖43或圖44的ToneMapInfo，對于構(gòu)成圖像的每個分量，可以獨(dú)立地描述要被應(yīng)用于分量的TMI。
[0537]圖45是示出了由圖39的生成設(shè)備I生成的第二 MP4文件的另一示例的圖。
[0538]圖45的第二MP4文件是不包括任何片段的非分片段的影片的MP4文件，并且moov盒包括視頻的trak盒、音頻的trak盒以及ST的trak盒。
[0539]因此，圖45的第二 MP4文件被配置成包括視頻的軌道、音頻的軌道以及ST的軌道。
[0540]類似于圖40的情況，在圖45的第二 MP4文件中，在相應(yīng)的媒體如視頻或ST的軌道中包括要被應(yīng)用于媒體的TMI。
[0541]即，在非分片段的影片的MP4文件中，如圖45中所示，對于視頻的軌道，在moov盒的視頻的軌道的trak/stbl盒中存儲tinf盒B#32和tirf盒B#31，tinf盒B#32存儲要被應(yīng)用于視頻(其軌道)的TMI，tirf盒B#31存儲表示要被應(yīng)用于視頻的TMI的tone_map_id 的 tone_mapping_info_id_ref0
[0542]類似地，對于ST的軌道，在moov盒的ST的軌道的trak/stbl盒中存儲tinf盒B#34和tinf盒B#33，tinf盒B#34存儲要被應(yīng)用于ST (其軌道)的TMI，tinf盒B#33存儲表示要被應(yīng)用于 ST 的 TMI 的 tone_map_id 的 tone_mapping_info_id_ref。
[0543]因此，根據(jù)圖45的第二 MP4文件，例如，如果視頻的軌道被視為目標(biāo)軌道，則可以認(rèn)識到存儲在包括在moov盒的目標(biāo)軌道(在本文中，視頻的軌道)的trak盒中包括的stbI盒中的tinf盒B#32中的TMI中的具有由存儲在stbl盒中包括的tirf盒B#31中的tone_mapping_info_id_ref表示的tone_map_id的TMI是要被應(yīng)用于目標(biāo)軌道的TMI。
[0544]另外，例如，如果ST的軌道被視為目標(biāo)軌道，類似于視頻的情況，可以認(rèn)識到存儲在包括在moov盒的目標(biāo)軌道(在本文中，ST的軌道)的trak盒中的stbl盒中包括的tinf盒B#34中的TMI中的具有由存儲在stbl盒中包括的tirf盒B#33中的tone_mapping_info_id_ref表示的tone_map_id的TMI是要被應(yīng)用于目標(biāo)軌道的TMI。
[0545]另外，在非分片段的影片中，存儲在目標(biāo)軌道的tinf盒中的TMI中的有效TMI被應(yīng)用于目標(biāo)軌道。
[0546]如上所述，在圖39的生成設(shè)備I中，由于生成存儲包括作為HDR信息的TMI (存儲TMI的tinf盒)以及作為指定TMI中的被應(yīng)用于關(guān)注的目標(biāo)軌道的TMI的HDR指定信息的 tone_mapping_in fo_id_ref (存儲 tone_mapping_info_id_ref 的 tirf 盒)的目標(biāo)軌道的第二 MP4文件，所以可以將要被應(yīng)用于每種媒體的TMI獨(dú)立地添加到每種媒體如視頻或ST。
[0547]另外，在對視頻進(jìn)行編碼的情況下，例如，根據(jù)HEVC方案，盡管生成將視頻的TMI插入到SEI中的視頻流，在第二 MP4文件中，可以將要被應(yīng)用于媒體的TMI獨(dú)立于要被插入到SEI中的TMI添加到除了視頻以外的媒體。
[0548]因此，在不將要被應(yīng)用于ST的TMI獨(dú)立添加到ST的情況下，將包括記錄在例如藍(lán)光(注冊商標(biāo))盤中的具有m2ts格式的TMI的視頻以及與TMI —起再現(xiàn)的ST轉(zhuǎn)換成MP4文件。
[0549]因此，便于TMI到MP4文件的引入，使得可以增加用戶享受HDR圖像如HDR視頻或HDR ST的機(jī)會。
[0550]另外，在對視頻進(jìn)行編碼的情況下，例如，根據(jù)HEVC方案，由于生成將視頻的TMI插入到SEI中的視頻流，在第二 MP4文件中，被插入到SEI中的TMI以及存儲在視頻的軌道中包括的tinf盒中的TMI作為視頻的TMI而存在。
[0551]在這種情況下，在再現(xiàn)設(shè)備2(圖1)中，可以例如預(yù)先確定或根據(jù)用戶的操縱來選擇被插入到SEI中的TMI和被存儲在視頻的軌道中包括的tinf盒中的TMI之一用作要被應(yīng)用于視頻的TMI。
[0552]在該實(shí)施方式中，假定:對于第二 MP4文件，例如，被插入到SEI中的TMI以及被存儲在視頻的軌道中包括的tinf盒中的TMI中的存儲在tinf盒中的TMI用作要被應(yīng)用于視頻的TMI。
[0553]在本文中，根據(jù)具有SMPTE-TT格式的ST的數(shù)據(jù)，盡管ST的多個顯示屏可以包括在為對MP4文件進(jìn)行訪問的單元的一個樣本中，但是在第二 MP4文件中，在ST的多個顯示屏包括在一個樣本中的情況下，要被應(yīng)用于包括在一個樣本中的ST的多個顯示屏中的每個的TMI是同一 TMI，從而難以改變每個顯示屏的要被應(yīng)用的TMI。
[0554]<編碼處理單元122的配置示例>
[0555]圖46是圖39的編碼處理單元122的配置示例。
[0556]另外，在圖中與圖26的編碼處理單元22對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0557]編碼處理單元122被配置成包括編碼器32、轉(zhuǎn)換單元33、轉(zhuǎn)換信息生成單元34、編碼器35、特征信息生成單元131、轉(zhuǎn)換信息生成單元132和流生成單元133。
[0558]因此，圖46的編碼處理單元122與圖26的編碼處理單元22相同之處在于:編碼處理單元122被配置成包括編碼器32、轉(zhuǎn)換單元33和編碼器35。
[0559]然而，圖46的編碼處理單元122與圖26的編碼處理單元22不同之處在于:安裝特征信息生成單元131、轉(zhuǎn)換信息生成單元132和流生成單元133代替特征信息生成單元31、轉(zhuǎn)換信息生成單元34和流生成單元36。
[0560]類似于圖26的特征信息生成單元31，特征信息生成單元131檢測被輸入到編碼處理單元122的原版的HDR數(shù)據(jù)的亮度以生成TMI作為特征信息并且將該TMI提供給流生成單元133。
[0561 ] 然而，特征信息生成單元131對于原版的HDR數(shù)據(jù)中的HDR視頻和HDR ST獨(dú)立地生成TMI作為特征信息。
[0562]另外，類似于圖26的特征信息生成單元31，在特征信息生成單元131中，對于HDR視頻，可以生成作為HDR視頻的特征信息的TMI ;而對于HDR ST，可以將作為與HDR ST同時顯示的HDR視頻的特征信息的TMI用作作為ST (HDR ST)的特征信息的TMI。
[0563]類似于圖26的轉(zhuǎn)換信息生成單元34，轉(zhuǎn)換信息生成單元132基于由轉(zhuǎn)換單元33提供的信息來生成TMI作為轉(zhuǎn)換信息。
[0564]然而，轉(zhuǎn)換信息生成單元132對于原版的HDR數(shù)據(jù)中的HDR視頻和HDR ST生成TMI作為轉(zhuǎn)換信息，并且將TMI提供給流生成單元133。
[0565]另外，類似于圖26的轉(zhuǎn)換信息生成單元34，對于HDR視頻，轉(zhuǎn)換信息生成單元132可以生成TMI作為HDR視頻的轉(zhuǎn)換信息，并且對于HDR ST,轉(zhuǎn)換信息生成單元132可以將作為與HDR ST —起同時顯示的HDR視頻的轉(zhuǎn)換信息的TMI用作作為ST (HDR ST)的轉(zhuǎn)換信息的 TMI ο
[0566]流生成單元133將由特征信息生成單元131提供作為視頻和ST的特征信息的TMI的tone_map_id以及由轉(zhuǎn)換信息生成單元132提供作為視頻和ST的轉(zhuǎn)換信息的TMI的tone_map_id提供給控制器21 (圖39)。
[0567]此外，流生成單元133執(zhí)行與圖26的流生成單元36的處理相同的處理。
[0568]也就是說，流生成單元133將由特征信息生成單元131提供作為視頻和ST的特征信息的TMI的tone_map_id和由轉(zhuǎn)換信息生成單元132提供作為視頻和ST的轉(zhuǎn)換信息的TMI的tone_map_id提供給控制器21。
[0569]另外，流生成單元133將視頻的TMI作為SEI插入到由編碼器32提供的視頻的編碼數(shù)據(jù)中以生成視頻流。
[0570]另外，流生成單元133將由編碼器35提供的ST的數(shù)據(jù)作為ST流連同視頻流一起提供給圖39的文件生成單元23。
[0571]另外，在流生成單元133中，不將視頻的TMI插入到由編碼器32提供的視頻的編碼數(shù)據(jù)中，但是可以將編碼數(shù)據(jù)不經(jīng)變化地用作視頻流。
[0572]<生成設(shè)備I的文件生成處理>
[0573]圖47是用于描述由圖39的生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0574]如果將原版的HDR數(shù)據(jù)輸入至生成設(shè)備I，類似于圖29的步驟SI，在步驟SI 11中，生成設(shè)備I的控制器21確定處理模式是否是模式_i。
[0575]在在步驟Slll中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S112，編碼處理單元122執(zhí)行模式-1的編碼處理。將通過模式_i的編碼處理所生成的視頻流和ST流從編碼處理單元122提供至文件生成單元23。
[0576]另一方面，在在步驟Slll中確定模式處理是模式_ii的情況下，該過程進(jìn)行至步驟S113，編碼處理單元122執(zhí)行模式-1i的編碼處理。將通過模式_ii的編碼處理所生成的視頻流和ST流從編碼處理單元122提供至文件生成單元23。
[0577]在步驟S112或S113之后，該過程進(jìn)行至步驟S114，報頭信息生成單元121A執(zhí)行報頭信息生成處理。將在報頭信息生成處理中所生成的報頭信息從報頭信息生成單元121A提供至文件生成單元23，然后該過程進(jìn)行至步驟S115。
[0578]在步驟SI 15中，文件生成單元23生成和輸出圖40或圖45的存儲由編碼處理單元122提供的視頻流和ST流以及由報頭信息生成單元121A提供的報頭信息的第二 MP4文件，然后結(jié)束文件生成處理。
[0579]圖48是用于描述在圖47的步驟S112中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0580]在步驟S121中，編碼處理單元122 (圖46)的特征信息生成單元131檢測原版的HDR數(shù)據(jù)的亮度以生成TMI作為視頻和ST的特征信息，并且將該TMI提供給流生成單元133，然后該過程進(jìn)行至步驟S122。
[0581 ] 在步驟S122中，編碼器32根據(jù)HEVC方案對原版的HDR進(jìn)行編碼以生成HDR視頻的編碼數(shù)據(jù)，并且將該編碼數(shù)據(jù)提供給流生成單元133，然后該過程進(jìn)行至步驟S123。另夕卜，視頻編碼方案不限于HEVC方案。
[0582]在步驟S123中，編碼器35對原版的HDR ST進(jìn)行編碼以生成具有SMPTE-TT格式的ST的數(shù)據(jù)，并且將ST的數(shù)據(jù)提供給流生成單元133，然后該過程進(jìn)行至步驟S124。
[0583]在步驟S124中，轉(zhuǎn)換單元33將原版的輸入HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)，并且將表示HDR數(shù)據(jù)與STD數(shù)據(jù)之間的關(guān)系的信息(表示輸入數(shù)據(jù)與輸出數(shù)據(jù)之間的關(guān)系的信息，其中，將HDR數(shù)據(jù)的RGB信號設(shè)置成輸入數(shù)據(jù)，而將STD數(shù)據(jù)的RGB信號設(shè)置成輸出數(shù)據(jù))提供給轉(zhuǎn)換信息生成單元132。
[0584]之后，該過程從步驟S124進(jìn)行至步驟S125，轉(zhuǎn)換信息生成單元132基于由轉(zhuǎn)換單元33提供的信息來生成TMI作為視頻和ST的轉(zhuǎn)換信息，并且將該TMI提供給流生成單元133，然后該過程進(jìn)行至步驟S126。
[0585]在步驟S126中，流生成單元133將由特征信息生成單元131提供作為特征信息的TMI以及由轉(zhuǎn)換信息生成單元132提供作為轉(zhuǎn)換信息的TMI作為編碼數(shù)據(jù)的SEI插入到由編碼器32提供的編碼數(shù)據(jù)中以生成視頻流。
[0586]接下來，流生成單元133將由編碼器35提供的ST的數(shù)據(jù)作為ST流連同視頻流一起提供給文件生成單元23 (圖39)。
[0587]另外，流生成單元133將視頻的TMI (要被應(yīng)用于視頻的TMI)以和該TMI的tone_map_id以及ST的TMI (要被應(yīng)用于ST的TMI)和該TMI的tone_map_id提供給控制器21 (圖39)，然后結(jié)束模式-1的編碼處理。
[0588]圖49是用于描述在圖47的步驟S113中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0589]在步驟S131中，編碼處理單元122的特征信息生成單元131檢測原版的HDR數(shù)據(jù)的亮度以生成TMI作為視頻和ST的特征信息，并且將該TMI提供給流生成單元133。
[0590]之后，在步驟S132中，轉(zhuǎn)換單元33將原版的輸入HDR數(shù)據(jù)轉(zhuǎn)換成STD數(shù)據(jù)，并且轉(zhuǎn)換單元33將STD數(shù)據(jù)中的STD視頻提供給編碼器32而將STD ST提供給編碼器35。
[0591]另外，轉(zhuǎn)換單元33將表示HDR數(shù)據(jù)與STD數(shù)據(jù)之間的關(guān)系的信息提供給轉(zhuǎn)換信息生成單元132，從而該過程從步驟S132進(jìn)行至步驟S133。
[0592]在步驟SI 13中，轉(zhuǎn)換信息生成單元132基于由轉(zhuǎn)換單元33提供的信息生成TMI作為視頻和ST的轉(zhuǎn)換信息，并且將該TMI提供給流生成單元133，從而該過程進(jìn)行至步驟S134。
[0593]在步驟S134中，編碼器32根據(jù)HEVC方案對由轉(zhuǎn)換單元33提供的STD視頻進(jìn)行編碼以生成STD視頻的編碼數(shù)據(jù)，并且將該編碼數(shù)據(jù)提供給流生成單元133。另外，視頻編碼方案不限于HEVC方案。
[0594]之后，在步驟S135中，編碼器35對由轉(zhuǎn)換單元33提供的STD ST進(jìn)行編碼以生成具有SMPTE-TT格式的ST的數(shù)據(jù)，并且將ST的數(shù)據(jù)提供給流生成單元133。
[0595]接下來，在步驟S136中，流生成單元133將由特征信息生成單元131提供作為特征信息的TMI以及由轉(zhuǎn)換信息生成單元132提供作為轉(zhuǎn)換信息的TMI作為編碼數(shù)據(jù)的SEI插入到由編碼器32提供的編碼數(shù)據(jù)中以生成視頻流。
[0596]另外，流生成單元133將由編碼器35提供的ST的數(shù)據(jù)作為ST流連同視頻流一起提供給文件生成單元23 (圖39)。
[0597]另外，流生成單元133將視頻的TMI (要被應(yīng)用于視頻的TMI)和該TMI的tone_map_id以及ST的TMI (要被應(yīng)用于ST的TMI)和該TMI的tone_map_id提供給控制器21 (圖39)，然后結(jié)束模式-1i的編碼處理。
[0598]圖50是用于描述在圖47的步驟S114中執(zhí)行的報頭信息生成處理的示例的流程圖。
[0599]在步驟S141中，控制器21 (圖39)的報頭信息生成單元121A生成存儲由編碼處理單元122 (其流生成單元133 (圖46))提供的視頻的TMI (要被應(yīng)用于視頻的TMI)的tinf盒(圖40、圖41、圖45)。
[0600]另外，報頭信息生成單元121A生成存儲由編碼處理單元122(其流生成單元133 (圖46))提供的ST的TMI (要被應(yīng)用于ST的TMI)的tinf盒(圖40、圖41、圖45)。
[0601]另外，報頭信息生成單元121A生成存儲表示由編碼處理單元122提供的視頻的TMI 的 tone_map_id 的 tone_mapping_info_id_ref 的 tirf 盒(圖 24、圖 10、圖 45)。
[0602]另外，報頭信息生成單元121A生成存儲表示由編碼處理單元122提供的ST的TMI的tone_map_id的tone_mapping_info_id_ref的tirf盒，然后該過程從步驟S141進(jìn)行至步驟S142。
[0603]在步驟S142中，報頭信息生成單元121A產(chǎn)生包括tinf盒和tirf盒的moov盒或moof盒，并且將所產(chǎn)生的盒作為報頭信息提供給文件生成單元23 (圖39)，然后結(jié)束報頭信息生成處理。
[0604]也就是說，在文件生成單元23中，在生成分片段的影片的MP4文件的情況下，如圖40所示，報頭信息生成單元121A生成其中tirf盒和tinf盒包括在視頻的軌道的traf盒的moof盒以及其中tirf盒和tinf盒包括在ST的軌道的traf盒中的moof盒。
[0605]另一方面，在文件生成單元23中，在生成非分片段的影片的MP4文件的情況下，如圖45中所示，報頭信息生成單元121A生成如下moov盒:其中tirf盒和tinf盒包括在視頻的軌道的trak盒中包括的stbl盒中，以及其中tirf盒和tinf盒包括在ST的軌道的trak盒中包括的stbl盒中。
[0606]<再現(xiàn)設(shè)備的第二配置示例>
[0607]圖51是示出了圖1的再現(xiàn)設(shè)備2的第二配置示例的框圖。
[0608]另外，在圖中與圖33的情況對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0609]在圖51中，再現(xiàn)設(shè)備2被配置成包括文件采集單元51、分解單元52、操縱輸入單元53、組合輸出單元56、控制器141和解碼處理單元142。
[0610]因此，圖51的再現(xiàn)設(shè)備2與圖33的情況的再現(xiàn)設(shè)備2相同之處在于:再現(xiàn)設(shè)備2被配置成包括文件采集單元51、分解單元52、操縱輸入單元53和組合輸出單元56。
[0611]然而，圖51的再現(xiàn)設(shè)備2與圖33的情況的再現(xiàn)設(shè)備2不同之處在于:安裝控制器141和解碼處理單元142代替控制器54和解碼處理單元55。
[0612]控制器141被配置有CPU、ROM、RAM等，并且通過執(zhí)行預(yù)定的程序來控制再現(xiàn)設(shè)備2的整體操作。
[0613]例如，控制器141將作為ToneMapInfo存儲在由分解單元52提供的moov盒(圖45)中包括的 tinf 盒中的 TMI (tone_mapping_info)或存儲在 tirf 盒中的 tone_mapping_info_id_ref提供給解碼處理單元142。另外，例如，控制器141將作為ToneMapInfo存儲在由分解單元52提供的moof盒(圖40)中包括的tinf盒中的TMI或存儲在tirf盒中的tone_mapping_info_id_ref 提供給解碼處理單元 142。
[0614]解碼處理單元142被配置成包括解碼器142A和解碼器142B。
[0615]解碼器142A用作如下采集單元:其獲取作為ToneMapInfo存儲在視頻的TMI中包括的tinf盒中且由控制器141提供的TMI作為要被應(yīng)用于視頻的TMI，并且獲取視頻的TMI中的具有由存儲在視頻的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref 表示的 tone_map_id 的 TMI 作為視頻。
[0616]另外，解碼器142A根據(jù)HEVC方案對包括在由分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼。
[0617]接下來，如果需要，解碼器142A基于作為轉(zhuǎn)換信息要被應(yīng)用于視頻的TMI將作為解碼的結(jié)果而獲得的HDR視頻或STD視頻轉(zhuǎn)換成STD視頻或HDR視頻，并且將STD視頻或HDR視頻輸出至組合輸出單元56。
[0618]在解碼器142A輸出HDR視頻的情況下，解碼器142A將作為特征信息要被應(yīng)用于視頻的TMI連同HDR視頻一起輸出至組合輸出單元56。
[0619]解碼器142B對由分解單元52提供的ST流進(jìn)行解碼。
[0620]另外，解碼器142B用作如下采集單元:其獲取作為ToneMapInfo存儲在ST的軌道中包括的tinf盒中且由控制器141提供的TMI作為要被應(yīng)用于ST的TMI，并且獲取ST的TMI中的具有由存儲在ST的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI 作為 ST 的 TM10
[0621]接下來，如果需要，解碼器142B基于作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI將作為解碼的結(jié)果而獲得的HDR ST或STD ST轉(zhuǎn)換成STD ST或HDR ST，并且將STD ST或HDR ST輸出至組合輸出單元56。
[0622]在解碼器142B輸出HDR ST的情況下，解碼器142B將作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI連同HDR ST 一起輸出至組合輸出單元56。
[0623]<再現(xiàn)設(shè)備2的再現(xiàn)處理>
[0624]圖52是用于描述由圖51的再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0625]在步驟S151中，文件采集單元51獲取由圖39的生成設(shè)備I生成的第二 MP4文件，并且將該第二 MP4文件提供給分解單元52。
[0626]分解單元52從文件采集單元51的第二 MP4文件采集moov盒或moof盒作為報頭信息，同時讀取視頻流或ST流作為存儲在mdat盒中的實(shí)際數(shù)據(jù)。
[0627]接下來，分解單元52將moov盒或moof盒作為報頭信息提供給控制器141，并且將視頻流或ST流提供給解碼處理單元142。
[0628]另外，控制器141將作為ToneMapInfo存儲在由分解單元52提供的moov盒或moof盒中包括的tinf盒中的TMI或存儲在tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元142。
[0629]之后，該過程從步驟S151進(jìn)行至步驟S152，并且類似于圖34的步驟S42的情況，控制器141確定由文件采集單元51獲取的第二 MP4文件的處理模式是模式_i還是模?ζ -Ho
[0630]在在步驟S152中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S153，解碼處理單元142執(zhí)行模式-1的解碼處理。
[0631]另一方面，在在步驟S152中確定處理模式是模式-1i的情況下，解碼處理單元142執(zhí)行模式-1i的解碼處理。
[0632]在在步驟S153或步驟S154中執(zhí)行解碼處理之后，結(jié)束再現(xiàn)處理。
[0633]圖53是用于描述圖52的步驟S153中的模式_i的解碼處理的流程圖。
[0634]在步驟S161中，解碼器142A獲取作為ToneMapInfo存儲在視頻的軌道中包括的tinf盒中且由控制器141提供的TMI作為視頻的TMI。
[0635]另外，解碼器142B獲取作為ToneMapInfo存儲在ST的軌道中包括的tinf盒中且由控制器141提供的TMI作為ST的TMI，然后該過程進(jìn)行至步驟S162。
[0636]在步驟S162至S164中，執(zhí)行與圖35的步驟S62至S64的處理相同的處理。
[0637]也就是說，在步驟S162中，解碼器142A對包括在從分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成HDR視頻。在步驟S163中，解碼器142B將由分解單元52提供的具有SMPTE-TT格式的ST的數(shù)據(jù)的ST流轉(zhuǎn)換成HDR ST。
[0638]接下來，在步驟S164中，控制器141確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0639]在在步驟S164中確定包括在顯示設(shè)備3的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S165。
[0640]在步驟S165中，解碼器142A獲取在步驟S161中獲取的視頻的TMI中的具有由存儲在視頻的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于視頻的TMI。
[0641]另外，解碼器142B獲取在步驟S161中獲取的ST的TMI中的具有由存儲在ST的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于ST的TMI。
[0642]之后，該過程從步驟S165進(jìn)行至步驟S166，然后在步驟S166和步驟S170中執(zhí)行與圖35的步驟S66和S70的處理相同的處理。
[0643]另一方面，在在步驟S164中確定包括在顯示設(shè)備3的監(jiān)視器不是HDR監(jiān)視器而是STD監(jiān)視器的情況下，該過程進(jìn)行至步驟S167。
[0644]在步驟S167中，類似于步驟S165，解碼器142A獲取在步驟S161中獲取的視頻的TMI中的具有由存儲在視頻的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于視頻的TMI。
[0645]另外，類似于步驟S165，解碼器142B獲取在步驟S161中獲取的ST的TMI中的具有由存儲在ST的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于ST的TMI。
[0646]之后，該過程從步驟S167進(jìn)行至步驟S168，從而在下文中，在步驟S168至S170中，執(zhí)行與圖35的步驟S38至S70的處理相同的處理。
[0647]圖54是用于描述圖52的步驟S154中的模式_ii的解碼處理的流程圖。
[0648]在步驟S181中，類似于圖53的步驟S161，解碼器142A和55B分別獲取視頻的TMI和ST的TM1
[0649]也就是說，解碼器142A獲取作為ToneMapInfo存儲在視頻的軌道中包括的tinf盒中且由控制器141提供的TMI作為視頻的TMI。
[0650]另外，解碼器142B獲取作為ToneMapInfo存儲在ST的軌道中包括的tinf盒中且由控制器141提供的TMI作為ST的TMI，然后該過程進(jìn)行至步驟S182。
[0651]在步驟S182至步驟S184中，執(zhí)行與圖36的步驟S82至步驟S84的處理相同的處理。
[0652]也就是說，在步驟S182中，解碼器142A對包括在從分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成STD視頻。在步驟S183中，解碼器142B將由分解單元52提供的具有SMPTE-TT格式的ST的數(shù)據(jù)的ST流解碼成STD ST。
[0653]接下來，在步驟S182中，控制器141確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0654]在在步驟S184中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視的情況下，該過程進(jìn)行至步驟S185。
[0655]在步驟S185中，解碼器142A獲取在步驟S181中獲取的視頻的TMI中的具有由存儲在視頻的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于視頻的TMI。
[0656]另外，解碼器142B獲取在步驟S181中獲取的ST的TMI中的具有由存儲在ST的軌道中包括的tirf盒中且由控制器141提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于ST的TMI。
[0657]之后，該過程從步驟S185進(jìn)行至步驟S186，然后在步驟S186至S189中執(zhí)行與圖36的步驟S86至S89的處理相同的處理。
[0658]如上所述，第二配置示例的生成設(shè)備I將視頻(其流)的軌道和ST (其流)的軌道存儲在第二 MP4文件中。
[0659]因此，每種媒體的軌道可以包括將要被應(yīng)用于媒體(其軌道)的TMI存儲為ToneMapInfo的tinf盒以及將tone_mapping_info_id_ref存儲為指定存儲在tinf盒中的TMI中的要被應(yīng)用于媒體的TMI的HDR指定信息的tirf盒。
[0660]因此，再現(xiàn)設(shè)備2可以對于每種媒體獲取存儲在媒體的軌道中包括的tinf盒中的TMI 中的由存儲在 tirf 盒中的 tone_mapping_info_id_ref 指定的 TMI (具有 tone_map_id)作為要被應(yīng)用于媒體的TMI，并且可以使用該TMI用于媒體的處理。
[0661]<生成設(shè)備I的第三配置示例>
[0662]圖55是示出了圖1的生成設(shè)備I的第三配置示例的框圖。
[0663]另外，在圖中與圖20的情況對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0664]在圖55中，生成設(shè)備I被配置成包括控制器21、解碼處理單元202和文件生成單元 203。
[0665]因此，圖55的生成設(shè)備I與圖20的情況的生成設(shè)備I相同之處在于:生成設(shè)備I被配置成包括控制器21。
[0666]然而，圖55的生成設(shè)備I與圖20的情況的生成設(shè)備I不同之處在于:安裝編碼處理單元202和文件生成單元203代替編碼處理單元22和文件生成單元23。
[0667]另外，圖55的生成設(shè)備I與圖20的情況的生成設(shè)備I不同之處在于:控制器21被配置成包括報頭信息單元201A代替報頭信息生成單元21A。
[0668]在圖55的生成設(shè)備I中，原版的HDR數(shù)據(jù)被輸入至編碼處理單元202。
[0669]報頭信息生成單元201A生成包括存儲由編碼處理單元202提供的tone_map_id 作為 tone_mapping_info_id_ref 的 tirf 盒(圖 24)的 moof 盒以及包括 tmpi 盒(reference_type 是 “tmpi” 的 TrackReferenceTypeBox)的 moov 盒作為報頭信息，并且將該報頭信息提供給文件生成單元203。
[0670]可替代地，報頭信息生成單元201A生成存儲由編碼處理單元202提供的tone_map_id作為tone_mapping_info_id_ref的tirf盒以及包括tmpi的moov盒作為報頭信息，并且將該報頭信息提供給文件生成單元203。
[0671]下文將描述tmpi盒。
[0672]類似于圖20的編碼處理單元22，編碼處理單元202通過對原版的HDR數(shù)據(jù)執(zhí)行編碼來生成視頻流和ST流，并且將視頻流和ST流輸出至文件生成單元203。
[0673]另外，編碼處理單元202生成TMI的es (基本流)(在下文中，有時稱作TMI流)作為要被應(yīng)用于視頻或ST的HDR信息，并且將該es輸出至文件生成單元203。
[0674]另外，編碼處理單元202將要被應(yīng)用于視頻或ST的TMI的tone_map_id提供給控制器21 (其報頭信息生成單元201A)。
[0675]文件生成單元203生成存儲由控制器21 (其報頭信息生成單元201A)提供的報頭信息以及由編碼處理單元202提供的視頻流、ST流和TMI流的MP4文件，并且輸出該MP4文件。
[0676]圖56是示出了由圖55的生成設(shè)備I生成的MP4文件(在下文中，有時稱作第三MP4文件)的示例的圖。
[0677]圖56的第三MP4文件是具有片段的分片段的影片的MP4文件，并且moov盒包括視頻、ST和TMI (色調(diào)映射基本流)的trak盒。
[0678]因此，圖56的MP4文件包括視頻的軌道、ST的軌道以及TMI的軌道。
[0679]圖55的生成設(shè)備I生成通過參照其他軌道可以應(yīng)用包括在TMI的軌道(在下文中，有時稱作TMI軌道)中的TMI的MP4文件作為第三MP4文件。
[0680]因此，在第三MP4文件中，TMI軌道(色調(diào)映射軌道)的madt盒包括TMI的樣本(ToneMapSample)作為實(shí)際數(shù)據(jù)。
[0681]另外，除了 moov盒的TMI之外，媒體的trak盒，即，視頻或ST (字幕)的trak盒包括 tref 盒，tref 盒包括 tmpi 盒(TrackReferenceBox)。
[0682]在下文中，如參照圖21和圖22所描述的，盡管tref盒可以包括TrackReferenceTypeBox，但是 tmpi 盒是最新被定義為 TrackReferenceTypeBox 的一種的合
ΙΤΓΤ.0
[0683]現(xiàn)在，例如，如果包括tmpi盒的ST的軌道被視為關(guān)注的目標(biāo)軌道，則在包括在為目標(biāo)軌道的ST的軌道中的tmpi盒中存儲作為指定要被應(yīng)用于目標(biāo)軌道的TMI的TMI軌道(HDR信息)的軌道指定信息的TMI軌道的track_id(其track_IDs[]表示)。
[0684]因此，要被應(yīng)用于目標(biāo)軌道的TMI的TMI軌道可以由存儲在作為目標(biāo)軌道的ST的軌道中包括的tmpi盒中的track_id識別。
[0685]類似地，如果包括tmpi盒的視頻的軌道被視為關(guān)注的目標(biāo)軌道，則在作為目標(biāo)軌道的視頻的軌道中包括的tmpi盒中存儲作為指定要被應(yīng)用于目標(biāo)軌道的TMI的TMI軌道的軌道指定信息的TMI軌道的track_id。
[0686]因此，要被應(yīng)用于目標(biāo)軌道的TMI的TMI軌道可以由存儲在包括在作為目標(biāo)軌道的視頻的軌道中的tmpi盒中的track_id識別。
[0687]另外，通過確定預(yù)先變成TMI軌道的軌道的track_id，可以省略包括tmpi盒的tref 盒。
[0688]在圖56的第三MP4文件中，視頻和ST的每個軌道的moof盒包括traf盒，traf盒包括tirf盒，tirf盒存儲表示tone_map_id的tone_mapping_info_id_ref作為指定要被應(yīng)用于軌道的TMI的HDR指定信息。
[0689]通過參照存儲在目標(biāo)盒的tirf盒中的tone_mapping_info_id_ref，具有由存儲在tirf盒中的tone_mapping_info_id_ref表示的tone_map_id的TMI可以被識別為具有存儲在tmpi盒中的track_id的TMI軌道的TMI中的要被應(yīng)用于目標(biāo)軌道的TMI。
[0690]另外，盡管分片段的影片的MP4文件包括每個片段的moof盒，但是由存儲在片段的 moof 盒中包括的 tirf 盒中的 tone_mapping_info_id_ref 表不的 tone_map_id 的 TMI中的有效TMI被應(yīng)用于一些片段的數(shù)據(jù)。
[0691]另外，可以將多個軌道作為TMI軌道(色調(diào)映射軌道)存儲在第三MP4文件中。
[0692]另外，在第三MP4文件中，例如，要被應(yīng)用于視頻的TMI軌道以及要被應(yīng)用于ST的TMI的TMI軌道可以是同一 TMI軌道或其他TMI軌道。
[0693]如圖56中所示，除了視頻和ST以外，將TMI軌道存儲在分片段的影片的MP4文件中。
[0694]因此，對于視頻的軌道，存儲要被應(yīng)用于ST的TMI的TMI軌道的track_id的tmpi盒B#41被存儲在moov盒的視頻的軌道的trak/tref盒中。
[0695]另外，對于視頻的軌道，存儲表示要被應(yīng)用于視頻的TMI (包括在具有存儲在tmpi盒 B#41 中的 track_id 的 TMI 軌道中的 TMI)的 tone_map_id 的 tone_mapping_info_id_ref的tirf盒B#44被存儲在視頻的軌道的moof/traf盒中。
[0696]因此，根據(jù)圖56的第三MP4文件，例如，如果視頻的軌道被視為目標(biāo)軌道，則要被應(yīng)用于視頻的TMI的TMI軌道可以由存儲在moov盒的視頻的trak/tref/tmpi盒B#41中的track_id識別。
[0697]另外，可以認(rèn)識到包括在TMI軌道中的TMI中的具有由存儲在為目標(biāo)軌道的視頻的軌道的 moof/tarf/tirf 盒 B#44 中的 tone_mapping_info_id_ref 表不的 tone_map_id的TMI是要被應(yīng)用于目標(biāo)軌道的TMI。
[0698]另一方面，對于ST的軌道，存儲要被應(yīng)用于ST的TMI的TMI軌道的track_id的tmpi盒B#42被存儲在moov盒的ST的軌道的trak/tref盒中。
[0699]另外，對于ST的軌道，存儲表示要被應(yīng)用于ST的TMI (包括在具有存儲在tmpi盒中的 track_id 的 TMI 軌道中的 TMI)的 tone_map_id 的 tone_mapping_info_id_ref 的 tirf盒B#43被存儲在ST的軌道的moof/traf盒中。
[0700]因此，根據(jù)圖56的第三MP4文件，例如，如果ST的軌道被視為目標(biāo)軌道，則要被應(yīng)用于ST的TMI的TMI軌道可以由存儲在moov盒的ST的trak/tref/tmpi盒B#42中的track」d識別。
[0701]另外，可以認(rèn)識到包括在TMI軌道中的TMI中的具有由存儲在為目標(biāo)軌道的ST的軌道的 moof/tarf/tirf 盒 B#43 中的 tone_mapping_info_id_ref 表不的 tone_map_id 的TMI是要被應(yīng)用于目標(biāo)軌道的TMI。
[0702]圖57是示出了作為tmpi盒的TrackReferenceTypeBox的定義的示例的圖。
[0703]在該實(shí)施方式中，“tmpi”被最新定義為表示TrackReferenceTypeBox用于存儲 TMI 軌道的 track_id 的 refernce_type，并且 refernce_type 變成 “tmpi” 的TrackReferenceTypeBox 用作存儲 TMI 軌道的 track_id 的 tmpi 盒。
[0704]tmpi 盒包括(存儲)表示 track_id 的 track_IDs[]。
[0705]track_IDs□是陣列變量，并且可以存儲多個track_id。因此，根據(jù)tmpi盒，可以將多個軌道指定為要被應(yīng)用于媒體的TMI的TMI軌道。
[0706]圖58是示出了作為實(shí)際數(shù)據(jù)存儲在第三MP4文件中所存儲的TMI軌道(色調(diào)映射軌道)的mdat盒中的TMI的樣本(ToneMapSample)的語法的示例的圖。
[0707]TMI的一個樣本可以包括O組或更多組表示ToneMapInfo的長度的ToneMapInfoLength 以及 ToneMapInfo, ToneMapInfo 表不 TM10
[0708]因此，TMI的一個樣本可以包括多組 ToneMapInfoLength 和 the ToneMapInfo。
[0709]另外，Length =表示TMI的樣本的長度的sample_size不存在于TMI的樣本中，并且參照例如Stsz盒、Stz2盒和trun盒中所描述的每個樣本的大小信息。
[0710]可以將例如圖42至圖44中所示的語法的ToneMapInfo等用作ToneMapInfo。
[0711]圖59是示出了 TMI的樣本(ToneMapSample)的數(shù)據(jù)結(jié)構(gòu)的示例的圖。
[0712]如圖59中所示，TMI的樣本可以重復(fù)包括一組ToneMapInfoLength和ToneMapInfo0
[0713]圖60是示出了由圖55的生成設(shè)備I生成的第三MP4文件的另一示例的圖。
[0714]圖60的第三MP4文件是不包括任何片段的非分片段的影片的MP4文件，并且moov盒包括視頻的trak盒、ST的trak盒以及TMI (色調(diào)映射基本流)的(兩個)trak盒。
[0715]因此，圖60的第三MP4文件被配置成包括視頻的軌道、ST的軌道以及TMI的軌道。
[0716]類似于圖56，在圖60中，視頻的軌道和ST的軌道分別包括tmpi盒和tirf盒，另夕卜，mdat盒包括視頻的樣本、ST的樣本和TMI的樣本(色調(diào)映射樣本)。
[0717]在本文中，所非分片段的影片的MP4文件中，如圖60中所示，存儲表示要被應(yīng)用于視頻的TMI軌道的track_id的track_IDs[](圖57)的tmpi盒B#51被存儲在moov盒的視頻的trak/tref盒中。
[0718]另外，存儲表示要被應(yīng)用于視頻的TMI的tone_map_id的tone_mapping_info_id_ref的tirf盒B#52被存儲在moov盒的視頻的軌道的trak中包括的stbl盒中。
[0719]類似于視頻的軌道，ST的軌道可以包括tmpi盒B#53和tirf盒B#54。
[0720]也就是說，存儲表示要被應(yīng)用于視頻的TMI的TMI軌道的track_id的track_IDs[]的tmpi盒B#53被存儲在moov盒的ST的軌道的trak/tref盒中。
[0721]另外，存儲表示要被應(yīng)用于ST 的 TMI 的 tone_map_id 的 tone_mapping_info_id_ref的tirf盒B#54被存儲在moov盒的ST的軌道的trak盒中包括的stbl盒中。
[0722]因此，根據(jù)圖60的第三MP4文件，例如，如果ST的軌道被視為目標(biāo)軌道，則要被應(yīng)用于為目標(biāo)軌道的ST的軌道的TMI的TMI軌道可以由存儲在moov盒的ST的trak/tref/tmpi盒B#53中的track」d識別。
[0723]另外，可以認(rèn)識到:TMI軌道的TMI中的具有由存儲在為moov盒的目標(biāo)軌道的ST的軌道的 tark/stbl/tirf 盒 B#54 中的 tone_mapping_info_id_ref 表不的 tone_map_id的TMI是要被應(yīng)用于目標(biāo)軌道的TMI。
[0724]對于視頻，以類似的方式，可以識別要被應(yīng)用于視頻的TMI。
[0725]另外，在非分片段的影片的MP4文件中，具有由存儲在目標(biāo)軌道的tirf盒中的tone_mapping_info_id_ref表示的tone_map_id的TMI中的有效TMI被應(yīng)用于目標(biāo)軌道。
[0726]另外，要被應(yīng)用于視頻的TMI的TMI軌道和要被應(yīng)用于ST的TMI的TMI軌道可以是同一 TMI軌道或可以是不同的TMI軌道。
[0727]如上所述，在圖55的生成設(shè)備I中，由于生成如下第三MP4文件:存儲TMI的TMI軌道作為HDR信息和存儲track_IDs[]作為指定TMI軌道中包括的TMI中的要被應(yīng)用于關(guān)注的目標(biāo)軌道的TMI的TMI軌道的軌道指定信息以及存儲tone_mapping_info_id_ref作為指定要被應(yīng)用于目標(biāo)軌道的TMI的HDR指定信息，所以可以獨(dú)立地將要被應(yīng)用于每種媒體的TMI添加到媒體如視頻或ST。
[0728]另外，在對視頻進(jìn)行編碼的情況下，例如，根據(jù)HEVC方案，雖然生成將視頻的TMI插入到SEI中的視頻流，但是在第三MP4文件中，可以獨(dú)立于要被插入到SEI中的TMI將要被應(yīng)用于每種媒體的TMI添加到除了視頻以外的媒體。
[0729]因此，在不將要被應(yīng)用于ST的TMI獨(dú)立添加到ST的情況下，將包括記錄在例如藍(lán)光(注冊商標(biāo))盤中的具有m2ts格式的TMI的視頻以及與TMI —起再現(xiàn)的ST轉(zhuǎn)換成MP4文件。
[0730]因此，便于TMI到MP4文件的引入，使得可以增加用戶享受HDR圖像如HDR視頻或HDR ST的機(jī)會。
[0731]另外，在對視頻進(jìn)行編碼的情況下，例如，根據(jù)HEVC方案，由于生成將視頻的TMI插入到SEI中的視頻流，所以在第二 MP4文件中，被插入到SEI中的TMI以及TMI軌道的TMI作為視頻的TMI而存在。
[0732]在這種情況下，在再現(xiàn)設(shè)備2 (圖1)中，例如，可以預(yù)先確定或根據(jù)用戶的操縱來確定被插入到SEI中的TMI和TMI軌道的TMI之一用作要被用作視頻的TMI。
[0733]在該實(shí)施方式中，假定:對于第三MP4文件，例如，被插入到SEI中的TMI中的TMI軌道的TMI以及TMI軌道的TMI用作要被應(yīng)用于視頻的TMI。
[0734]在本文中，根據(jù)具有SMPTE-TT格式的ST的數(shù)據(jù)，盡管ST的多個顯示屏可以包括在為對MP4文件進(jìn)行訪問的單元的一個樣本中，但是在第三MP4文件中，在ST的多個顯示屏包括在一個樣本中的情況下，通過根據(jù)包括在一個樣本中的ST的多個顯示屏的顯示時間，可以對于包括在一個樣本中的ST的多個顯示屏中的每個顯示屏選擇(改變)要被應(yīng)用于顯示屏的TMI。
[0735]另外，在第三MP4文件中，由于除了媒體的軌道以外存儲TMI軌道，所以增加生成設(shè)備I和再現(xiàn)設(shè)備2的處理負(fù)荷。然而，增加程度不是很大。
[0736]<編碼處理單元202的配置示例>
[0737]圖61是示出了圖55的編碼處理單元202的配置示例的框圖。
[0738]另外，在圖中與圖26的編碼處理單元22或圖46的編碼處理單元122對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0739]圖61的編碼處理單元202被配置成包括編碼器32、轉(zhuǎn)換單元33、編碼器35、特征信息生成單元131、轉(zhuǎn)換信息生成單元132和流生成單元211。
[0740]因此，圖61的編碼處理單元202與圖46的編碼處理單元122相同之處在于:編碼處理單元202被配置成包括編碼器32、轉(zhuǎn)換單元33、編碼器35、特征信息生成單元131和轉(zhuǎn)換信息生成單元132。
[0741]然而，圖61的編碼處理單元202與圖46的編碼處理單元122不同之處在于:安裝流生成單元211代替流生成單元133。
[0742]流生成單元211執(zhí)行與圖26的流生成單元36的處理相同的處理。
[0743]也就是說，流生成單元211將由特征信息生成單元131提供的TMI的tone_map_id作為視頻和ST的特征信息提供給控制器21 (圖55)。
[0744]另外，流生成單元211將由轉(zhuǎn)換信息生成單元132提供的TMI的tone_map_id作為視頻和ST的轉(zhuǎn)換信息提供給控制器21。
[0745]另外，流生成單元211將視頻的TMI作為SEI插入到由編碼器32提供的視頻的編碼數(shù)據(jù)中以生成視頻流。
[0746]另外，流生成單元211將由編碼器35提供的ST的數(shù)據(jù)作為ST流連同視頻流一起提供給圖55的文件生成單元203。
[0747]以這種方式，除了執(zhí)行與圖26的流生成單元36的處理相同的處理以外，流生成單元211還通過使用由特征信息生成單元131提供作為視頻和ST的特征信息的TMI和由轉(zhuǎn)換信息生成單元132提供作為視頻和ST的轉(zhuǎn)換信息的TMI來生成TMI的TMI流(es (基本流))，并且將該TMI流提供給圖55的文件生成單元203。
[0748]另外，在流生成單元211中，可以不將視頻的TMI插入到由編碼器32提供的視頻的編碼數(shù)據(jù)中，從而可以將編碼數(shù)據(jù)不經(jīng)變化地視為視頻流。
[0749]<生成設(shè)備I的文件生成處理>
[0750]圖62是用于描述由圖55的生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0751]如果將原版的HDR數(shù)據(jù)輸入到生成設(shè)備I，則類似于圖29的步驟SI，在步驟S201中，生成設(shè)備I的控制器21確定處理模式是否是模式_i。
[0752]在步驟SI中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S202，編碼處理單元202執(zhí)行模式-1的編碼處理。將通過模式_i的編碼處理所生成的視頻流、ST流和TMI流從編碼處理單元202提供至文件生成單元203。
[0753]另一方面，在在步驟S201中確定處理模式是模式_ii的情況下，該過程進(jìn)行至步驟S203，編碼處理單元202執(zhí)行模式-1i的編碼處理。將通過模式_ii的編碼處理所生成的視頻流、ST流和TMI流從編碼處理單元202提供至文件生成單元203。
[0754]在步驟S202或S203之后，該過程進(jìn)行至步驟S204，報頭信息生成單元201A執(zhí)行報頭信息生成處理。將報頭信息生成處理中的報頭信息從報頭信息生成單元201A提供至文件生成單元203，然后該過程進(jìn)行至步驟S205。
[0755]在步驟S205之后，文件生成單元203生成和輸出圖56或圖60的第三MP4文件，該第三MP4文件存儲由編碼處理單元202提供的視頻流、ST流和TMI流以及由報頭信息生成單元201A提供的報頭信息，然后結(jié)束文件生成處理。
[0756]圖63是用于描述在圖62的步驟S202中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0757]在步驟S211至S215中，編碼處理單元202 (圖61)執(zhí)行與圖48的步驟S121至S125的處理相同的處理。
[0758]接下來，在步驟S215之后，該過程進(jìn)行至步驟S216，流生成單元211將由特征信息生成單元131提供作為特征信息的TMI和由轉(zhuǎn)換信息生成單元132提供作為轉(zhuǎn)換信息的TMI作為編碼數(shù)據(jù)的SEI插入到由編碼器32提供的編碼數(shù)據(jù)中以生成視頻流。
[0759]另外，流生成單元211提供由編碼器35提供的ST的數(shù)據(jù)作為ST流，然后該過程從步驟S216進(jìn)行至步驟S217。
[0760]在步驟S217中，流生成單元211根據(jù)視頻的TMI和ST的TMI生成TMI的TMI流，并且將該TMI流連同視頻流和ST流一起提供給文件生成單元203 (圖55)。
[0761]接下來，流生成單元211將視頻的TMI的tone_map_id和ST的TMI的tone_map_id提供給控制器21 (圖55)，然后結(jié)束模式-1的編碼處理。
[0762]圖64是用于描述在圖62的步驟S203中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0763]在步驟S221至S225中，編碼處理單元202 (圖61)執(zhí)行與圖49的步驟S131至S135的處理相同的處理。
[0764]接下來，在步驟S226和S227中，執(zhí)行與圖63的步驟S216和S217的處理相同的處理，然后結(jié)束模式-1i的編碼處理。
[0765]圖65是用于描述在圖62的步驟S204中執(zhí)行的報頭信息生成處理的示例的流程圖。
[0766]在步驟S231中，控制器21(圖55)的報頭信息生成單元201A生成tirf盒(圖24、圖56、圖60)，該tirf盒存儲表示由編碼處理單元202 (其流生成單元211 (圖61))提供的視頻的TMI (要被應(yīng)用于視頻的TMI)的tone_map_id的tone_mapping_info_id_ref0
[0767]另外，報頭信息生成單元201A生成tirf盒，該tirf盒存儲表示由編碼處理單元202 提供的 ST 的 TMI (要被應(yīng)用于 ST 的 TMI)的 tone_map_id 的 tone_mapping_info_id_ref。
[0768]另外，報頭信息生成單元201A生成tmpi盒(圖56、圖57、圖60)，該tmpi盒存儲表示要被應(yīng)用于視頻的TMI的TMI流的軌道的track_id的track_IDs[]。
[0769]另外，報頭信息生成單元201A生成tmpi盒，該tmpi盒存儲表示要被應(yīng)用于ST的TMI的TMI流的軌道的track_id的track_IDs []，然后該過程從步驟S231進(jìn)行至步驟S232。
[0770]在步驟S232中，報頭信息生成單元201A產(chǎn)生包括tmpi盒的moov盒和包括tirf盒的moof盒或者產(chǎn)生包括tmpi盒和tirf盒的moov盒，并且將所產(chǎn)生的盒作為報頭信息提供給文件生成單元203 (圖55)，然后結(jié)束報頭信息生成處理。
[0771]也就是說，在文件生成單元203中，在生成分片段的影片的MP4文件的情況下，如圖56中所示，報頭信息生成單元201A生成如下moov盒:在視頻和ST的軌道的相應(yīng)的trak/tref盒中包括tmpi盒。
[0772]另外，如圖56中所示，報頭信息生成單元20IA生成如下moof盒:在視頻和ST的軌道的相應(yīng)的traf盒中包括tirf盒。
[0773]另一方面，在文件生成單元203中，在生成非分片段的影片的MP4文件的情況下，如圖60中所示，報頭信息生成單元201A生成如下moov盒:在視頻和ST的軌道的相應(yīng)的trak/tref盒中包括tmpi盒且在視頻和ST的軌道的相應(yīng)的trak盒/stbl盒中包括tirf
合
ΙΤΓΤ.0
[0774]<再現(xiàn)設(shè)備2的第三配置示例>
[0775]圖66是示出了圖1的再現(xiàn)設(shè)備2的第三配置示例的框圖。
[0776]另外，在圖中與圖33或圖51的情況對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文將適當(dāng)?shù)厥÷云涿枋觥?br> [0777]在圖66中，再現(xiàn)設(shè)備2被配置成包括文件采集單元51、操縱輸入單元53、組合輸出單元56、分解單元231、控制器232和解碼處理單元233。
[0778]因此，圖66的再現(xiàn)設(shè)備2與圖33的情況的再現(xiàn)設(shè)備2相同之處在于:再現(xiàn)設(shè)備2被配置成包括文件采集單元51、操縱輸入單元53和組合輸出單元56。
[0779]然而，圖66的再現(xiàn)設(shè)備2與圖33的情況的再現(xiàn)設(shè)備2不同之處在于:安裝分解單元231、控制器232和解碼處理單元233代替分解單元52、控制器54和解碼處理單元55。
[0780]類似于圖33的分解單元52，分解單元231從文件采集單元51的第三MP4文件提取(獲取)moov盒和moof盒作為報頭信息，并且將moov盒或moof盒提供給控制器232。
[0781]另外，分解單元231從文件采集單元51的第三MP4文件提取(獲取)視頻流、ST流和TMI流作為存儲在mdat盒中的實(shí)際數(shù)據(jù)，并且將視頻流、ST流和TMI流提供給解碼處理單元233。
[0782]控制器232被配置有CPU、ROM、RAM等?？刂破?32通過執(zhí)行預(yù)定的程序來控制再現(xiàn)設(shè)備2的整體操作。
[0783]例如，控制器232將存儲在由分解單元231提供的moov盒中包括的tmpi盒中的track_IDs[](圖 56、圖 57、圖 60)或存儲在 tirf 盒中的 tone_mapping_info_id_ref (圖24、圖56、圖60)提供給解碼處理單元233。另外，例如，控制器232將存儲在由分解單元231提供的moof盒中包括的tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元233。
[0784]解碼處理單元233被配置成包括解碼器233A和解碼器233B。
[0785]解碼器233A用作如下采集單元:其獲取由分解單元231提供的流(在本文中，視頻流、ST流和TMI流)中的包括在TMI軌道的TMI流中的TMI作為視頻的TMI，TMI軌道具有由存儲在由控制器232提供的視頻的軌道的tmpi盒中的track_IDs[]表示的track_id。
[0786]另外，解碼器233A根據(jù)HEVC方案對包括在由分解單元231提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼。
[0787]另外，解碼器233A獲取視頻的TMI中的具有由存儲在視頻的軌道的tirf盒中且由控制器232提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于視頻的TMI。
[0788]接下來，如果需要，解碼器233A基于作為轉(zhuǎn)換信息要被應(yīng)用于視頻的TMI將作為解碼的結(jié)果而獲得的HDR視頻或STD視頻轉(zhuǎn)換成STD視頻或HDR視頻，并且將STD視頻或HDR視頻輸出至組合輸出單元56。
[0789]在解碼器233A輸出HDR視頻的情況下，解碼器233A將作為特征信息要被應(yīng)用于視頻的TMI連同HDR視頻一起輸出至組合輸出單元56。
[0790]解碼器233B對由分解單元231提供的ST流進(jìn)行解碼。
[0791]另外，解碼器233B用作如下采集單元:其獲取由分解單元231提供的流(在本文中，視頻流、ST流和TMI流)中的包括在TMI軌道的TMI流中的TMI作為ST的TMI，TMI軌道具有由存儲在ST的軌道的tmpi盒中且由控制器232提供的track_IDs[]表示的track_id。
[0792]另外，解碼器233B獲取ST的TMI中的具有由存儲在ST的軌道的tirf盒中且由控制器232提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于ST的TMI ο
[0793]接下來，如果需要，解碼器233B基于作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI將作為解碼的結(jié)果而獲得的HDR ST或STD ST轉(zhuǎn)換成STD ST或HDR ST，并且將STD ST或HDR ST輸出至組合輸出單元56。
[0794]在解碼器233B輸出HDR ST的情況下，解碼器233B將作為特征信息要被應(yīng)用于ST的TMI連同HDR ST 一起輸出至組合輸出單元56。
[0795]<再現(xiàn)設(shè)備2的再現(xiàn)處理>
[0796]圖67是用于描述由圖66的再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0797]在步驟S251中，文件采集單元51生成由生成設(shè)備I生成的第三MP4文件，并且將第三MP4文件提供給分解單元231。
[0798]分解單元231從由文件采集單元51提供的MP4文件讀取moov盒或moof盒作為報頭信息，并且讀取視頻流、ST流和TMI流作為存儲在mdat盒中的實(shí)際數(shù)據(jù)。
[0799]接下來，分解單元231將moov盒或moof盒作為報頭信息提供給控制器232，并且將視頻流、ST流和TMI流提供給解碼處理單元233。
[0800]另外，控制器232將存儲在由分解單元231提供的moov盒中包括的tmpi盒中的track_IDs []和存儲在tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元233。另外，控制器232將存儲在由分解單元231提供的moof盒中包括的tirf盒中的tone_mapping_info_id_ref提供給解碼處理單元233。
[0801]之后，該過程從步驟S251進(jìn)行至步驟S252，并且類似于圖34的步驟S42的情況，控制器232確定由文件采集單元51獲取的第三MP4文件的處理模式是模式_i還是模
?ζ -Ho
[0802]在在步驟S252中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S253，解碼處理單元233執(zhí)行模式-1的解碼處理。
[0803]另一方面，在在步驟S252中確定處理模式是模式_ii的情況下，該過程進(jìn)行至步驟S254，解碼處理單元233執(zhí)行模式-1i的解碼處理。
[0804]在在步驟S253或步驟S254中執(zhí)行解碼處理之后，結(jié)束再現(xiàn)處理。
[0805]圖68是用于描述圖67的步驟S253中的模式_i的解碼處理的流程圖。
[0806]在步驟S261中，解碼器233A獲取由分解單元231提供的流中的具有由存儲在視頻的軌道的tmpi盒中且由控制器232提供的的track_IDs[]表示的track_id的TMI軌道，并且獲取包括在TMI流中的TMI作為視頻的TMI。
[0807]另外，解碼器233B獲取由分解單元231提供的流中的具有由存儲在ST的軌道的tmpi盒中且由控制器232提供的track_IDs []表示的track_id的TMI軌道，并且獲取包括在TMI流中的TMI作為ST的TMI。
[0808]之后，該過程從步驟S261進(jìn)行至步驟S262，解碼器233A根據(jù)HEVC方案對包括在由分解單元231提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成HDR視頻，然后該過程進(jìn)行至步驟S263。另外，視頻解碼(編碼)方案不限于HEVC方案。
[0809]在步驟S263中，解碼器233B將由分解單元231提供的ST流，即，例如具有SMPTE-TT格式的ST的數(shù)據(jù)的流解碼成HDR ST，然后該過程進(jìn)行至步驟S264。
[0810]在步驟S264中，類似于圖35的步驟S64，控制器232確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0811]在在步驟S264中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S265。
[0812]在步驟S265中，解碼器233A獲取在步驟S261中獲取的視頻的TMI中的具有由存儲在視頻的軌道的tirf盒中且由控制器232提供的tone_mapping_info_id_ref表示的tone_map_id 的 TMI (由 tone_mapping_info_id_ref 指定為 HDR 指定信息的 TMI)作為要被應(yīng)用于視頻的TMI。
[0813]另外，解碼器233B獲取在步驟S261中獲取的ST的TMI中的具有由存儲在ST的軌道的tirf盒中且由控制器232提供的tone_mapping_info_id_ref表示的tone_map_id的TMI (由tone_mapping_info_id_ref指定為HDR指定信息的TMI)作為要被應(yīng)用于ST的TM10
[0814]之后，該過程從步驟S265進(jìn)行至步驟S266。在下文中，在步驟S266和S270中，執(zhí)行與圖35的步驟S66和S70的處理相同的處理。
[0815]另一方面，在在步驟S264中確定包括在顯示設(shè)備3中的監(jiān)視器不是HDR監(jiān)視器而是STD監(jiān)視器的情況下，該過程進(jìn)行至步驟S267。
[0816]在步驟S267中，類似于步驟S265，解碼器233A和233B分別獲取要被應(yīng)用于視頻和ST的TMI ο
[0817]之后，該過程從步驟S267進(jìn)行至步驟S268，然后在下文中，在步驟S268至S270中執(zhí)行與圖35的步驟S68至S70的處理相同的處理。
[0818]圖69是用于描述圖7的步驟S254中的模式_ii的解碼處理的流程圖。
[0819]在步驟S281中，類似于圖68的步驟S261，解碼器233A和233B獲取TMI。
[0820]也就是說，解碼器233A獲取由分解單元231提供的流中的具有由存儲在視頻的軌道的tmpi盒中且由控制器232提供的track_IDs[]表示的track_id的TMI軌道，并且獲取包括在TMI流中的TMI作為視頻的TMI。
[0821]另外，解碼器233B獲取由分解單元231提供的流中的具有由存儲在ST的軌道的tmpi盒中且由控制器232提供的track_IDs []表示的track_id的TMI軌道，并且獲取包括在TMI流中的TMI作為ST的TMI。
[0822]之后，該過程從步驟S281進(jìn)行至步驟S282，在步驟S282至S284中執(zhí)行與圖36的步驟S82至S84的處理相同的處理。
[0823]也就是說，在步驟S282中，解碼器233A對包括在由分解單元231提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成STD視頻。在步驟S283中，解碼器233B將由分解單元231提供的具有SMPTE-TT格式的ST的數(shù)據(jù)的ST流解碼成STD ST。
[0824]接下來，在步驟S284中，控制器232確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0825]在在步驟S284中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S285。
[0826]在步驟S285中，解碼器233A獲取在步驟S281中獲取的視頻的TMI中的具有由存儲在視頻的軌道的tirf盒中且由控制器232提供的的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于視頻的TMI。
[0827]另外，解碼器233B獲取在步驟S281中獲取的ST的TMI中的具有由存儲在ST的軌道的tirf盒中且由控制器232提供的tone_mapping_info_id_ref表示的tone_map_id的TMI作為要被應(yīng)用于ST的TMI。
[0828]之后，該過程從步驟S285進(jìn)行至步驟S286，然后在步驟S286至S289中執(zhí)行與圖36的步驟S86至S89的處理相同的處理。
[0829]如上所述，第三配置示例的生成設(shè)備I將為除了視頻(其流)的軌道和ST(其流)的軌道以外的TMI (其流)的軌道的TMI軌道存儲在第三MP4文件中。
[0830]另外，每種媒體的軌道可以包括tmpi盒和tirf盒，tmpi盒存儲將track_id表示為指定要被應(yīng)用于媒體(其軌道)的TMI的TMI軌道的軌道指定信息的track_IDs []，tirf盒存儲tone_mapping_info_id_ref作為指定TMI軌道的TMI中的要被應(yīng)用于媒體的TMI的HDR指定信息。
[0831]因此，對于每種媒體，再現(xiàn)設(shè)備2獲取指定存儲在媒體的軌道中包括的tmpi盒中的track_IDs[]中的TMI軌道(其track_id)的TMI中的由存儲在tirf盒中的tone_mapping_info_id_ref指定的TMI (具有tone_map_id)作為要被應(yīng)用媒體的TMI，并且可以將該TMI用于媒體的處理。
[0832]<生成設(shè)備I的第四配置示例>
[0833]圖70是示出了圖1的生成設(shè)備I的第四配置示例的框圖。
[0834]另外，在圖中與圖20的情況對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0835]在圖70中，生成設(shè)備I被配置成包括控制器21、文件生成單元23和解碼處理單元302。
[0836]因此，圖70的生成設(shè)備I與圖20的情況的生成設(shè)備I相同之處在于:生成設(shè)備I被配置成包括控制器21和文件生成單元23，而圖70的生成設(shè)備I與圖20的情況的生成設(shè)備I不同之處在于:安裝編碼處理單元302代替編碼處理單元22。
[0837]另外，圖70的生成設(shè)備I與圖20的情況的生成設(shè)備I不同之處在于:控制器21被配置成包括報頭信息單元301A代替報頭信息生成單元21A。
[0838]在圖70的生成設(shè)備I中，原版的HDR數(shù)據(jù)被輸入至編碼處理單元302。
[0839]報頭信息生成單元301A生成由文件生成單元23生成的MP4文件的moov以及必要的moof作為報頭信息，并且將該報頭信息提供給文件生成單元23。
[0840]類似于圖20的編碼處理單元22，編碼處理單元302通過對原版的HDR數(shù)據(jù)執(zhí)行編碼來生成視頻流和ST流，并且將視頻流和ST流輸出至文件生成單元203。
[0841]然而，在該實(shí)施方式中，HDR存儲元素被最新定義為存儲TMI作為HDR信息的XML的元件，以及對于ST，編碼處理單元302使得存儲TMI作為HDR信息的HDR存儲元素能夠作為XML的元件被包括在作為對ST編碼的結(jié)果而獲得的具有SMPTE-TT格式的ST的數(shù)據(jù)中以生成ST流。
[0842]因此，由于存儲TMI作為HDR信息的HDR存儲元素包括在作為由編碼處理單元302生成的ST流的具有SMPTE-TT格式的ST的數(shù)據(jù)中，所以可以通過僅使用具有SMPTE-TT格式的ST的數(shù)據(jù)來執(zhí)行通過將TMI用作HDR信息顯示HDR ST等。
[0843]也就是說，對于要被應(yīng)用于作為存儲在上述第一至第三MP4文件中的ST流的具有SMPTE-TT格式的ST的數(shù)據(jù)的TMI，由于允許TMI存儲在tinf盒中或者允許參照(使用)除了 ST的軌道以外的軌道中的TMI，所以在將存儲在第一至第三MP4文件中的ST流不經(jīng)變化地存儲在具有除了 MP4文件的格式以外的容器格式的文件或數(shù)據(jù)的情況下，難以通過將TMI用作HDR信息來執(zhí)行顯示HDR ST等。
[0844]相反，由于存儲TMI作為HDR信息的HDR存儲元素包括在作為由編碼處理單元302生成的ST流的具有SMPTE-TT格式的ST的數(shù)據(jù)(在下文中，有時稱作新的TT數(shù)據(jù))中，所以可以通過使用僅新的TT數(shù)據(jù)來執(zhí)行通過將TMI用作HDR信息來顯示HDR ST等。
[0845]因此，雖然以任何容器格式以及MP4文件提供新的TT數(shù)據(jù)，但是可以執(zhí)行通過將TMI用作HDR信息來顯示HDR ST等。
[0846]也就是說，在圖70的生成設(shè)備I中，雖然以將數(shù)據(jù)存儲在MP4文件中的狀態(tài)提供新的TT數(shù)據(jù)，但是可以例如以將數(shù)據(jù)存儲在例如IP包或除了將數(shù)據(jù)存儲在MP4文件中的狀態(tài)以外的具有任何其他任意容器格式的文件或數(shù)據(jù)中的狀態(tài)提供新的TT數(shù)據(jù)。
[0847]另外，即使在單獨(dú)提供或以將數(shù)據(jù)與其他數(shù)據(jù)如視頻復(fù)用的狀態(tài)提供新的TT數(shù)據(jù)的情況下，也可以執(zhí)行通過將TMI用作HDR信息來顯示HDR ST等。
[0848]因此，根據(jù)新的TT數(shù)據(jù)，便于TMI到具有SMPTE-TT格式的ST的數(shù)據(jù)的引入，使得可以增加用戶享受HDR ST的機(jī)會。
[0849]<編碼處理單元302的配置示例>
[0850]圖71是示出了圖70的編碼處理單元302的配置示例的框圖。
[0851 ] 另外，在圖中與圖26的編碼處理單元22對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文中將適當(dāng)?shù)厥÷云涿枋觥?br> [0852]編碼處理單元302被配置成包括特征信息生成單元31、編碼器32、轉(zhuǎn)換單元33、轉(zhuǎn)換信息生成單元34、編碼器35和流生成單元311。
[0853]因此，編碼處理單元302與圖26的編碼處理單元22相同之處在于:編碼處理單元302被配置成包括特征信息生成單元31、編碼器32、轉(zhuǎn)換單元33、轉(zhuǎn)換信息生成單元34和編碼器35。
[0854]然而，編碼處理單元302與圖26的編碼處理單元122不同之處在于:安裝流生成單元311代替流生成單元36。
[0855]流生成單元311將由特征信息生成單元31和轉(zhuǎn)換信息生成單元34提供的視頻的TMI作為SEI插入到由編碼器32提供的視頻的編碼數(shù)據(jù)中以生成視頻流，并且將該視頻流提供給文件生成單元23 (圖70)。
[0856]另外，流生成單元311生成存儲由特征信息生成單元31和轉(zhuǎn)換信息生成單元34提供的ST的TMI的HDR存儲元素。
[0857]另外，流生成單元311將HDR存儲元素等插入到由編碼器35提供的具有SMPTE-TT格式的ST的編碼數(shù)據(jù)中以生成新的TT數(shù)據(jù)，并且將新的TT數(shù)據(jù)的流(ST流)提供給文件生成單元23。
[0858]另外，類似于圖46的特征信息生成單元131，在圖71中，對于HDR視頻和HDR ST,特征信息生成單元31可以單獨(dú)地生成TMI作為特征信息；對于HDR視頻，特征信息生成單元31可以生成TMI作為HDR視頻的特征信息；而對于HDR ST,特征信息生成單元31可以將作為與HDR ST同時顯示的HDR視頻的特征信息的TMI用作作為ST (HDR ST)的特征信息的 TMI ο
[0859]另外，類似于圖46的轉(zhuǎn)換信息生成單元132，在圖71中，對于HDR視頻和HDR ST,轉(zhuǎn)換信息生成單元34可以單獨(dú)地生成TMI作為轉(zhuǎn)換信息；對于HDR視頻，轉(zhuǎn)換信息生成單元34可以生成TMI作為HDR視頻的轉(zhuǎn)換信息；而對于HDR ST，轉(zhuǎn)換信息生成單元34可以將作為與HDR ST同時顯示的HDR視頻的轉(zhuǎn)換信息的TMI用作作為ST (HDR ST)的轉(zhuǎn)換信息的 TMI ο
[0860]〈HDR存儲元素>
[0861]圖72是示出了 HDR存儲元素的示例的圖。
[0862]存在存儲TMI作為轉(zhuǎn)換信息的ToneMap元素以及存儲TMI作為特征信息的HdrInfo元素作為HDR存儲元素。
[0863]圖72的A、圖72的B以及圖72的C表示ToneMap元素的示例，以及圖72的D表示HdrInfo元素的示例。
[0864]當(dāng)tone_map_id 為 O 時，圖 72 的 ToneMap A 對應(yīng)于圖 7 的 TMI ;當(dāng) tone_map_id 為2時，圖72的ToneMap B對應(yīng)于圖7的TMI ；以及當(dāng)tone_map_id為3時，圖72的ToneMapC對應(yīng)于圖7的TMI。
[0865]當(dāng)tone_map_id 為 4 時，圖 72 的 ToneMap D 對應(yīng)于圖 7 的 TM10
[0866]另外，圖72的ToneMap元素和HdrInfo元素(其中存儲TMI)由作為識別信息的xml:1d 識別。
[0867]在圖72中，將數(shù)字用作ToneMap元素和HdrInfo元素的xml:1d。然而，可以將任意字符(字符串)(包括數(shù)字)用作xml:1d。
[0868]可以例如以作為XML的預(yù)定的元素的tt、head、body、reg1n、div、p、span或set元素來布置(描述)ToneMap元素和HdrInfo元素。
[0869]圖73是示出了 toneMapRef屬性和hdrlnfoRef屬性的定義的示例的圖。
[0870]toneMapRef屬性是在預(yù)定的名稱空間(例如，下文將描述的名稱空間hdr)之后最新定義為指定存儲要被應(yīng)用于ST的TMI的ToneMap元素的屬性的指定屬性。
[0871]在某個元素具有toneMapRef屬性的情況下，獲取存儲在由toneMapRef屬性指定的ToneMap元素中的TMI，并且將其用作要被應(yīng)用于具有toneMapRef屬性的元素中所描述的ST的TMI ο
[0872]hdrlnfoRef屬性是在在預(yù)定的名稱空間(例如，下文將描述的名稱空間hdr)之后最新定義為指定存儲要被應(yīng)用于ST的TMI的HdrInfo元素的屬性的指定屬性。
[0873]在某個元素具有hdrInfoRef屬性的情況下，獲取存儲在由hdrInfoRef屬性指定的HdrInfo元素中的TMI，并且將其用作要被應(yīng)用于具有hdrlnfoRef屬性的元素中所描述的ST的TMI ο
[0874]可以例如以作為XML的預(yù)定的元素的body、div、p、reg1n、span或set元素來描述 toneMapRef 屬性和 hdrlnfoRef 屬性。
[0875]圖74是示出了新的TT數(shù)據(jù)的第一示例的圖。
[0876]在圖74的新的TT數(shù)據(jù)中，在描述nl中，定義關(guān)于作為HDR信息的TMI的名稱空間 hdr ο
[0877]另外，描述n2和n3為ToneMap元素。描述n2的ToneMap元素由xml:1d = “A”識別；以及描述n3的ToneMap元素由xml:1d = “B”識別。
[0878]另外，描述n2和n3的ToneMap元素分別對應(yīng)于圖72的ToneMap元素B和圖72的ToneMap元素C。
[0879]另外，對于圖74的描述n2和n3的ToneMap元素，省略(omit) 了一部分描述。
[0880]描述n4是P元素，并且具有hdr: toneMapRef = “A”作為toneMapRef屬性。
[0881]根據(jù)n4的P元素，根據(jù)作為toneMapRef屬性的hdr: toneMapRef =“A”，獲取存儲在由xml:1d = “A”識別的描述n2的ToneMap元素中的TMI，并且將其用作要被應(yīng)用于作為在描述n4的P元素中所描述的ST的文本“this subtitle references ToneMap whoseid is A (id是A的該字幕參考ToneMap) ”的TM10
[0882]描述n5是p元素，并且具有hdr: toneMapRef = “B”作為toneMapRef屬性。
[0883]根據(jù)n5的p元素，根據(jù)作為toneMapRef屬性的hdr: toneMapRef =“B”，獲取存儲在由xml:1d = “B”識別的描述n3的ToneMap元素中的TMI，并且將其用作要被應(yīng)用于作為在描述n5的P元素中所描述的ST的文本“this subtitle references ToneMap whoseid is B(id是B的該字幕參考ToneMap) ”的TM10
[0884]另外，在圖74中，以body元素布置描述n2和n3的ToneMap元素。然而，可以將ToneMap元素布置在其他位置處。
[0885]另外，在圖74中，在同一文件中對具有指定ToneMap元素的toneMapRef屬性的描述n2或n3的ToneMap元素以及描述n4或n5的p元素進(jìn)行描述。
[0886]圖75是示出了新的TT數(shù)據(jù)的第二示例的圖。
[0887]在圖75的新的TT數(shù)據(jù)中，類似于圖74的描述nl，在描述nil中，定義關(guān)于作為HDR信息的TMI的名稱空間hdr。
[0888]另外，描述nl2和nl3為HdrInfo元素。描述nl2的HdrInfo元素由xml:1d =“AA”識另Ij ；以及描述nl3的HdrInfo元素由xml:1d = “BB”識別。
[0889]描述nl2和nl3的所有HdrInfo元素對應(yīng)于圖72的HdrInfo元素D。
[0890]另外，對于圖75的描述nl2和nl3的所有HdrInfo元素，省略(omit) 了一部分描述。
[0891]描述nl4 是 P 元素，并且具有 hdr:hdrlnfoRef = “AA” 作為 hdrlnfoRef 屬性。
[0892]根據(jù)nl4的P元素，根據(jù)作為hdrlnfoRef屬性的hdr: hdrlnfoRef =“AA”，獲取存儲在由xml:1d =“AA”識別的描述nl2的HdrInfo元素中的TMI，并且將其用作要被應(yīng)用于作為在描述nl4的p元素中所描述的ST的文本“this subtitle references HdrInfowhose id is AA (id 是 AA 的該字幕參考 Hdrlnfo) ” 的 TMI。
[0893]描述nl5 是 P 元素，并且具有 hdr:hdrlnfoRef = “BB” 作為 hdrlnfoRef 屬性。
[0894]根據(jù)nl5的p元素，根據(jù)作為hdrlnfoRef屬性的hdr: hdrlnfoRef =“BB”，獲取存儲在由xml:1d =“BB”識別的描述nl3的HdrInfo元素中的TMI，并且將其用作要被應(yīng)用于作為在描述nl5的P元素中所描述的ST的文本“this subtitle references HdrInfowhose id is BB (id 是 BB 的該字幕參考 Hdrlnfo) ” 的 TMI。
[0895]另外，在圖75中，以body元素布置描述nl2和nl3的Hdrlnfo元素。然而，可以將HdrInfo元素布置在其他位置處。
[0896]另外，在圖75中，在同一文件中對具有指定HdrInfo元素的hdrlnfoRef屬性的描述nl2或nl3的HdrInfo元素以及描述nl4或nl5的p元素進(jìn)行描述。
[0897]另外，在圖74和圖75中，以新的TT數(shù)據(jù)描述ToneMap元素和HdrInfo元素僅之一。然而，可以以新的TT數(shù)據(jù)描述ToneMap元素和HdrInfo元素兩者
[0898]另外，在圖74和圖75中，以p元素指定toneMapRef屬性和hdrlnfoRef屬性僅之一?？梢栽谝粋€元素中指定toneMapRef屬性和hdrlnfoRef屬性兩者。
[0899]圖76是示出了新的TT數(shù)據(jù)的第三示例的圖。
[0900]在本文中，在圖74的新的TT數(shù)據(jù)的第一示例中，存儲要被應(yīng)用于ST的TMI的ToneMap元素由toneMapRef屬性指定。然而，在圖76的新的TT數(shù)據(jù)的第三示例中，不使用toneMapRef屬性，但是指定存儲要被應(yīng)用于ST的TMI的ToneMap元素。
[0901]也就是說，在圖76的新的TT數(shù)據(jù)的第三示例中，通過在顯示ST的元素中布置存儲要被應(yīng)用于ST的ToneMap元素，布置在顯示ST的元素中的ToneMap元素被指定為存儲要被應(yīng)用于ST的TMI的ToneMap元素。
[0902]在圖76的新的TT數(shù)據(jù)中，類似于圖74的描述nl，在描述n21中，定義關(guān)于作為HDR信息的TMI的名稱空間hdr。
[0903]另外，在圖76中，等于圖74的描述n2的描述n23的ToneMap元素被布置在描述n22的div元素中。
[0904]另外，將文本“thissubtitle references ToneMaps whose identifiers areA (id是A的該字幕參考ToneMap) ”顯示為ST的描述n24的p元素被布置在描述n22的div元素中。
[0905]因此，對于被布置在描述n22的div元素中的描述n24的P元素，獲取存儲在被布置在描述n22的div元素中的描述n23的ToneMap元素中的TMI，并且將其用作被應(yīng)用于作為描述n24的P元素中所描述的ST的文本“this subtitle references ToneMaps whoseidentifiers are A” 的 TMI。
[0906]另外，在圖76中，等于圖74的描述n3的描述n26的ToneMap元素被布置在描述n25的div元素中。
[0907]另外，文本“thissubtitle references ToneMaps whose identifiers are B(id是B的該字幕參考ToneMap) ”被顯示為ST的描述n27的p元素被布置在描述n25的div元素中。
[0908]因此，對于被布置在描述n25的div元素中的描述n27的P元素，存獲取存儲在被布置在描述n25的div元素中的描述n26的ToneMap元素中的TMI，并且將其用作要被應(yīng)用于作為描述n27的P元素中所描述的ST的文本“this subtitle references ToneMapswhose identifiers are B” 的 TMI。
[0909]圖77是示出了新的TT數(shù)據(jù)的第四示例的圖。
[0910]在本文中，在圖75的新的TT數(shù)據(jù)的第二示例中，存儲在要被應(yīng)用于ST的TMI中的HdrInfo元素由hdrlnfoRef屬性指定。然而，在圖76的新的TT數(shù)據(jù)的第四示例中，不使用hdrlnfoRef屬性，但是指定存儲要被應(yīng)用于ST的TMI的HdrInfo元素。
[0911]也就是說，在圖77的新的TT數(shù)據(jù)的第四示例中，類似于圖76的情況，通過在顯示ST的元素中布置存儲要被應(yīng)用于ST的HdrInfo元素，布置在顯示ST的元素中的HdrInfo元素被指定為存儲要被應(yīng)用于ST的TMI的HdrInfo元素。
[0912]在圖77的新的TT數(shù)據(jù)中，類似于圖74的描述nl，在描述n31中，定義關(guān)于作為HDR信息的TMI的名稱空間hdr。
[0913]另外，在圖77中，等于圖75的描述nl2的描述n33的Hdrlnfo元素被布置在描述n32的div元素中。
[0914]另外，將文本“thissubtitle references Hdrlnfo whose identifiers areAA (id是AA的該字幕參考Hdrlnfo) ”顯示為ST的描述n34的p元素被布置在描述n32的div元素中。
[0915]因此，對于被布置在描述n32的div元素中的描述n34的p元素，獲取存儲在被布置在描述n32的div元素中的描述n33的Hdrlnfo元素中的TMI，并且將其用作被應(yīng)用于作為描述n34的P元素中所描述的ST的文本“this subtitle references Hdrlnfo whoseidentifiers are AA，，的 TMI。
[0916]另外，在圖77中，等于圖75的描述nl3的描述n36的Hdrlnfo元素被布置在描述n35的div元素中。
[0917]另外，文本“thissubtitle references Hdrlnfo whose identifiers are BB(id是BB的該字幕參考Hdrlnfo) ”被顯示為ST的描述n37的p元素被布置在描述n35的div元素中。
[0918]因此，對于被布置在描述n35的div元素中的描述n37的P元素，存獲取存儲在被布置在描述n35的div元素中的描述n36的Hdrlnfo元素中的TMI，并且將其用作要被應(yīng)用于作為描述n37的P元素中所描述的ST的文本“this subtitle references Hdrlnfowhose identifiers are BB” 的 TMI。
[0919]在圖76和圖77中，以新的TT數(shù)據(jù)描述ToneMap元素和HdrInfo元素僅之一。然而，可以以新的TT數(shù)據(jù)描述ToneMap元素和HdrInfo元素兩者。
[0920]<生成設(shè)備I的文件生成處理>
[0921]圖78是用于描述由圖70的生成設(shè)備I執(zhí)行的文件生成處理的示例的流程圖。
[0922]如果將原版的HDR數(shù)據(jù)輸入到生成設(shè)備1，則類似于圖29的步驟SI，在步驟S301中，生成設(shè)備I的控制器21確定處理模式是否是模式_i。
[0923]在在步驟S301中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S302，編碼處理單元302執(zhí)行模式-1的編碼處理。將通過模式_i的編碼處理所生成的視頻流和ST流(es)從編碼處理單元302提供至文件生成單元23。
[0924]另一方面，在在步驟S301中確定處理模式是模式_ii的情況下，該過程進(jìn)行至步驟S303，編碼處理單元302執(zhí)行模式-1i的編碼處理。將通過模式_ii的編碼處理所生成的視頻流和ST流(es)從編碼處理單元302提供至文件生成單元23。
[0925]在步驟S302或S303之后，該過程進(jìn)行至步驟S304，報頭信息生成單元301A執(zhí)行報頭信息生成處理。將在報頭信息生成處理中所生成的moov和必要的moof作為報頭信息從報頭信息生成單元301A提供至文件生成單元23，然后該過程進(jìn)行至步驟S305。
[0926]在步驟S305之后，文件生成單元23生成和輸出MP4文件，該MP4文件存儲由編碼處理單元302提供的視頻流和ST流以及由報頭信息生成單元301A提供的報頭信息，然后結(jié)束文件生成處理。
[0927]圖79是用于描述在圖78的步驟S302中執(zhí)行的模式_i的編碼處理的示例的流程圖。
[0928]在步驟S311至S315中，執(zhí)行與圖30的步驟Sll至S15的處理相同的處理。
[0929]之后，在步驟S316中，編碼處理單元302(圖71)的流生成單元311將由特征信息生成單元31提供作為特征信息的TMI和由轉(zhuǎn)換信息生成單元34提供作為轉(zhuǎn)換信息的TMI作為編碼數(shù)據(jù)的SEI插入到由編碼器32提供的編碼數(shù)據(jù)中以生成視頻流，然后該過程進(jìn)行至步驟S317。
[0930]在步驟S317中，流生成單元311生成存儲由特征信息生成單元31提供作為特征信息的ST的TMI的HdrInfo元素以及存儲由轉(zhuǎn)換信息生成單元34提供作為轉(zhuǎn)換信息的ST的TMI的ToneMap元素。
[0931]另外，流生成單元311將HdrInfo元素、ToneMap元素、必要的toneMapRef屬性和hdrlnfoRef屬性插入到由編碼器35提供的具有SMPTE-TT格式的ST的數(shù)據(jù)中以生成新的TT數(shù)據(jù)。
[0932]接下來，流生成單元311將為新的TT數(shù)據(jù)的流的ST流連同視頻流一起提供給文件生成單元23 (圖70)，然后結(jié)束(返回)模式-1的編碼處理。
[0933]圖80是用于描述在圖78的步驟S303中執(zhí)行的模式_ii的編碼處理的示例的流程圖。
[0934]在步驟S321至S325中，執(zhí)行與圖31的步驟S21至S25的處理相同的處理。
[0935]接下來，在步驟S326和S327中，執(zhí)行與圖79的步驟S316和S317的處理相同的處理。
[0936]<再現(xiàn)設(shè)備2的第四配置示例>
[0937]圖81是示出了圖1的再現(xiàn)設(shè)備2的第四配置示例的框圖。
[0938]另外，在圖中與圖33的情況對應(yīng)的部件由相同的附圖標(biāo)記來表示，從而在下文將適當(dāng)?shù)厥÷云涿枋觥?br> [0939]在圖81中，再現(xiàn)設(shè)備2被配置成包括文件采集單元51、分解單元52、操縱輸入單元53、組合輸出單元56、控制器321和解碼處理單元322。
[0940]因此，圖81的再現(xiàn)設(shè)備2與圖33的情況的再現(xiàn)設(shè)備2相同之處在于:再現(xiàn)設(shè)備2被配置成包括文件采集單元51、分解單元52、操縱輸入單元53和組合輸出單元56。
[0941]然而，圖81的再現(xiàn)設(shè)備2與圖33的情況的再現(xiàn)設(shè)備2不同之處在于:安裝控制器321和解碼處理單元322代替控制器54和解碼處理單元55。
[0942]控制器321被配置有CPU、ROM、RAM等?？刂破?21通過執(zhí)行預(yù)定的程序來控制再現(xiàn)設(shè)備2的整體操作。
[0943]例如，控制器321根據(jù)由分解單元52提供的moov盒或moof盒來控制解碼處理單元 322。
[0944]解碼處理單元322被配置成包括解碼器322A和解碼器322B。
[0945]解碼器322A從由分解單元52提供的視頻流的SEI獲取作為特征信息和轉(zhuǎn)換信息的TMI (tone_mapping_info)作為要被應(yīng)用于視頻的TM10
[0946]另外，解碼器322A根據(jù)HEVC方案對包括在由分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼。
[0947]接下來，如果需要，解碼器322A基于作為轉(zhuǎn)換信息要被應(yīng)用于視頻的TMI將作為解碼的結(jié)果而獲得的HDR視頻或STD視頻轉(zhuǎn)換成STD視頻或HDR視頻，并且將STD視頻或HDR視頻輸出至組合輸出單元56。
[0948]在解碼器322A輸出HDR視頻的情況下，解碼器322A將作為特征信息要被應(yīng)用于視頻的TMI連同HDR視頻一起輸出至組合輸出單元56。
[0949]解碼器322B對由分解單元52提供的ST流進(jìn)行解碼。
[0950]另外，解碼器322B用作如下采集單元:其獲取存儲在ST流中包括的HdrInfo元素和ToneMap元素(在HdrInfo元素或ToneMap元素由toneMapRef屬性或hdrlnfoRef屬性指定的情況下，由toneMapRef屬性或hdrlnfoRef屬性指定的HdrInfo元素或ToneMap元素)中的TMI作為要被應(yīng)用于ST的TMI。
[0951]因此，如果需要，解碼器322B基于作為轉(zhuǎn)換信息要被應(yīng)用于ST的TMI將作為解碼的結(jié)果而獲得的HDR ST或STD ST轉(zhuǎn)換成STD ST或HDR ST，并且將STD ST或HDR ST輸出至組合輸出單元56。
[0952]在解碼器322B輸出HDR ST的情況下，解碼器322B將作為特征信息要被應(yīng)用于ST的TMI連同HDR ST 一起輸出至組合輸出單元56。
[0953]<再現(xiàn)設(shè)備2的再現(xiàn)處理>
[0954]圖82是用于描述由圖81的再現(xiàn)設(shè)備2執(zhí)行的再現(xiàn)處理的示例的流程圖。
[0955]在步驟S331中，文件采集單元51獲取由生成設(shè)備I生成的MP4文件，并且將該MP4文件提供給分解單元52。
[0956]分解單元52從由文件采集單元51提供的MP4文件讀取moov盒或moof盒作為報頭信息，并且讀取視頻流或ST流作為存儲在mdat盒中的實(shí)際數(shù)據(jù)。
[0957]接下來，分解單元52將moov盒或moof盒作為報頭信息提供給控制器321，并且將視頻流或ST流提供給解碼處理單元322。
[0958]之后，該過程從步驟S331進(jìn)行至步驟S332，并且類似于圖34的步驟S42，控制器321確定由文件采集單元51獲取的MP4文件的處理模式是模式_i還是模式_ii。
[0959]在在步驟S332中確定處理模式是模式_i的情況下，該過程進(jìn)行至步驟S333，解碼處理單元322執(zhí)行模式-1的解碼處理。
[0960]另一方面，在在步驟S332中確定處理模式是模式_ii的情況下，該過程進(jìn)行至步驟S334，解碼處理單元322執(zhí)行模式-1i的解碼處理。
[0961]在在步驟S333或步驟S334中執(zhí)行解碼處理之后，結(jié)束再現(xiàn)處理。
[0962]圖83是用于描述圖82的步驟S333中的模式_i的解碼處理的流程圖。
[0963]在步驟S341中，解碼器322A從由分解單元52提供的視頻流的SEI獲取TMI作為特征信息和轉(zhuǎn)換信息。
[0964]之后，該過程從步驟341進(jìn)行至步驟S342，解碼器322A根據(jù)HEVC方案對包括在由分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成HDR視頻，然后該過程進(jìn)行至步驟S343。另外，視頻解碼(編碼)方案不限于HEVC方案。
[0965]在步驟S343中，解碼器322B將由分解單元231獲取存儲在由分解單元52提供的ST流(新的TT數(shù)據(jù))中的ToneMap元素中的TMI以及存儲在HdrInfo元素中的TMI，然后該過程進(jìn)行至步驟S344。
[0966]在步驟S344中，解碼器322B對HDR ST中的由分解單元52提供的ST流進(jìn)行解碼，然后該過程進(jìn)行至步驟S345。
[0967]在步驟S345中，類似于圖35的步驟S64，控制器321確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0968]在在步驟S345中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S346。
[0969]在步驟S346中，解碼器322A獲取從在步驟S341中所獲取的TMI獲取要被應(yīng)用于視頻的TMI。在本文中，作為獲取要被應(yīng)用于MP4文件中所存儲的視頻的TMI的方法，例如，可以利用在生成設(shè)備I和再現(xiàn)設(shè)備2的第一配置示例中所描述的方法等。
[0970]另外，解碼器322B從在步驟S343中所獲取的TMI獲取要被應(yīng)用于ST的TMI (存儲在由toneMapRef屬性或hdrlnfoRef屬性指定的HdrInfo元素或ToneMap元素中的TMI，在HdrInfo元素或ToneMap元素由toneMapRef屬性或hdrlnfoRef屬性指定的情況下)。
[0971]之后，該過程從步驟S346進(jìn)行至步驟S347。在下文中，在步驟S347和S351之后，執(zhí)行與圖35的步驟S66和S70的處理相同的處理。
[0972]另一方面，在在步驟S345中確定包括在顯示設(shè)備3中的監(jiān)視器不是HDR監(jiān)視器而是STD監(jiān)視器的情況下，該過程進(jìn)行至步驟S348。
[0973]在步驟S348中，類似于步驟S346，解碼器322A和322B獲取要被應(yīng)用于視頻和ST的 TMI ο
[0974]之后，在步驟S349至S351中，執(zhí)行與圖35的步驟S68至S69的處理相同的處理。
[0975]圖84是用于描述圖82的步驟S334中的模式_ii的解碼處理的流程圖。
[0976]在步驟S361中，類似于圖83的步驟S341，解碼器322A獲取從由分解單元52提供的視頻的SEI獲取TMI作為特征信息和轉(zhuǎn)換信息。
[0977]之后，該過程從步驟S361進(jìn)行至步驟S362，，在步驟S362中，解碼器322A根據(jù)HEVC方案對包括在從分解單元52提供的視頻流中的編碼數(shù)據(jù)進(jìn)行解碼以生成STD視頻，然后該過程進(jìn)行至步驟A363。另外，視頻解碼(編碼)方案不限于HEVC方案。
[0978]在步驟S363中，類似于圖83的步驟S343，解碼器322B獲取存儲在由分解單元52提供的ST流(新的TT數(shù)據(jù))中包括的ToneMap元素中的TMI以及存儲在HdrInfo元素中的TMI，然后該過程進(jìn)行至步驟S364。
[0979]在步驟S364中，解碼器322B對STD ST中的從分解單元52提供ST流進(jìn)行解碼，然后該過程進(jìn)行至步驟S365。
[0980]在步驟S365中，類似于圖83的步驟S345，控制器321確定包括在顯示設(shè)備3中的監(jiān)視器是否是HDR監(jiān)視器。
[0981]在在步驟S365中確定包括在顯示設(shè)備3中的監(jiān)視器是HDR監(jiān)視器的情況下，該過程進(jìn)行至步驟S366。
[0982]在步驟S366中，類似于圖83的步驟S346，解碼器322A和322B獲取要被應(yīng)用于視頻和ST的TMI ο
[0983]也就是說，在步驟S366中，解碼器322A從在步驟S361中所獲取的TMI獲取要被應(yīng)用于視頻的TMI。
[0984]另外，解碼器322B從在步驟S363中所獲取的TMI獲取要被應(yīng)用于ST的TMI (存儲在由toneMapRef屬性或hdrlnfoRef屬性指定的HdrInfo元素或ToneMap元素中的TMI，在HdrInfo元素或ToneMap元素由toneMapRef屬性或hdrlnfoRef屬性指定的情況下)。
[0985]之后，該過程從步驟S366進(jìn)行至步驟S367，然后在步驟S367至S370中執(zhí)行與圖36的步驟S86至S89的處理相同的處理。
[0986]如上所述，第四配置示例的生成設(shè)備I生成XML的新的TT數(shù)據(jù)，XML包括HdrInfo元素或ToneMap元素作為HDR存儲元素，HDR存儲元素存儲作為HDR信息的TMI作為XML的元素。
[0987]因此，再現(xiàn)設(shè)備2從新的TT數(shù)據(jù)獲取要被應(yīng)用于ST的TMI，并且可以將TMI用于ST的處理。
[0988]另外，HdrInfo元素或ToneMap元素或toneMapRef屬性或hdrlnfoRef屬性可以應(yīng)用于除了由使用XML的SMPTE-TT顯示ST的情況以外的使用任意標(biāo)記語言來顯示除了 ST以外的任意圖像的情況。
[0989]〈利用本技術(shù)的計算機(jī)的描述〉
[0990]接下來，上述一系列處理可以由硬件或軟件來執(zhí)行。在一系列處理由軟件執(zhí)行的情況下，將構(gòu)成軟件的程序安裝在通用計算機(jī)等中。
[0991]圖85示出了安裝執(zhí)行上述一系列處理的程序的計算機(jī)的實(shí)施方式的配置示例。
[0992]可以將程序預(yù)先記錄在硬盤405或ROM 403如內(nèi)置在計算機(jī)中的記錄介質(zhì)中。
[0993]可替代地，可以將程序存儲(記錄)在可移動記錄介質(zhì)411中。可以將可移動記錄介質(zhì)411提供為所謂的軟件包。在本文中，存在例如軟盤、CD-R0M(只讀存儲光盤)、M0(磁光)盤、DVD (數(shù)字通用盤)、磁盤、半導(dǎo)體存儲器等。
[0994]另外，除了如上所述將程序從可移動記錄介質(zhì)411安裝到計算機(jī)中以外，可以通過通信網(wǎng)絡(luò)或廣播網(wǎng)絡(luò)將程序下載到計算機(jī)以安裝在內(nèi)置硬盤405中。也就是說，可以以無線方式例如通過用于數(shù)字衛(wèi)星廣播的人造衛(wèi)星將程序從下載站發(fā)送到計算機(jī)，或可以以通過網(wǎng)絡(luò)如LAN(局域網(wǎng))或因特網(wǎng)的有線方式將程序發(fā)送至計算機(jī)。
[0995]計算機(jī)包括CPU (中央處理單元)402，并且輸入/輸出接口 410經(jīng)由總線401連接至 CPU 402。
[0996]如果操縱輸入單元407的用戶通過輸入/輸出接口 410輸入命令，則CPU 402根據(jù)該命令執(zhí)行存儲在ROM(只讀存儲器)403中的程序?？商娲?，CPU 402將存儲在硬盤405中的程序加載到RAM (隨機(jī)存取存儲器)404上以執(zhí)行執(zhí)行。
[0997]因此，CPU 402根據(jù)上述流程圖或由上述框圖的配置執(zhí)行的處理來執(zhí)行處理。接下來，如果需要，CPU 402通過例如輸入/輸出接口 410從輸出單元406輸出處理的結(jié)果，從通信單元408發(fā)送處理的結(jié)果，或?qū)⑻幚淼慕Y(jié)果記錄在硬盤405中。
[0998]另外，輸入單元407被配置有鍵盤、鼠標(biāo)、麥克風(fēng)等。另外，輸出單元406被配置成包括IXD (液晶顯示器)、揚(yáng)聲器等。
[0999]在本文中，在本說明書中，由計算機(jī)根據(jù)程序執(zhí)行的處理不一定以根據(jù)流程圖中所描述的順序的時間序列來執(zhí)行。也就是說，由計算機(jī)根據(jù)程序所執(zhí)行的處理還包括并行或單獨(dú)執(zhí)行的處理(例如，并行處理或通過對象的處理)
[1000]另外，程序可以意在由單個計算機(jī)(處理器)處理，或可以經(jīng)歷通過多個計算機(jī)的分布式處理。另外，程序還可以意在被發(fā)送至遠(yuǎn)程計算機(jī)以被執(zhí)行。
[1001]另外，在本說明書中，系統(tǒng)表示一組多個組件(設(shè)備、模塊(部分)等)，所有組件是否存在于同一殼體內(nèi)并不重要。因此，容納在不同的殼體內(nèi)且經(jīng)由網(wǎng)絡(luò)互相連接的多個設(shè)備以及多個模塊容納在單個殼體內(nèi)的單個設(shè)備為系統(tǒng)。
[1002]另外，本技術(shù)的實(shí)施方式不限于上述實(shí)施方式，但是在不偏離本技術(shù)的精神的情況下，在該范圍內(nèi)可得到各種變化。
[1003]例如，本技術(shù)可以具有一個功能經(jīng)由網(wǎng)絡(luò)由多個設(shè)備共享以協(xié)作地被處理的云計算的配置。
[1004]另外，上述流程圖中所描述的每個步驟可以由單個設(shè)備執(zhí)行或可以由多個設(shè)備共享以被執(zhí)行。
[1005]另外，在多個處理包括在一個步驟中的情況下，包括在一個步驟中的多個處理可以由單個設(shè)備執(zhí)行，或可以由多個設(shè)備共享以被執(zhí)行。
[1006]另外，本說明書中所描述的效果是示例性的效果，但不限于此，從而可以獲取其他效果。
[1007]另外，本技術(shù)可以具有下面的配置。
[1008]<1> 一種文件生成設(shè)備，包括:
[1009]文件生成單元，所述文件生成單元生成存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[1010]<2>根據(jù)〈1>所述的文件生成設(shè)備，
[1011]其中，所述文件是具有盒結(jié)構(gòu)的文件。
[1012]<3>根據(jù)〈2>所述的文件生成設(shè)備，
[1013]其中，所述文件是ISO/IEC 14496-14中規(guī)定的MP4文件。
[1014]<4>根據(jù)〈3>所述的文件生成設(shè)備，
[1015]其中，所述目標(biāo)軌道包括被定義為存儲所述HDR信息的盒的tinf盒(ToneMappinglnformat1nBox，色調(diào)映射信息盒)。
[1016]<5>根據(jù)〈3>或〈4>所述的文件生成設(shè)備，
[1017]其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)。
[1018]<6>根據(jù)<1>至〈5>中任一項(xiàng)所述的文件生成設(shè)備，
[1019]其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
[1020]<7> 一種文件生成方法，包括:
[1021]生成存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[1022]<8> 一種文件再現(xiàn)設(shè)備，包括:
[1023]獲取單元，所述獲取單元從存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件中獲取由所述HDR指定信息指定的HDR信息，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[1024]<9>根據(jù)<8>所述的文件再現(xiàn)設(shè)備，
[1025]其中，所述文件是具有盒結(jié)構(gòu)的文件。
[1026]<10>根據(jù)〈9>所述的文件再現(xiàn)設(shè)備，
[1027]其中，所述文件是ISO/IEC 14496-14中規(guī)定的MP4文件。
[1028]<11>根據(jù)〈10>所述的文件再現(xiàn)設(shè)備，
[1029]其中，所述目標(biāo)軌道包括被定義為存儲所述HDR信息的盒的tinf盒(ToneMappinglnformat1nBox，色調(diào)映射信息盒)，以及
[1030]其中，所述獲取單元獲取所述tinf盒中存儲的HDR信息。
[1031]<12>根據(jù)〈10>或〈11>所述的文件再現(xiàn)設(shè)備，
[1032]其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)，以及
[1033]其中，所述獲取單元獲取由所述tirf盒中存儲的HDR指定信息指定的HDR信息。
[1034]<13>根據(jù)〈8>至〈12>中任一項(xiàng)所述的文件再現(xiàn)設(shè)備，
[1035]其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
[1036]<14> 一種文件再現(xiàn)方法，包括:
[1037]從存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件中獲取由所述HDR指定信息指定的HDR信息，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
[1038]<15> 一種文件生成設(shè)備，包括:
[1039]文件生成單元，所述文件生成單元生成存儲HDR信息軌道和目標(biāo)軌道的文件，所述HDR信息軌道是HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述目標(biāo)軌道包括軌道指定信息和HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
[1040]<16>根據(jù)〈15>所述的文件生成設(shè)備，
[1041]其中，所述文件是具有盒結(jié)構(gòu)的文件。
[1042]<17>根據(jù)〈16>所述的文件生成設(shè)備，
[1043]其中，所述文件是ISO/IEC 14496-14中規(guī)定的MP4文件。
[1044]<18>根據(jù)〈17>所述的文件生成設(shè)備，
[1045]其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)。
[1046]<19>根據(jù)〈17>或〈18>所述的文件生成設(shè)備，
[1047]其中，所述目標(biāo)軌道包括軌道參考類型盒TrackReferenceTypeBox，其中，tmpi被定義為TrackReferenceTypeBox的參考類型reference_type，并且表示包括在軌道參考盒TrackReferenceBox中的TrackReferenceTypeBox要被用于存儲所述軌道指定信息，所述tmpi 變成所述 reference_type。
[1048]<20>根據(jù)〈15>至〈19>中任一項(xiàng)所述的文件生成設(shè)備，
[1049]其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
[1050]<21> 一種文件生成方法，包括:
[1051]生成存儲HDR信息軌道和目標(biāo)軌道的文件，所述HDR信息軌道是HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述目標(biāo)軌道包括軌道指定信息和HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
[1052]<22> 一種文件再現(xiàn)設(shè)備，包括:
[1053]獲取單元，所述獲取單元從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息，
[1054]所述HDR信息軌道是所述HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及
[1055]所述目標(biāo)軌道包括所述軌道指定信息和所述HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
[1056]<23>根據(jù)〈22>所述的文件再現(xiàn)設(shè)備，
[1057]其中，所述文件是具有盒結(jié)構(gòu)的文件。
[1058]〈24>根據(jù)〈23>所述的文件再現(xiàn)設(shè)備，
[1059]其中，所述文件是ISO/IEC 14496-14中規(guī)定的MP4文件。
[1060]<25>根據(jù)〈24>所述的文件再現(xiàn)設(shè)備，
[1061]其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)，以及
[1062]其中，所述獲取單元獲取由所述目標(biāo)軌道中包括的tirf盒中存儲的HDR指定信息指定的HDR信息。
[1063]<26>根據(jù)〈24>或〈25>所述的文件生成設(shè)備，
[1064]其中，所述目標(biāo)軌道包括軌道參考類型盒TrackReferenceTypeBox，其中，tmpi被定義為TrackReferenceTypeBox的參考類型reference_type，并且表示包括在軌道參考盒TrackReferenceBox中的TrackReferenceTypeBox要被用于存儲所述軌道指定信息，所述tmpi 變成所述 reference_type,以及
[1065]其中，所述獲取單元從由所述reference_type變成所述tmpi的TrackReferenceTypeBox中存儲的軌道指定信息指定的HDR信息軌道的HDR信息中獲取由HDR指定信息指定的HDR信息。
[1066]<27>根據(jù)〈22>至〈26>中任一項(xiàng)所述的文件再現(xiàn)設(shè)備，
[1067]其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
[1068]<28> 一種文件再現(xiàn)方法，包括:
[1069]從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息，
[1070]所述HDR信息軌道是所述HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及
[1071]所述目標(biāo)軌道包括所述軌道指定信息和所述HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
[1072]附圖標(biāo)記列表
[1073]I生成設(shè)備
[1074]2再現(xiàn)設(shè)備
[1075]3顯示設(shè)備
[1076]4 電纜
[1077]11記錄介質(zhì)
[1078]12傳輸介質(zhì)
[1079]21控制器
[1080]21A報頭信息生成單元
[1081]22編碼處理單元
[1082]23文件生成單元
[1083]31特征信息生成單元
[1084]32編碼器
[1085]33轉(zhuǎn)換單元
[1086]34轉(zhuǎn)換信息生成單元
[1087]35編碼器
[1088]36流生成單元
[1089]51文件采集單元
[1090]52分解單元
[1091]53操縱輸入單元
[1092]54控制器
[1093]55解碼處理單元
[1094]55A，55B 解碼器
[1095]56組合輸出單元
[1096]101控制器
[1097]1lA 存儲器
[1098]102通信單元
[1099]103信號處理單元
[1100]104監(jiān)視器
[1101]121A報頭信息生成單元
[1102]122編碼處理單元
[1103]131特征信息生成單元
[1104]132轉(zhuǎn)換信息生成單元
[1105]133流生成單元
[1106]141控制器
[1107]142解碼處理單元
[1108]142A, 142B 解碼器
[1109]201A報頭信息生成單元
[1110]202編碼處理單元
[1111]203文件生成單元
[1112]211流生成單元
[1113]231分解單元
[1114]232控制器
[1115]233解碼處理單元
[1116]233A，233B 解碼器
[1117]301A報頭信息生成單元
[1118]302編碼處理單元
[1119]311流生成單元
[1120]321控制器
[1121]322解碼處理單元
[1122]322A，322B 解碼器
[1123]401 總線
[1124]402 CPU
[1125]403 ROM
[1126]404 RAM
[1127]405 硬盤
[1128]406輸出單元
[1129]407輸入單元
[1130]408通信單元
[1131]409驅(qū)動器
[1132]410輸入/輸出接口
[1133]411可移動記錄介質(zhì)
[1134]1001，1002 元素
【權(quán)利要求】
1.一種文件生成設(shè)備，包括: 文件生成單元，所述文件生成單元生成存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
2.根據(jù)權(quán)利要求1所述的文件生成設(shè)備， 其中，所述文件是具有盒結(jié)構(gòu)的文件。
3.根據(jù)權(quán)利要求2所述的文件生成設(shè)備， 其中，所述文件是ISO/IEC 14496-14中規(guī)定的MP4文件。
4.根據(jù)權(quán)利要求3所述的文件生成設(shè)備， 其中，所述目標(biāo)軌道包括被定義為存儲所述HDR信息的盒的tinf盒(ToneMappinglnformat1nBox，色調(diào)映射信息盒)。
5.根據(jù)權(quán)利要求4所述的文件生成設(shè)備， 其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)。
6.根據(jù)權(quán)利要求3所述的文件生成設(shè)備， 其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
7.一種文件生成方法，包括: 生成存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
8.一種文件再現(xiàn)設(shè)備，包括: 獲取單元，所述獲取單元從存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件中獲取由所述HDR指定信息指定的HDR信息，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
9.根據(jù)權(quán)利要求8所述的文件再現(xiàn)設(shè)備， 其中，所述文件是具有盒結(jié)構(gòu)的文件。
10.根據(jù)權(quán)利要求9所述的文件再現(xiàn)設(shè)備， 其中，所述文件是IS0/IEC 14496-14中規(guī)定的MP4文件。
11.根據(jù)權(quán)利要求10所述的文件再現(xiàn)設(shè)備， 其中，所述目標(biāo)軌道包括被定義為存儲所述HDR信息的盒的tinf盒(ToneMappinglnformat1nBox，色調(diào)映射信息盒)，以及 其中，所述獲取單元獲取所述tinf盒中存儲的HDR信息。
12.根據(jù)權(quán)利要求11所述的文件再現(xiàn)設(shè)備， 其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)，以及 其中，所述獲取單元獲取由所述tirf盒中存儲的HDR指定信息指定的HDR信息。
13.根據(jù)權(quán)利要求10所述的文件再現(xiàn)設(shè)備， 其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
14.一種文件再現(xiàn)方法，包括: 從存儲包括HDR信息和HDR指定信息的目標(biāo)軌道的文件中獲取由所述HDR指定信息指定的HDR信息，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述HDR指定信息指定要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息。
15.—種文件生成設(shè)備，包括: 文件生成單元，所述文件生成單元生成存儲HDR信息軌道和目標(biāo)軌道的文件，所述HDR信息軌道是HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述目標(biāo)軌道包括軌道指定信息和HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
16.根據(jù)權(quán)利要求15所述的文件生成設(shè)備， 其中，所述文件是具有盒結(jié)構(gòu)的文件。
17.根據(jù)權(quán)利要求16所述的文件生成設(shè)備， 其中，所述文件是IS0/IEC 14496-14中規(guī)定的MP4文件。
18.根據(jù)權(quán)利要求17所述的文件生成設(shè)備， 其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)。
19.根據(jù)權(quán)利要求18所述的文件生成設(shè)備， 其中，所述目標(biāo)軌道包括軌道參考類型盒TrackReferenceTypeBox，其中，tmpi被定義為TrackReferenceTypeBox的參考類型reference_type，并且表示包括在軌道參考盒TrackReferenceBox中的TrackReferenceTypeBox要被用于存儲所述軌道指定信息，所述tmpi 變成所述 reference_type。
20.根據(jù)權(quán)利要求17所述的文件生成設(shè)備， 其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
21.一種文件生成方法，包括: 生成存儲HDR信息軌道和目標(biāo)軌道的文件，所述HDR信息軌道是HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD (標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及所述目標(biāo)軌道包括軌道指定信息和HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
22.—種文件再現(xiàn)設(shè)備，包括: 獲取單元，所述獲取單元從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息， 所述HDR信息軌道是所述HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及 所述目標(biāo)軌道包括所述軌道指定信息和所述HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
23.根據(jù)權(quán)利要求22所述的文件再現(xiàn)設(shè)備， 其中，所述文件是具有盒結(jié)構(gòu)的文件。
24.根據(jù)權(quán)利要求23所述的文件再現(xiàn)設(shè)備， 其中，所述文件是ISO/IEC 14496-14中規(guī)定的MP4文件。
25.根據(jù)權(quán)利要求24所述的文件再現(xiàn)設(shè)備， 其中，所述目標(biāo)軌道包括被定義為存儲所述HDR指定信息的盒的tirf盒(ToneMappinglnformat1nReferenceBox，色調(diào)映射信息參考盒)，以及 其中，所述獲取單元獲取由所述目標(biāo)軌道中包括的tirf盒中存儲的HDR指定信息指定的HDR信息。
26.根據(jù)權(quán)利要求25所述的文件生成設(shè)備， 其中，所述目標(biāo)軌道包括軌道參考類型盒TrackReferenceTypeBox，其中，tmpi被定義為TrackReferenceTypeBox的參考類型reference_type，并且表示包括在軌道參考盒TrackReferenceBox中的TrackReferenceTypeBox要被用于存儲所述軌道指定信息，所述tmpi 變成所述 reference_type,以及 其中，所述獲取單元從由所述reference_type變成所述tmpi的TrackReferenceTypeBox中存儲的軌道指定信息指定的HDR信息軌道的HDR信息中獲取由HDR指定信息指定的HDR信息。
27.根據(jù)權(quán)利要求24所述的文件再現(xiàn)設(shè)備， 其中，所述HDR信息是要被共同應(yīng)用于圖像的多個分量的HDR信息、要被應(yīng)用于圖像的多個分量中的一個分量的HDR信息、或者要被應(yīng)用于圖像的多個分量中的每個分量的HDR信息。
28.一種文件再現(xiàn)方法，包括: 從存儲HDR信息軌道和目標(biāo)軌道的文件中獲取由軌道指定信息指定的HRD信息軌道的HDR信息中的、由HDR指定信息指定的HDR信息， 所述HDR信息軌道是所述HDR信息的流的軌道，所述HDR信息被配置有特征信息和轉(zhuǎn)換信息，所述特征信息表示具有比STD(標(biāo)準(zhǔn))圖像的動態(tài)范圍更高的動態(tài)范圍的HDR(高動態(tài)范圍)圖像的亮度的特征，所述轉(zhuǎn)換信息表示將所述STD圖像和所述HDR圖像中的一個圖像轉(zhuǎn)換成另一圖像的轉(zhuǎn)換規(guī)則，以及 所述目標(biāo)軌道包括所述軌道指定信息和所述HDR指定信息，所述軌道指定信息指定包括要被應(yīng)用于關(guān)注的目標(biāo)軌道的HDR信息的HDR信息軌道，所述HDR指定信息指定由所述軌道指定信息指定的HDR信息軌道的HDR信息中的、要被應(yīng)用于所述目標(biāo)軌道的HDR信息。
【文檔編號】H04N21/44GK104509094SQ201480001938
【公開日】2015年4月8日 申請日期:2014年7月10日 優(yōu)先權(quán)日:2013年7月19日
【發(fā)明者】高橋遼平, 內(nèi)村幸一, 服部忍 申請人:索尼公司