高光片段提取方法、裝置、設備、芯片、存儲介質及產品與流程

本申請涉及視頻理解領域，尤其涉及一種高光片段提取方法、裝置、設備、芯片、存儲介質及產品。

背景技術：

1、近年來影視劇數量激增，人們不僅需要花費大量時間來處理視頻信息，還有可能挑選到不感興趣的影視劇，從而進行無效的時間投入，同時，由于社會的快節奏與時間碎片化，觀眾很難找到足夠的時間來觀看完整的影視劇，因此，剪輯過的影視劇短片段也就越來越受到觀眾的青睞，各大視頻應用也相繼推出了僅看影視劇高光片段的功能。然而，在提取高光片段的相關技術中，制定高光片段的標準并不統一，不能涵蓋所有類別場景中的高光時刻，且容易造成邊界模糊和過度分割，不能保證觀眾最佳的觀看體驗。

技術實現思路

1、為解決上述技術問題，本申請實施例提供了一種高光片段提取方法、裝置、設備、芯片、存儲介質及產品。

2、本申請實施例提供的高光片段提取方法，包括：

3、對待處理的視頻進行分割，得到n個片段，n為正整數；

4、從所述n個片段中篩選出m個片段，m為小于等于n的正整數；其中，所述m個片段中的每個片段均滿足以下要求：片段中人物出現的時長在該片段總時長中的占比大于等于第一閾值；

5、對所述m個片段中的每個片段進行高光相關特征的檢測，基于所述每個片段的檢測結果確定所述每個片段是高光片段或不是高光片段。

6、本申請實施例提供的高光片段提取裝置，包括：

7、第一處理單元，用于對待處理的視頻進行分割，得到n個片段，n為正整數；

8、第二處理單元，用于從所述n個片段中篩選出m個片段，m為小于等于n的正整數；其中，所述m個片段中的每個片段均滿足以下要求：片段中人物出現的時長在該片段總時長中的占比大于等于第一閾值；

9、確定單元，用于對所述m個片段中的每個片段進行高光相關特征的檢測，基于所述每個片段的檢測結果確定所述每個片段是高光片段或不是高光片段。

10、本申請實施例提供的高光片段提取設備，包括：處理器和存儲器，該存儲器用于存儲計算機程序，所述處理器用于調用并運行所述存儲器中存儲的計算機程序，執行本申請實施例所提供的任意一種高光片段提取方法。

11、本申請實施例提供的芯片，包括：處理器，用于從存儲器中調用并運行計算機程序，使得安裝有所述芯片的設備執行本申請實施例所提供的任意一種高光片段提取方法。

12、本申請實施例提供的計算機可讀存儲介質，用于存儲計算機程序，所述計算機程序使得計算機執行本申請實施例所提供的任意一種高光片段提取方法。

13、本申請實施例提供的計算機程序產品，包括：計算機程序指令，所述計算機程序指令使得計算機執行本申請實施例所提供的任意一種高光片段提取方法。

14、本申請實施例的技術方案中，通過對待處理的視頻進行分割，得到n個片段，從n個片段中篩選出m個片段，其中，m個片段中的每個片段均滿足以下要求：片段中人物出現的時長在該片段總時長中的占比大于等于第一閾值，并對m個片段中的每個片段進行高光相關特征的檢測，從而基于每個片段的檢測結果確定每個片段是高光片段或不是高光片段。如此，以鏡頭為操作單元，對片段進行非人物鏡頭的過濾，再對過濾后的片段進行高光相關特征的檢測，既能夠有效提升高光片段提取方法的普適性，還可以保證高光片段的連續性，提升觀眾的觀看體驗。

技術特征：

1.一種高光片段提取方法，其特征在于，所述方法包括：

2.根據權利要求1所述的方法，其特征在于，所述高光相關特征包括人臉匹配信息、鏡頭信息、場景信息以及行為識別信息；

3.根據權利要求2所述的方法，其特征在于，所述從該片段中提取第一幀序列，基于所述第一幀序列確定該片段的人臉信息、鏡頭信息以及場景信息，包括：

4.根據權利要求2所述的方法，其特征在于，所述從該片段中提取第二幀序列，基于所述第二幀序列確定該片段的行為識別信息，包括：

5.根據權利要求4所述的方法，其特征在于，所述對該片段進行關鍵幀提取，得到第二幀序列，包括：

6.根據權利要求5所述的方法，其特征在于，所述從所述p簇特征序列中的各簇特征序列中分別選擇一個特征向量，包括：

7.根據權利要求6所述的方法，其特征在于，所述得分包括代表性得分和差異性得分；

8.一種高光片段提取裝置，其特征在于，所述裝置包括：

9.一種高光片段提取設備，其特征在于，包括：處理器和存儲器，該存儲器用于存儲計算機程序，所述處理器用于調用并運行所述存儲器中存儲的計算機程序，執行如權利要求1至7中任一項所述的方法。

10.一種芯片，其特征在于，包括：處理器，用于從存儲器中調用并運行計算機程序，使得安裝有所述芯片的設備執行如權利要求1至7中任一項所述的方法。

11.一種計算機可讀存儲介質，其特征在于，用于存儲計算機程序，所述計算機程序使得計算機執行如權利要求1至7中任一項所述的方法。

12.一種計算機程序產品，其特征在于，包括：計算機程序指令，所述計算機程序指令使得計算機執行如權利要求1至7中任一項所述的方法。

技術總結
本申請實施例公開了一種高光片段提取方法、裝置、設備、芯片、存儲介質及產品，其中，所述方法包括：對待處理的視頻進行分割，得到N個片段，N為正整數；從所述N個片段中篩選出M個片段，M為小于等于N的正整數；其中，所述M個片段中的每個片段均滿足以下要求：片段中人物出現的時長在該片段總時長中的占比大于等于第一閾值；對所述M個片段中的每個片段進行高光相關特征的檢測，基于所述每個片段的檢測結果確定所述每個片段是高光片段或不是高光片段。

技術研發人員：張云路,張毅,黃文輝
受保護的技術使用者：中國移動通信有限公司研究院
技術研發日：
技術公布日：2024/10/21