本申請實施例涉及數據處理,尤其涉及一種多源異構數據處理方法及裝置。
背景技術:
1、隨著新型電力系統的發展,光伏、風電等可再生能源在電力系統中的比例增大,對電力系統物理性質帶來改變的同時,也使得電力系統數據呈現異構化、復雜化。同時,各種外部系統接入會產生海量的數據,并呈現出多樣性、多來源和不確定性特點。多來源、異構化、復雜化的各類數據對新型電力系統的數據處理帶來了巨大壓力,直接影響著新型電力系統的發展。
技術實現思路
1、有鑒于此,本申請實施例的目的在于提出一種多源異構數據處理方法及裝置。
2、基于上述目的,本申請實施例提供了一種多源異構數據處理方法,包括:
3、獲取新型電力系統的多源數據;
4、對所述多源數據進行降噪處理,得到降噪后的多源數據;
5、對所述降噪后的多源數據進行標準化處理,得到標準化的多源數據;
6、利用預設的融合方法對所述標準化的多源數據進行融合處理,得到融合后的多源數據。
7、可選的,所述對多源數據進行降噪處理,得到降噪后的多源數據,包括:
8、對所述多源數據中的任意一項原始數據進行小波變換,得到該原始數據對應的各層小波系數;
9、根據各層小波系數,確定各層對應的小波系數峰值比;
10、根據各層的小波系數峰值比和各層的數據長度,確定各層對應的峰和比調節因子;
11、根據各層的峰和比調節因子、噪聲估值、原始數據總長度和能量調節因子,確定各層對應的閾值;其中,所述能量調節因子是根據各層的能量值確定的,所述能量值是根據小波系數和相應層的數據長度確定的;
12、根據各層的閾值對相應層的小波系數進行降噪處理,得到去除噪聲后的各層的小波系數;
13、基于去除噪聲后的各層的小波系數,重構降噪后的原始數據。
14、可選的,確定所述能量調節因子的方法包括:
15、根據各層的小波系數和相應層的數據長度,確定各層對應的能量值;
16、根據各層的能量值,確定能量極值對應的臨界分解層;
17、對于小于所述臨界分解層的層,將所述能量調節因子設置為第一能量調節因子,對于大于等于所述臨界分解層的層,將所述能量調節因子設置為第二能量調節因子,且所述第二能量調節因子大于第一能量調節因子。
18、可選的,根據各層的峰和比調節因子、噪聲估值、原始數據總長度和能量調節因子,確定各層對應的閾值,方法為:
19、
20、其中,λj為第j層的閾值,<為噪聲估值,n為原始數據總長度,r為能量調節因子,fj為第j層的峰和比調節因子。
21、可選的,所述第一能量調節因子的取值范圍為-0.5-0.3,所述第二能量調節因子的取值范圍為0.1-0.3。
22、可選的,對所述降噪后的多源數據進行標準化處理,得到標準化的多源數據,包括:
23、對所述降噪后的多源數據進行yeo-johnson變換,得到變換后的多源數據;
24、對所述變換后的多源數據進行標準分數處理,得到標準預處理后的多源數據;
25、對所述標準預處理后的多源數據進行量級統一化處理,得到量級統一的多源數據;
26、對所述量級統一的多源數據進行時間一致性處理,得到時間一致的多源數據。
27、可選的,利用預設的融合方法對所述標準化的多源數據進行融合處理,包括:
28、利用ds推理方法對所述標準化的多源數據進行融合處理。
29、可選的,所述獲取新型電力系統的多源數據,包括:
30、根據預設的目標需求,獲取對應的目標多源數據;
31、所述得到融合后的多源數據為:得到融合后的目標多源數據。
32、可選的,所述方法還包括:
33、基于所述融合后的目標多源數據,利用預設的預測模型,確定與所述目標需求對應的預測結果。
34、本申請實施例還提供一種多源異構數據處理裝置,包括:
35、獲取模塊,用于獲取新型電力系統的多源數據;
36、降噪模塊,用于對多源數據進行降噪處理,得到降噪后的多源數據;
37、標準化模塊,用于對所述降噪后的多源數據進行標準化處理,得到標準化的多源數據;
38、融合模塊,用于利用預設的融合方法對所述標準化的多源數據進行融合處理,得到融合后的多源數據。
39、從上面所述可以看出,本申請實施例提供的多源異構數據處理方法及裝置,獲取新型電力系統的多源數據,對多源數據進行降噪處理,得到降噪后的多源數據,對降噪后的多源數據進行標準化處理,得到標準化的多源數據,利用預設的融合方法對標準化的多源數據進行融合處理,得到融合后的多源數據。本申請能夠提高融合數據的準確性和可靠性,滿足新型電力需求的不同應用。
1.一種多源異構數據處理方法,其特征在于,包括:
2.根據權利要求1所述的方法,其特征在于,所述對多源數據進行降噪處理,得到降噪后的多源數據,包括:
3.根據權利要求2所述的方法,其特征在于,確定所述能量調節因子的方法包括:
4.根據權利要求3所述的方法,其特征在于,根據各層的峰和比調節因子、噪聲估值、原始數據總長度和能量調節因子,確定各層對應的閾值,方法為:
5.根據權利要求3或4所述的方法,其特征在于,所述第一能量調節因子的取值范圍為-0.5-0.3,所述第二能量調節因子的取值范圍為0.1-0.3。
6.根據權利要求1所述的方法,其特征在于,對所述降噪后的多源數據進行標準化處理,得到標準化的多源數據,包括:
7.根據權利要求1所述的方法,其特征在于,利用預設的融合方法對所述標準化的多源數據進行融合處理,包括:
8.根據權利要求1所述的方法,其特征在于,所述獲取新型電力系統的多源數據,包括:
9.根據權利要求8所述的方法,其特征在于,還包括:
10.一種多源異構數據處理裝置,其特征在于,包括: