DE-102025144128-A1 - BILDVERBESSERUNGSVERFAHREN, ELEKTRONISCHE EINRICHTUNG UND SPEICHERMEDIUM

Abstract

In der vorliegenden Offenbarung werden ein Bildverbesserungsverfahren, eine elektronische Einrichtung und ein Speichermedium bereitgestellt. Das Verfahren umfasst Durchführen einer Abtastratenverringerung auf mehreren Stufen an einem ersten Bild, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; Durchführen einer Abtastratenerhöhung auf mehreren Stufen an einem Codierungsmerkmal, das durch Abtastratenverringerung auf einer letzten Stufe erlangt wurde, um mehrere Decodierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; und Erlangen eines zweiten Bildes basierend auf einem durch Abtastratenerhöhung auf einer letzten Stufe erlangten Decodierungsmerkmal, wobei eine Auflösung des zweiten Bildes höher ist als eine Auflösung des ersten Bildes. Die Abtastratenerhöhung auf jeder nicht-ersten Stufe kann Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters, um ein verschmolzenes Merkmal zu erlangen, und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfassen.

Inventors

• Yilan WANG

Assignees

• SMARTER SILICON (SHANGHAI) TECHNOLOGIES CO., LTD.

Dates

Publication Date

20260507

Application Date

20251028

Priority Date

20241104

Claims (20)

1. Bildverbesserungsverfahren, umfassend: Durchführen einer Abtastratenverringerung auf mehreren Stufen an einem ersten Bild, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; Durchführen einer Abtastratenerhöhung auf mehreren Stufen an einem Codierungsmerkmal, das durch Abtastratenverringerung auf einer letzten Stufe erlangt wurde, um mehrere Decodierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen, wobei eine Abtastratenerhöhung auf jeder nicht-ersten Stufe Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters, um ein verschmolzenes Merkmal zu erlangen, und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfasst; und ein Prozess eines Erlangens eines verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters gemäß einem vorgelernten Verschmelzungsparameter umfasst; und Erlangen eines zweiten Bildes basierend auf einem durch Abtastratenerhöhung auf einer letzten Stufe erlangten Decodierungsmerkmal, wobei eine Auflösung des zweiten Bildes höher ist als eine Auflösung des ersten Bildes.
2. Verfahren nach Anspruch 1 , wobei das Verschmelzen des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters gemäß dem vorgelernten Verschmelzungsparameter umfasst: basierend auf dem Verschmelzungsparameter, dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters, Berechnen eines ersten Gewichts des Codierungsmerkmals, das den gleichen Abtastratenparameter aufweist wie das durch Abtastratenerhöhung auf der vorherigen Stufe erlangte Decodierungsmerkmal; und Durchführen einer gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht.
3. Verfahren nach Anspruch 2 , wobei das Durchführen der gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht umfasst: Erlangen eines zweiten Gewichts des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals basierend auf dem ersten Gewicht; und, basierend auf dem ersten Gewicht und dem zweiten Gewicht, Durchführen einer gewichteten Berechnung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters.
4. Verfahren nach Anspruch 2 , wobei das Durchführen der gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht umfasst: Aufsummieren des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals und des Codierungsmerkmals des gleichen Abtastratenparameters, um ein anfängliches verschmolzenes Merkmal zu erlangen; Erlangen eines zweiten Gewichts des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals basierend auf dem ersten Gewicht; und, basierend auf dem ersten Gewicht und dem zweiten Gewicht, Durchführen einer gewichteten Berechnung an dem anfänglichen verschmolzenen Merkmal und dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal.
5. Verfahren nach Anspruch 1 , wobei der Prozess des Durchführens der Abtastratenverringerung auf den mehreren Stufen an dem ersten Bild, des Durchführens der Abtastratenerhöhung auf den mehreren Stufen an dem durch Abtastratenverringerung auf der letzten Stufe erlangten Codierungsmerkmal und des Erlangens des zweiten Bildes basierend auf dem durch Abtastratenerhöhung auf der letzten Stufe erlangten Decodierungsmerkmal umfasst: Durchführen einer Abtastratenverringerung auf den mehreren Stufen an dem ersten Bild unter Verwendung eines ersten Codierungsmoduls eines Verbesserungsnetzwerks; Durchführen einer Abtastratenerhöhung auf den mehreren Stufen an dem durch Abtastratenverringerung auf der letzten Stufe erlangten Codierungsmerkmal unter Verwendung eines Decodierungsmoduls des Verbesserungsnetzwerks, wobei die Abtastratenerhöhung auf jeder nicht-ersten Stufe Erlangen des verschmolzenen Merkmals durch Verschmelzen des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters unter Verwendung eines Verschmelzungsmoduls des Verbesserungsnetzwerks und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfasst; und der Prozess des Erlangens des verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe Verschmelzen, durch das Verschmelzungsmodul, des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters gemäß dem vorgelernten Verschmelzungsparameter umfasst; und Verarbeiten des durch Abtastratenerhöhung auf der letzten Stufe erlangten Decodierungsmerkmals, um das zweite Bild zu erlangen, unter Verwendung eines Ausgabemoduls des Verbesserungsnetzwerks.
6. Verfahren nach Anspruch 5 , wobei das Verbesserungsnetzwerk mittels einer Trainingsmethode erlangt wird, die umfasst: basierend auf Bildern hoher Qualität in einem ersten Bildsatz, Durchführen eines unüberwachten Trainings an einem von einem zweiten Codierungsmodul, dem Decodierungsmodul und dem Ausgabemodul erlangten anfänglichen Netzwerk, um ein vortrainiertes Netzwerk zu erlangen, wobei der erste Bildsatz mehrere Bilder geringer Qualität und Bilder hoher Qualität, die allen Bildern geringer Qualität entsprechen, umfasst; und das zweite Codierungsmodul dazu eingerichtet ist, eine Abtastratenverringerung auf mehreren Stufen an einem eingegebenen Bild hoher Qualität durchzuführen, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; und, basierend auf dem vortrainierten Netzwerk, Durchführen eines überwachten Trainings an dem ersten Codierungsmodul und dem Verschmelzungsmodul unter Verwendung des ersten Bildsatzes, um ein trainiertes erstes Codierungsmodul und ein trainiertes Verschmelzungsmodul zu erlangen, wobei das trainierte erste Codierungsmodul, das trainierte Verschmelzungsmodul und das Decodierungsmodul und das Ausgabemodul in dem vortrainierten Netzwerk das verbesserte Netzwerk bilden.
7. Verfahren nach Anspruch 6 , wobei das Durchführen, basierend auf dem vortrainierten Netzwerk, des überwachten Trainings an dem ersten Codierungsmodul unter Verwendung des ersten Bildsatzes umfasst: für ein Bild geringer Qualität in dem ersten Bildsatz, Eingeben eines Bildes geringer Qualität in das erste Codierungsmodul, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern eines Bildes geringer Qualität zu erlangen; Eingeben eines einem Bild geringer Qualität entsprechenden Bildes hoher Qualität in das zweite Codierungsmodul in dem vortrainierten Netzwerk, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern des einem Bild geringer Qualität entsprechenden Bildes hoher Qualität zu erlangen; und Aktualisieren eines Parameters des ersten Codierungsmoduls mit dem Ziel, einen ersten Unterschied zwischen einem Codierungsmerkmal eines Bildes geringer Qualität und einem Codierungsmerkmal, das zu dem einem Bild geringer Qualität entsprechenden Bild hoher Qualität gehört und den gleichen Abtastratenparameter wie das Codierungsmerkmal eines Bildes geringer Qualität aufweist, zu minimieren.
8. Elektronische Einrichtung, aufweisend: einen Speicher, der dazu eingerichtet ist, ein Computerprogramm zu speichern; und einen oder mehrere Prozessoren, die dazu eingerichtet sind, bei Ausführung des Computerprogramms durchzuführen: Durchführen einer Abtastratenverringerung auf mehreren Stufen an einem ersten Bild, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; Durchführen einer Abtastratenerhöhung auf mehreren Stufen an einem Codierungsmerkmal, das durch Abtastratenverringerung auf einer letzten Stufe erlangt wurde, um mehrere Decodierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen, wobei eine Abtastratenerhöhung auf jeder nicht-ersten Stufe Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters, um ein verschmolzenes Merkmal zu erlangen, und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfasst; und ein Prozess eines Erlangens eines verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters gemäß einem vorgelernten Verschmelzungsparameter umfasst; und Erlangen eines zweiten Bildes basierend auf einem durch Abtastratenerhöhung auf einer letzten Stufe erlangten Decodierungsmerkmal, wobei eine Auflösung des zweiten Bildes höher ist als eine Auflösung des ersten Bildes.
9. Elektronische Einrichtung nach Anspruch 8 , wobei die einen oder mehreren Prozessoren zum Verschmelzen des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters gemäß dem vorgelernten Verschmelzungsparameter ferner dazu eingerichtet sind, durchzuführen: basierend auf dem Verschmelzungsparameter, dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters, Berechnen eines ersten Gewichts des Codierungsmerkmals, das den gleichen Abtastratenparameter aufweist wie das durch Abtastratenerhöhung auf der vorherigen Stufe erlangte Decodierungsmerkmal; und Durchführen einer gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht.
10. Elektronische Einrichtung nach Anspruch 9 , wobei die einen oder mehreren Prozessoren zum Durchführen der gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht ferner dazu eingerichtet sind, durchzuführen: Erlangen eines zweiten Gewichts des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals basierend auf dem ersten Gewicht; und, basierend auf dem ersten Gewicht und dem zweiten Gewicht, Durchführen einer gewichteten Berechnung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters.
11. Elektronische Einrichtung nach Anspruch 9 , wobei die einen oder mehreren Prozessoren zum Durchführen der gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht ferner dazu eingerichtet sind, durchzuführen: Aufsummieren des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals und des Codierungsmerkmals des gleichen Abtastratenparameters, um ein anfängliches verschmolzenes Merkmal zu erlangen; Erlangen eines zweiten Gewichts des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals basierend auf dem ersten Gewicht; und, basierend auf dem ersten Gewicht und dem zweiten Gewicht, Durchführen einer gewichteten Berechnung an dem anfänglichen verschmolzenen Merkmal und dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal.
12. Elektronische Einrichtung nach Anspruch 8 , wobei die einen oder mehreren Prozessoren für den Prozess des Durchführens der Abtastratenverringerung auf den mehreren Stufen an dem ersten Bild, des Durchführens der Abtastratenerhöhung auf den mehreren Stufen an dem durch Abtastratenverringerung auf der letzten Stufe erlangten Codierungsmerkmal und des Erlangens des zweiten Bildes basierend auf dem durch Abtastratenerhöhung auf der letzten Stufe erlangten Decodierungsmerkmal ferner dazu eingerichtet sind, durchzuführen: Durchführen einer Abtastratenverringerung auf den mehreren Stufen an dem ersten Bild unter Verwendung eines ersten Codierungsmoduls eines Verbesserungsnetzwerks; Durchführen einer Abtastratenerhöhung auf den mehreren Stufen an dem durch Abtastratenverringerung auf der letzten Stufe erlangten Codierungsmerkmal unter Verwendung eines Decodierungsmoduls des Verbesserungsnetzwerks, wobei die Abtastratenerhöhung auf jeder nicht-ersten Stufe Erlangen des verschmolzenen Merkmals durch Verschmelzen des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters unter Verwendung eines Verschmelzungsmoduls des Verbesserungsnetzwerks und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfasst; und der Prozess des Erlangens des verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe Verschmelzen, durch das Verschmelzungsmodul, des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters gemäß dem vorgelernten Verschmelzungsparameter umfasst; und Verarbeiten des durch Abtastratenerhöhung auf der letzten Stufe erlangten Decodierungsmerkmals, um das zweite Bild zu erlangen, unter Verwendung eines Ausgabemoduls des Verbesserungsnetzwerks.
13. Elektronische Einrichtung nach Anspruch 12 , wobei das Verbesserungsnetzwerk mittels einer Trainingsmethode erlangt wird, die umfasst: basierend auf Bildern hoher Qualität in einem ersten Bildsatz, Durchführen eines unüberwachten Trainings an einem von einem zweiten Codierungsmodul, dem Decodierungsmodul und dem Ausgabemodul erlangten anfänglichen Netzwerk, um ein vortrainiertes Netzwerk zu erlangen, wobei der erste Bildsatz mehrere Bilder geringer Qualität und Bilder hoher Qualität, die allen Bildern geringer Qualität entsprechen, umfasst; und das zweite Codierungsmodul dazu eingerichtet ist, eine Abtastratenverringerung auf mehreren Stufen an einem eingegebenen Bild hoher Qualität durchzuführen, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; und, basierend auf dem vortrainierten Netzwerk, Durchführen eines überwachten Trainings an dem ersten Codierungsmodul und dem Verschmelzungsmodul unter Verwendung des ersten Bildsatzes, um ein trainiertes erstes Codierungsmodul und ein trainiertes Verschmelzungsmodul zu erlangen, wobei das trainierte erste Codierungsmodul, das trainierte Verschmelzungsmodul und das Decodierungsmodul und das Ausgabemodul in dem vortrainierten Netzwerk das verbesserte Netzwerk bilden.
14. Elektronische Einrichtung nach Anspruch 13 , wobei die einen oder mehreren Prozessoren für das auf dem vortrainierten Netzwerk basierende Durchführen des überwachten Trainings an dem ersten Codierungsmodul unter Verwendung des ersten Bildsatzes ferner dazu eingerichtet sind, durchzuführen: für ein Bild geringer Qualität in dem ersten Bildsatz, Eingeben eines Bildes geringer Qualität in das erste Codierungsmodul, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern eines Bildes geringer Qualität zu erlangen; Eingeben eines einem Bild geringer Qualität entsprechenden Bildes hoher Qualität in das zweite Codierungsmodul in dem vortrainierten Netzwerk, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern des einem Bild geringer Qualität entsprechenden Bildes hoher Qualität zu erlangen; und Aktualisieren eines Parameters des ersten Codierungsmoduls mit dem Ziel, einen ersten Unterschied zwischen einem Codierungsmerkmal eines Bildes geringer Qualität und einem Codierungsmerkmal, das zu dem einem Bild geringer Qualität entsprechenden Bild hoher Qualität gehört und den gleichen Abtastratenparameter wie das Codierungsmerkmal eines Bildes geringer Qualität aufweist, zu minimieren.
15. Nichtflüchtiges computerlesbares Speichermedium, das ein Computerprogramm enthält, das bei Ausführung bewirkt, dass ein oder mehrere Prozessoren durchführen: Durchführen einer Abtastratenverringerung auf mehreren Stufen an einem ersten Bild, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; Durchführen einer Abtastratenerhöhung auf mehreren Stufen an einem Codierungsmerkmal, das durch Abtastratenverringerung auf einer letzten Stufe erlangt wurde, um mehrere Decodierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen, wobei eine Abtastratenerhöhung auf jeder nicht-ersten Stufe Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters, um ein verschmolzenes Merkmal zu erlangen, und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfasst; und ein Prozess eines Erlangens eines verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters gemäß einem vorgelernten Verschmelzungsparameter umfasst; und Erlangen eines zweiten Bildes basierend auf einem durch Abtastratenerhöhung auf einer letzten Stufe erlangten Decodierungsmerkmal, wobei eine Auflösung des zweiten Bildes höher ist als eine Auflösung des ersten Bildes.
16. Speichermedium nach Anspruch 15 , wobei die einen oder mehreren Prozessoren zum Verschmelzen des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters gemäß dem vorgelernten Verschmelzungsparameter ferner dazu eingerichtet sind, durchzuführen: basierend auf dem Verschmelzungsparameter, dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters, Berechnen eines ersten Gewichts des Codierungsmerkmals, das den gleichen Abtastratenparameter aufweist wie das durch Abtastratenerhöhung auf der vorherigen Stufe erlangte Decodierungsmerkmal; und Durchführen einer gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht.
17. Speichermedium nach Anspruch 16 , wobei die einen oder mehreren Prozessoren zum Durchführen der gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht ferner dazu eingerichtet sind, durchzuführen: Erlangen eines zweiten Gewichts des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals basierend auf dem ersten Gewicht; und, basierend auf dem ersten Gewicht und dem zweiten Gewicht, Durchführen einer gewichteten Berechnung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters.
18. Speichermedium nach Anspruch 16 , wobei die einen oder mehreren Prozessoren zum Durchführen der gewichteten Verschmelzung an dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal und dem Codierungsmerkmal des gleichen Abtastratenparameters basierend auf dem ersten Gewicht ferner dazu eingerichtet sind, durchzuführen: Aufsummieren des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals und des Codierungsmerkmals des gleichen Abtastratenparameters, um ein anfängliches verschmolzenes Merkmal zu erlangen; Erlangen eines zweiten Gewichts des durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmals basierend auf dem ersten Gewicht; und, basierend auf dem ersten Gewicht und dem zweiten Gewicht, Durchführen einer gewichteten Berechnung an dem anfänglichen verschmolzenen Merkmal und dem durch Abtastratenerhöhung auf der vorherigen Stufe erlangten Decodierungsmerkmal.
19. Speichermedium nach Anspruch 15 , wobei die einen oder mehreren Prozessoren für den Prozess des Durchführens der Abtastratenverringerung auf den mehreren Stufen an dem ersten Bild, des Durchführens der Abtastratenerhöhung auf den mehreren Stufen an dem durch Abtastratenverringerung auf der letzten Stufe erlangten Codierungsmerkmal und des Erlangens des zweiten Bildes basierend auf dem durch Abtastratenerhöhung auf der letzten Stufe erlangten Decodierungsmerkmal ferner dazu eingerichtet sind, durchzuführen: Durchführen einer Abtastratenverringerung auf den mehreren Stufen an dem ersten Bild unter Verwendung eines ersten Codierungsmoduls eines Verbesserungsnetzwerks; Durchführen einer Abtastratenerhöhung auf den mehreren Stufen an dem durch Abtastratenverringerung auf der letzten Stufe erlangten Codierungsmerkmal unter Verwendung eines Decodierungsmoduls des Verbesserungsnetzwerks, wobei die Abtastratenerhöhung auf jeder nicht-ersten Stufe Erlangen des verschmolzenen Merkmals durch Verschmelzen des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters unter Verwendung eines Verschmelzungsmoduls des Verbesserungsnetzwerks und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal umfasst; und der Prozess des Erlangens des verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe Verschmelzen, durch das Verschmelzungsmodul, des Decodierungsmerkmals, das durch Abtastratenerhöhung auf der vorherigen Stufe erlangt wurde, mit dem Codierungsmerkmal des gleichen Abtastratenparameters gemäß dem vorgelernten Verschmelzungsparameter umfasst; und Verarbeiten des durch Abtastratenerhöhung auf der letzten Stufe erlangten Decodierungsmerkmals, um das zweite Bild zu erlangen, unter Verwendung eines Ausgabemoduls des Verbesserungsnetzwerks.
20. Speichermedium nach Anspruch 19 , wobei das Verbesserungsnetzwerk mittels einer Trainingsmethode erlangt wird, die umfasst: basierend auf Bildern hoher Qualität in einem ersten Bildsatz, Durchführen eines unüberwachten Trainings an einem von einem zweiten Codierungsmodul, dem Decodierungsmodul und dem Ausgabemodul erlangten anfänglichen Netzwerk, um ein vortrainiertes Netzwerk zu erlangen, wobei der erste Bildsatz mehrere Bilder geringer Qualität und Bilder hoher Qualität, die allen Bildern geringer Qualität entsprechen, umfasst; und das zweite Codierungsmodul dazu eingerichtet ist, eine Abtastratenverringerung auf mehreren Stufen an einem eingegebenen Bild hoher Qualität durchzuführen, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; und, basierend auf dem vortrainierten Netzwerk, Durchführen eines überwachten Trainings an dem ersten Codierungsmodul und dem Verschmelzungsmodul unter Verwendung des ersten Bildsatzes, um ein trainiertes erstes Codierungsmodul und ein trainiertes Verschmelzungsmodul zu erlangen, wobei das trainierte erste Codierungsmodul, das trainierte Verschmelzungsmodul und das Decodierungsmodul und das Ausgabemodul in dem vortrainierten Netzwerk das verbesserte Netzwerk bilden.

Description

VERWEIS AUF VERWANDTE ANMELDUNG Die vorliegende Offenbarung beansprucht die Priorität der chinesischen Patentanmeldung Nr. 202411563375.9, eingereicht am 4. November 2024, deren gesamter Inhalt hiermit durch Verweis aufgenommen wird. TECHNISCHES GEBIET Die vorliegende Offenbarung betrifft im Allgemeinen das Gebiet der Bildverarbeitungstechnik und insbesondere ein Bildverbesserungsverfahren, eine Bildverbesserungseinrichtung, ein Bildverbesserungsmodell und ein Trainingsverfahren dafür sowie eine elektronische Einrichtung. TECHNISCHER HINTERGRUND Bildverbesserung ist ein Verfahren zur Verbesserung der visuellen Bildqualität. Der Hauptzweck einer Bildverbesserung besteht darin, die visuelle Qualität und die Bildauflösung (d. h. die Klarheit) zu verbessern. Aktuelle Bildverbesserungslösungen können ein klassisches U-förmiges Netzwerk verwenden, um Originalbilder geringer Qualität zu Bildern hoher Qualität zu verbessern. Die Bildverbesserungsleistung des klassischen U-förmigen Netzwerks kann jedoch unzureichend sein. Um die Bildverbesserungsleistung des U-förmigen Netzwerks zu verbessern, kann ein Modul zur Suche nach Merkmalen (Features) geringer Auflösung zwischen einem Codierungsmodul und einem Decodierungsmodul des U-förmigen Netzwerks hinzugefügt werden, um stark unterscheidende Merkmale zu extrahieren, die für die Verbesserung benötigt werden. Darüber hinaus kann das Decodierungsmodul solche stark unterscheidenden Merkmale decodieren, um Bilder hoher Qualität zu erzeugen. Die Hinzufügung des Moduls zur Suche nach Merkmalen geringer Auflösung kann die Bildverbesserungsleistung verbessern. Allerdings kann das Modul zur Suche nach Merkmalen geringer Auflösung vergleichsweise groß sein, was die rechnerische Komplexität des gesamten Verbesserungsnetzwerks erheblich erhöhen kann und zu einer langsamen Netzwerkgeschwindigkeit und einem schwierigen Netzwerkeinsatz führen kann. ÜBERBLICK ÜBER DIE ERFINDUNG Ein Aspekt der vorliegenden Offenbarung stellt ein Bildverbesserungsverfahren bereit. Das Bildverbesserungsverfahren umfasst Durchführen einer Abtastratenverringerung auf mehreren Stufen an einem ersten Bild, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; Durchführen einer Abtastratenerhöhung auf mehreren Stufen an einem Codierungsmerkmal, das durch Abtastratenverringerung auf einer letzten Stufe erlangt wurde, um mehrere Decodierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; und Erlangen eines zweiten Bildes basierend auf einem durch Abtastratenerhöhung auf einer letzten Stufe erlangten Decodierungsmerkmal, wobei eine Auflösung des zweiten Bildes höher ist als eine Auflösung des ersten Bildes. Die Abtastratenerhöhung auf jeder nicht-ersten Stufe umfasst Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters, um ein verschmolzenes Merkmal zu erlangen, und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal; und ein Prozess eines Erlangens eines verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe umfasst Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters gemäß einem vorgelernten Verschmelzungsparameter. Ein weiterer Aspekt der vorliegenden Offenbarung stellt eine elektronische Einrichtung bereit. Die elektronische Einrichtung weist einen Speicher, der dazu eingerichtet ist, ein Computerprogramm zu speichern; und einen oder mehrere Prozessoren auf, die dazu eingerichtet sind, bei Ausführung des Computerprogramms ein Bildverbesserungsverfahren durchzuführen. Das Bildverbesserungsverfahren umfasst Durchführen einer Abtastratenverringerung auf mehreren Stufen an einem ersten Bild, um mehrere Codierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; Durchführen einer Abtastratenerhöhung auf mehreren Stufen an einem Codierungsmerkmal, das durch Abtastratenverringerung auf einer letzten Stufe erlangt wurde, um mehrere Decodierungsmerkmale mit verschiedenen Abtastratenparametern zu erlangen; und Erlangen eines zweiten Bildes basierend auf einem durch Abtastratenerhöhung auf einer letzten Stufe erlangten Decodierungsmerkmal, wobei eine Auflösung des zweiten Bildes höher ist als eine Auflösung des ersten Bildes. Die Abtastratenerhöhung auf jeder nicht-ersten Stufe umfasst Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit einem Codierungsmerkmal des gleichen Abtastratenparameters, um ein verschmolzenes Merkmal zu erlangen, und Durchführen einer Abtastratenerhöhung an dem verschmolzenen Merkmal; und ein Prozess eines Erlangens eines verschmolzenen Merkmals auf mindestens einer nicht-ersten Stufe umfasst Verschmelzen eines Decodierungsmerkmals, das durch Abtastratenerhöhung auf einer vorherigen Stufe erlangt wurde, mit eine