La fonctionnalité de recherche est en construction.
La fonctionnalité de recherche est en construction.

The original paper is in English. Non-English content has been machine-translated and may contain typographical errors or mistranslations. ex. Some numerals are expressed as "XNUMX".
Copyrights notice

The original paper is in English. Non-English content has been machine-translated and may contain typographical errors or mistranslations. Copyrights notice

FPGA Implementation of a Real-Time Super-Resolution System Using Flips and an RNS-Based CNN Implémentation FPGA d'un système de super-résolution en temps réel utilisant des flips et un CNN basé sur RNS

Taito MANABE, Yuichiro SHIBATA, Kiyoshi OGURI

  • Vues en texte intégral

    0

  • Citer

Résumé:

La technologie super-résolution est l’une des solutions permettant de combler le fossé entre les écrans haute résolution et les images à basse résolution. Il existe différents algorithmes pour interpoler les informations perdues, dont l'un utilise un réseau neuronal convolutif (CNN). Cet article présente une implémentation de FPGA et une évaluation des performances d'un nouveau système de super-résolution basé sur CNN, capable de traiter des images animées en temps réel. Nous appliquons des retournements horizontaux et verticaux aux images d'entrée au lieu d'un agrandissement. Cette méthode d'inversion évite la perte d'informations et permet au réseau d'utiliser au mieux la taille de son patch. De plus, nous avons adopté le système de numérotation des résidus (RNS) dans le réseau pour réduire l'utilisation des ressources FPGA. La multiplication et l'addition efficaces avec les LUT ont augmenté d'environ 54 % l'échelle du réseau pouvant être implémenté sur le même FPGA par rapport à une implémentation avec des opérations à virgule fixe. Le système proposé peut réaliser une super-résolution de 960×540 à 1920×1080 à 60 ips avec une latence inférieure à 1 ms. Malgré la restriction des ressources du FPGA, le système peut générer des images claires en super-résolution avec des bords lisses. Les résultats de l'évaluation ont également révélé la qualité supérieure en termes de rapport signal/bruit de pointe (PSNR) et d'indice de similarité structurelle (SSIM), par rapport aux systèmes utilisant d'autres méthodes.

Publication
IEICE TRANSACTIONS on Fundamentals Vol.E101-A No.12 pp.2280-2289
Date de publication
2018/12/01
Publicisé
ISSN en ligne
1745-1337
DOI
10.1587/transfun.E101.A.2280
Type de manuscrit
Special Section PAPER (Special Section on VLSI Design and CAD Algorithms)
Catégories

Auteurs

Taito MANABE
  Nagasaki University
Yuichiro SHIBATA
  Nagasaki University
Kiyoshi OGURI
  Nagasaki University

Mots-clés

Table des matières