RED Digital Cinema a déposé un autre brevet lié au RAW compressé

Le brevet le plus récent de RED Digital Cinema accordé il y a deux semaines, intitulé Video Image Data Processing In Electronic Devices, rejoint les trois autres brevets RED liés au brut compressé [8,872,933, 9,479,749, 9,787,878]. Cependant, celui-ci semble plus général et essaie de faire circuler divers capteurs et appareils. RED souhaite-t-il étendre ses capacités de compression brute à d’autres appareils et capteurs ?

Le brevet a été délivré le 15 novembre. 2022 no. 11 503 294 intitulé Video Image Data Processing In Electronic Devices, a été déposé par Jim Jannard (fondateur de RED Digital Cinema), Jarred Land (PDG de RED) et Manjunath Subray Baht. Le brevet présente de nouvelles méthodes pour le brut compressé, qui, à notre avis, sont plus générales et complètes, et liées aux smartphones, appareils photo numériques et autres appareils et capteurs (y compris Foveon). Le brevet comprend des schémas familiers comme les corps RED Hydrogen et DSMC2. Voici les faits saillants ci-dessous :

Voici le contexte du brevet intitulé Video Image Data Processing In Electronic Devices : « La capacité de capture vidéo haut de gamme continue de progresser. Les cinéastes professionnels ainsi qu’un nombre croissant de consommateurs exigent une capacité d’enregistrement vidéo de haute qualité, non seulement dans les caméras vidéo numériques traditionnelles, mais également dans d’autres appareils électroniques équipés de caméras vidéo, notamment les téléphones portables/smartphones, les tablettes, etc. La partie suivante du brevet présente la définition du brut compressé.

Le brevet déclare et définit que les données d’image brutes peuvent être « brutes » dans le sens où les données vidéo ne sont pas « développées », de sorte que certaines étapes de développement d’image de traitement d’image ne sont pas effectuées sur les données d’image avant la compression et le stockage. De telles étapes peuvent comprendre une ou plusieurs interpolations (par exemple, le dé-Bayering ou autre dé-matriçage), le traitement des couleurs, le traitement des tons, la balance des blancs et la correction gamma. Par exemple, les données d’image brutes compressées peuvent être une ou plusieurs mosaïquées (par exemple, non interpolées en couleur, non dématricées), non traitées en couleur, non traitées en tonalité, non équilibrées en blanc et non corrigées en gamma. Au lieu de cela, ces étapes peuvent être reportées après le stockage, comme pour le post-traitement hors carte, préservant ainsi la flexibilité créative au lieu de « construire » des décisions de traitement particulières dans l’appareil photo.

Selon l’application, ces techniques de traitement et de compression d’image peuvent être mises en œuvre dans une variété de facteurs de forme. Par exemple, les techniques décrites ici pour la compression et le stockage embarqué de données d’image brutes compressées peuvent être mises en œuvre dans un dispositif relativement petit, tel qu’un smartphone ayant une caméra intégrée (ou plusieurs caméras, y compris une ou plusieurs caméras frontales) et caméra(s) arrière, ou une caméra à petit facteur de forme. Par exemple, les techniques de traitement selon certains modes de réalisation sont conçues pour être mises en œuvre dans un dispositif à petit facteur de forme ayant un budget de puissance, une capacité de traitement et un espace physique relativement limités pour l’incorporation de composants électroniques, etc. Dans un autre exemple, les techniques de compression décrites ici peuvent être mises en œuvre dans des caméras à facteur de forme relativement plus grand, y compris des caméras de cinéma numériques. De plus, le brevet mentionne que bien que les dispositifs électroniques décrits puissent être principalement écrits dans le contexte d’un smartphone, les divulgations s’appliquent à n’importe lequel d’une variété d’appareils électroniques avec ou sans fonctionnalité de téléphone portable, y compris les caméras numériques fixes et animées, les appareils de navigation personnels, les appareils Internet mobiles, les consoles de jeux portables ou les appareils ayant une ou une combinaison des fonctions ou d’autres fonctions.

Le brevet fait référence à une méthode appelée DCT, en expliquant que l’électronique résidant dans le dispositif de capture d’image peut être configurée pour, dans le cadre de la compression, transformer les données d’image brutes en mosaïque à l’aide de la méthode DCT (discrete cosine transform), ou d’une autre méthode de transformation. (telle qu’une transformée qui définit une séquence finie de points de données en termes de somme de fonctions oscillant à différentes fréquences) pour obtenir des coefficients de transformée, et compresser les coefficients de transformée. Selon certains modes de réalisation, l’électronique peut être configurée pour effectuer la compression sans utiliser de mémoire de trame d’image (par exemple, une mémoire vive dynamique [DRAM]) qui stocke une image complète à des fins de traitement. Par exemple, l’électronique peut compresser les coefficients de transformation à l’aide d’une première mémoire sur puce (par exemple, une mémoire vive statique [SRAM]) qui est intégré à une puce de traitement d’image (par exemple, un circuit intégré spécifique à l’application [ASIC] ou réseau de portes programmables par l’utilisateur (FPGA]), et sans utiliser de seconde DRAM ou autre mémoire positionnée hors puce.

Cette partie explique la méthode de facilitation qui élève l’efficacité énergétique afin de permettre la compression brute dans les appareils mobiles. Comme indiqué : « Dans certains modes de réalisation, l’électronique peut néanmoins inclure une DRAM ou une autre seconde mémoire hors puce. Cependant, la mémoire hors puce dans de tels modes de réalisation peut être utilisée à des fins autres que la compression de données d’image vidéo brutes, telles que la correction de défauts de pixel, l’adressage du bruit de motif de pixel, ou similaire. Ceci est différent des appareils de capture d’image existants, tels que les smartphones, qui utilisent une DRAM hors puce pour effectuer la compression d’image. Par exemple, certains dispositifs de capture d’image existants utilisent une DRAM hors puce pour calculer les vecteurs de mouvement pour la compression H.264. Certains modes de réalisation décrits ici utilisent des techniques DCT, facilitant ainsi une compression efficace en mémoire, sans qu’il soit nécessaire de calculer des vecteurs de mouvement ou d’utiliser une mémoire hors puce. Par conséquent, effectuer une compression sans utiliser une mémoire d’image complète (par exemple, une DRAM hors puce) améliore l’efficacité énergétique (par exemple, d’environ 0,5 Watts (W) dans certaines implémentations), ce qui est particulièrement utile dans un petit- périphérique de facteur de forme tel qu’un smartphone. Selon certains aspects, l’électronique du dispositif de capture d’image consomme moins de 15 W ou moins d’environ 20 W en fonctionnement ».

Selon la demande de brevet, selon le mode de réalisation (par exemple, selon la taille du capteur), les techniques de stockage embarqué de données d’image brutes compressées décrites ici peuvent être capables d’atteindre des niveaux de résolution d’au moins 2 k, 3 k, 4 k, 4,5 k, 5 k, 6 k, 8 k, 10 k, 12 k, 15 k, 20 k ou des niveaux de résolution supérieurs.

La demande souligne que le capteur d’image utilisé pour la méthode de compression décrite peut être n’importe quel type de dispositif de détection vidéo, y compris, par exemple, mais sans s’y limiter, les dispositifs CCD, CMOS, CMOS empilés verticalement tels que le capteur Foveon, ou un multi- réseau de capteurs utilisant un prisme pour diviser la lumière entre les capteurs.

Les brevets de compression brute actuels détenus par RED Digital Cinema courent jusqu’en 2028. Cependant, celui-ci durera jusqu’en 2037. Attendez-vous donc à un nombre considérable de poursuites intentées par d’autres fabricants d’appareils photo désireux d’implémenter des capacités brutes compressées internes dans leurs caméras. En attendant, nous attendons une résolution concernant l’atténuation en cours et le processus juridique de la ROUGE – Etui Nikon. Restez à l’écoute, car nous vous tiendrons au courant. La question demeure : RED souhaite-t-il étendre ses capacités de compression brute à d’autres appareils et capteurs ?