COMPTOIR
  
register

Composé par ————— —— 15344 vues

Avec l'IA sauce NVIDIA, des photos se parent d'éléments 3D !

Habituellement, pour détecter des objets en trois dimensions, nos bidules utilisent plusieurs caméras (prenons par exemple feu le Kinect de Microsoft) ou demandent à l'utilisateur de bouger, comme c'est le cas pour certaines applications sur smartphone de scanner tridimensionnel.

 

Pourtant, une simple image 2D est porteuse d'informations quant à la structure des objets représentés dans l'espace, notamment via la présence des ombres et reflets. Au moyen d'un réseau de neurones, il est donc possible théoriquement de sélectionner ces informations pour reconstruire des modèles 3D en partant d'une image 2D. Ce théorique est passé pratique grâce à une équipe de recherche de chez NVIDIA, en partenariat avec l'université Washington de Saint-Louis, l'université Simon Fraser et l'entreprise hongkongaise SenseTime.

 

nvidia research 2d to 3d

 

La méthode générale correspond bien à l'air du temps : trouver une structure du réseau plus favorable à l'apprentissage de la tâche souhaitée, passer une poignée de jours avec une Titan X pour entraîner le bouzin et hop, le tour est joué. Pour cette application précise, le réseau est constitué de trois parties : une première va chercher les surfaces planes et leur profondeur par rapport à la caméra, une seconde qui va raffiner les régions détectées afin de supprimer les artefacts et optimiser les bordures, et enfin une troisième passe à base de réseau convolutionnel qui s'occupe de compacter les différents objets 3D générés afin de retrouver une structure quasi identique à l'image de base.

 

Les résultats sont assez impressionnants : certes, quelques objets ne sont pas détectés, menant à des trous dans l'image reconstituée, et les frontières entres les différentes régions planes manquent encore de précision, mais les scènes sont parfaitement reconnaissables. Bientôt des applications pour le scanning d'objet à bas coût ? (Source : NVIDIA)

 

Le papier complet

 

Un poil avant ?

Adios Coinhive !

Un peu plus tard ...

En avril, de l'indé le Humble Monthly te file

Les 15 ragots
Les ragots sont actuellement
fermé, vous étiez prévenusfermés, pour ne pas réveiller le troll.
Message de lord Varices supprimé par un modérateur : HS
par Trop feignant pour se log du Grand Est, le Dimanche 03 Mars 2019 à 17h45  
par un medecin des campagnes en Auvergne-Rhône-Alpes le Dimanche 03 Mars 2019 à 16h13
j'entends parler de ci de là des allemands au top, super profitable, mais jespere qu'ils auront assez de cache pour eviter le crash de la Deutsch Bank, il va falloir que les allemands bossent je ne sais combien de generation pour renflouer le systeme,
Avec un nom de site pareil fait pas s'étonner d'avoir des discussions de comptoirs
par un medecin des campagnes en Auvergne-Rhône-Alpes, le Dimanche 03 Mars 2019 à 16h13  
j'entends parler de ci de là des allemands au top, super profitable, mais jespere qu'ils auront assez de cache pour eviter le crash de la Deutsch Bank, il va falloir que les allemands bossent je ne sais combien de generation pour renflouer le systeme,
par Trop feignant pour se log du Grand Est, le Dimanche 03 Mars 2019 à 08h34  
par Nicolas D. le Samedi 02 Mars 2019 à 22h37
@everyone Les discussions politiques n'ont pas leur place ici, on reste un média hardware donc un peu de recentrage ne fera pas de mal (Envoyé depuis mon bureau de stagiaire aux USA... ).

C'est bien, c'est le contraire exact =). Un tenseur c'est un concept mathématique qui généralise les matrices, et les accélérateurs neuronaux c'est "juste" de la multiplication matricielle... Ces tensors on été fortement influencé par le machine learning, alors les RT cores font l'accélération d'un algorithme nommé BVH qui n'est pas à ma connaissance réutilisable en machine learning.
Et sur le reste, l'argent gagné sur les rtx peut très bien financer de la R&D a base de titan. Elle peut même financer des recherches a base de x86 d'arm etc.

Message de TwoFace supprimé par un modérateur : Le message est louable, mais c'est pas l'endroit... Sorry !
par Nicolas D., le Samedi 02 Mars 2019 à 22h37  
@everyone Les discussions politiques n'ont pas leur place ici, on reste un média hardware donc un peu de recentrage ne fera pas de mal (Envoyé depuis mon bureau de stagiaire aux USA... ).
par Un ragoteur des lumières en Île-de-France le Samedi 02 Mars 2019 à 19h35
Sauf qu'en lisant bien c'est fait sur des Titan X. Je ne suis même pas sûr qu'on ait quelque moyen d'utiliser utilement des tensor cores (donc exit Volta). On pourrait peut-être (mais peut-être pas car pas assez précis) utiliser les cores Raytrace aka FP 16 bits.
C'est bien, c'est le contraire exact =). Un tenseur c'est un concept mathématique qui généralise les matrices, et les accélérateurs neuronaux c'est "juste" de la multiplication matricielle... Ces tensors on été fortement influencé par le machine learning, alors les RT cores font l'accélération d'un algorithme nommé BVH qui n'est pas à ma connaissance réutilisable en machine learning.
par Un hardeur des ragots en Île-de-France, le Samedi 02 Mars 2019 à 21h35  
par Jemporte le Samedi 02 Mars 2019 à 19h47
Si j'avais 20 ans je me barrerait aussi de France
23 ans, dernière année d'école d'ingé, déjà sur le départ
a+
par Un médecin des ragots embusqué, le Samedi 02 Mars 2019 à 21h05  
Cela dit c'est pas qu'en France, l'autre jour je regardais un reportage sur l'agriculture espagnole, grosse exportatrice. Dans ce pays avec un chomage des jeunes à 33% pas un seul qui veut aller bosser dans les champs. Sans les marocains fini les exportations. Et c'est pareil pour les italiens.

Les "on est chez nous", quand vous daignerez vous sortir les doigts du cul pour aller bosser même quand ça heurte votre fierté (après tout ce sont des patrons biens français qui les proposent ces emplois), on écoutera vos revendications. D'ici là estimez vous heureux que ceux qui bossent (immigrés compris donc) paient vos caprices.
par Un médecin des ragots embusqué, le Samedi 02 Mars 2019 à 20h54  
par Jemporte le Samedi 02 Mars 2019 à 19h47
la France importe des ventres, des bons à rien qui viennent vivre du RSA et autres allocs, payés avec la dette qui explose
T'as pas du beaucoup bossé en dehors de ton taf de bureau mon pauvre. Moi qui fait de tout, y compris les pires jobs alimentaire, c'est pas compliqué, dans le bâtiment, le nettoyage, l'agriculture et beaucoup d'autres secteurs qui ont besoin de main d'oeuvre corvéable à prix plancher il n'y pratiquement par de blanc. Les petits jeunes branleurs français dès qu'ils ont un petit diplôme de merde il leur faut 2000€ par mois. C'est pas compliqué, ils préfèrent toucher du RSA plutôt qu'aller faire un boulot d'immigré.

La réalité c'est ça, sans les pauvres immigrés exploités dans l'ombre ce pays est à l'arrêt. Les ventres et les bouffeurs de RSA c'est certainement pas les immigrés qui n'y ont pas droit, c'est plutôt le bon petit français qui croit qu'il vaut mieux que les jobs que le marché lui propose. Suffit de voir les jobs non pourvus sur pole emploi.
par BestMan, le Samedi 02 Mars 2019 à 20h43  
Heuu parceque vous croyez sérieusement que les USA ne vont pas s'effondrer ?, ça reste LE pays qui accumules les GROS problèmes, bref USA/Canada, France, Angleterre, c'est du pareil au meme, et pas la peine de parler de petits pays type Suede/Finlande qui dans 30ans n'existeront plus vu leur natalite !

Pour faire simple c'est tout l'Occident qui est foutu, clairement seule l'Allemagne ou la Russie (18% de la dette du PIB !) peuvent resister, sachant que se sont des pays économiquement "prosperes" avec un Proficit, et chacun de ces 2 pays conservera ses avantages, on peut critiquer 107ans ces 2 pays l'Allemagne et ses jobs a 1€ etc... mais eux on est sur que dans 20ans ils ne seront pas en falitte puisque maintenant ils ne le sont pas "Virtuellement" contrairement au reste du Monde Occidental !
Message de Scrabble supprimé par un modérateur : HS
Message de Jemporte supprimé par un modérateur : HS