Developpez.com

Le Club des Développeurs et IT Pro

Une photo suffit pour transférer les applications ouvertes entre smartphones et ordinateurs

Projet d'un stagiaire de Google

Le 2011-06-16 22:58:00, par Idelways, Expert éminent sénior
Une photo de son smartphone devrait bientôt suffire pour y lancer (à l'identique) l'équivalent des applications ouvertes sur son ordinateur, et vice-versa.

C'est en tout cas ce que promet le projet « Deep Shot » conçu durant le stage d'été chez Google de l'ingénieur Tsung-Hsiang Chang, récemment diplômé du MIT.

Google détient donc les droits sur ce projet qui repose, sans magie blanche, sur les URI (identifiants uniformes de ressource) des applications qui utilisent ces chaînes de caractères pour se lancer et décrire leur état.

Bien qu'il s'agisse d'un format standardisé, les données exprimées par les URI peuvent largement varier ; ils peuvent être de ce fait plus faciles à extraire d'une application comparée à d'autres.

Sheep Shot nécessite un minimum de préparation pour fonctionner : il repose sur des algorithmes de reconnaissance visuelle déjà existants, installés sur l’ordinateur afin d'extraire l'état de l'application à partir des pixels bruts de l'image. Ces données sont par la suite encodées en URI et transférées au smartphone.



Après cette prise de contact rapide, le changement d'état de l'application sur le smartphone change aussi l'état de la copie originale ouverte sur l'ordinateur.

Deep Shot est d'ailleurs assez intelligent pour redimensionner la vue présentée par l'application durant le transfert pour l'adapter à la petitesse des écrans nomades.

Le système fonctionne à présent sur très peu d'applications, quatre en tout, mais en plusieurs modes : photos avec Google Street View, les courtes informations textuelles du réseau social Yelp, les longs textes d'actualité agrémentés d'images depuis le site de la CNN, et enfin les cartes depuis Google Maps.

Le projet est concrètement un Framework qui permettra aux développeurs d'adapter le système à d'autres applications, avec peu de code et d'effort

Démonstration :

[ame="http://www.youtube.com/watch?v=odjSlKO0YsY"]vidéo[/ame]

Plus de détail sur la thèse du projet (PDF, 22 Mo, 10 pages)

Et vous ?

Que pensez-vous de ce projet ?
  Discussion forum
20 commentaires
  • Paul TOTH
    Expert éminent sénior
    Envoyé par Idelways

    Que pensez-vous de ce projet ?
    je pense que le thème de la vidéo est mal choisi

    pourquoi devrais m'em...der à prendre une photo de l'écran de mon PC avec mon SmartPhone, ces deux appareils devraient avoir un protocole de communication leur permettant d'échanger des données sans cela.

    Par contre, dans un lieu public, l'usage de la caméra pour identifier une information (comme le font les QR Code) sans avoir à connecter les appareils peut être intéressante. Contrairement à un QR Code l'info est directement lisible par nous et par le smartphone.
  • Kreepz
    Modérateur
    Envoyé par edwithenwisdom
    Ben moi je pense que c'est une application qui a de l'avenir. Imaginer qu'avec une simple photo on puisse extirper le contenu de tout un ordi. Les gars de la CIA risque de contacter ce stagiaire
    Et si tu prend ton c*l en photo tu est directement redirigé sur you*orn?
  • benzoben
    Membre averti
    J'avoue ne pas avoir compris l'intérêt de l'application. Mais je n'ai pas de smartphone, ceci devrait expliquer cela!
  • Lyche
    Expert éminent
    Mis à part pour afficher en plus grand une image de google map, je vois pas comment un smartphone pourrait avoir les mêmes applications qu'un PC Sans blague, vous avez des logiciels comme les suites bureautiques (libres ou non) sur votre téléphone pour ouvrir la même avec votre pc .
    Honnêtement, j'ai du mal à en voir une utilité quelconque pour le moment. Peut-être quand les appareils mobiles seront plus proche des pcs.. mais à ce moment là, aurat-on encore besoin d'un pc?
  • rebolon
    Membre habitué
    C'est quoi l'intérêt ? transférer des informations depuis le pc vers le smartphone en utilisant la caméra ?
    C'est pas un peu se prendre la tête pour rien ?

    Nokia avec son Symbian^3 (soit disant merdique et dépassé) a sorti il y a quelques semaines NokiaDrop qui permet avec Firefox ou Chrome d'envoyer des informations (url, photos, adresse via oviMaps, flux rss) directement vers son portable en utilisant le système de notification de celui-ci (mode push).
    Une fois reçu, le portable lance l'application requise : oviMaps (gps), reader (rss)...

    Je ne vois donc pas en quoi google est innovant sur ce coup là. HA si... contrairement à Nokia, eux ils communiquent, et niq*ù$ Nokia ;-)
  • tumoo
    Membre confirmé
    Bah le seul intérêt semble être un gain de temps pour accéder à un endroit précis de Maps. Je pense effectivement que ça fait gagner du temps, après est que ça a une réelle utilité ?
    On doit gagner au plus 10sec
  • zeyr2mejetrem
    Membre chevronné
    Envoyé par Ozeil
    Et si tu prend ton c*l en photo tu est directement redirigé sur you*orn?
    Non. Tu tombes sur le blog de Demis Roussos
  • Paul TOTH
    Expert éminent sénior
    Envoyé par Ozeil
    Je n'en voie pas l'utilité personnellement Paul TOTH je verrais pas pourquoi je prendrais en photo mon écran d'ordinateur avec mon portable pour avoir la même page sur le portable, alors que j'ai le même site ouvert sur mon ordinateur où l'écran est plus grand!
    pour moi c'est juste un mode de communication comme un autre, au lieu de sélectionner une source de donnée, je prend une photo - ce que tout le monde sait faire

    c'est pourquoi je n'y vois d’intérêt que pour la communication entre appareils qui ne se connaissent pas, exactement comme le fait le QR Code qui peut aussi bien être sur un bout de papier.

    J'ai un carton d'invitation pour une soirée avec un plan Gmaps imprimé...mon smartphone le géolocalise automatiquement...ça évite de coller un QR Code dans le coin.
  • Kreepz
    Modérateur
    Je n'en voie pas l'utilité personnellement Paul TOTH je verrais pas pourquoi je prendrais en photo mon écran d'ordinateur avec mon portable pour avoir la même page sur le portable, alors que j'ai le même site ouvert sur mon ordinateur où l'écran est plus grand!
  • kdmbella
    Expert éminent
    a vraie dire je comprend rien a ce projet surtout quel est sa porté quelqu'un peut me donner plus d'explication ?