Une photo suffit pour transférer les applications ouvertes entre smartphones et ordinateurs

[Idelways]

Une photo suffit pour transférer les applications ouvertes entre smartphones et ordinateurs
Deep Shot : projet d'un stagiaire de Google



Une photo de son smartphone devrait bientôt suffire pour y lancer (à l'identique) l'équivalent des applications ouvertes sur son ordinateur, et vice-versa.

C'est en tout cas ce que promet le projet « Deep Shot » conçu durant le stage d'été chez Google de l'ingénieur Tsung-Hsiang Chang, récemment diplômé du MIT.

Google détient donc les droits sur ce projet qui repose, sans magie blanche, sur les URI (identifiants uniformes de ressource) des applications qui utilisent ces chaînes de caractères pour se lancer et décrire leur état.

Bien qu'il s'agisse d'un format standardisé, les données exprimées par les URI peuvent largement varier ; ils peuvent être de ce fait plus faciles à extraire d'une application comparée à d'autres.

Sheep Shot nécessite un minimum de préparation pour fonctionner : il repose sur des algorithmes de reconnaissance visuelle déjà existants, installés sur l’ordinateur afin d'extraire l'état de l'application à partir des pixels bruts de l'image. Ces données sont par la suite encodées en URI et transférées au smartphone.



Après cette prise de contact rapide, le changement d'état de l'application sur le smartphone change aussi l'état de la copie originale ouverte sur l'ordinateur.

Deep Shot est d'ailleurs assez intelligent pour redimensionner la vue présentée par l'application durant le transfert pour l'adapter à la petitesse des écrans nomades.

Le système fonctionne à présent sur très peu d'applications, quatre en tout, mais en plusieurs modes : photos avec Google Street View, les courtes informations textuelles du réseau social Yelp, les longs textes d'actualité agrémentés d'images depuis le site de la CNN, et enfin les cartes depuis Google Maps.

Le projet est concrètement un Framework qui permettra aux développeurs d'adapter le système à d'autres applications, avec peu de code et d'effort

Démonstration :

vidéo

vidéo

Plus de détail sur la thèse du projet (PDF, 22 Mo, 10 pages)

Et vous ?

Que pensez-vous de ce projet ?

[Paul TOTH]

Envoyé par Idelways

Que pensez-vous de ce projet ?

je pense que le thème de la vidéo est mal choisi

pourquoi devrais m'em...der à prendre une photo de l'écran de mon PC avec mon SmartPhone, ces deux appareils devraient avoir un protocole de communication leur permettant d'échanger des données sans cela.

Par contre, dans un lieu public, l'usage de la caméra pour identifier une information (comme le font les QR Code) sans avoir à connecter les appareils peut être intéressante. Contrairement à un QR Code l'info est directement lisible par nous et par le smartphone.

[benzoben]

J'avoue ne pas avoir compris l'intérêt de l'application. Mais je n'ai pas de smartphone, ceci devrait expliquer cela!

[Lyche]

Mis à part pour afficher en plus grand une image de google map, je vois pas comment un smartphone pourrait avoir les mêmes applications qu'un PC Sans blague, vous avez des logiciels comme les suites bureautiques (libres ou non) sur votre téléphone pour ouvrir la même avec votre pc .
Honnêtement, j'ai du mal à en voir une utilité quelconque pour le moment. Peut-être quand les appareils mobiles seront plus proche des pcs.. mais à ce moment là, aurat-on encore besoin d'un pc?

[Ozeil]

Je n'en voie pas l'utilité personnellement Paul TOTH je verrais pas pourquoi je prendrais en photo mon écran d'ordinateur avec mon portable pour avoir la même page sur le portable, alors que j'ai le même site ouvert sur mon ordinateur où l'écran est plus grand!

[rebolon]

C'est quoi l'intérêt ? transférer des informations depuis le pc vers le smartphone en utilisant la caméra ?
C'est pas un peu se prendre la tête pour rien ?

Nokia avec son Symbian^3 (soit disant merdique et dépassé) a sorti il y a quelques semaines NokiaDrop qui permet avec Firefox ou Chrome d'envoyer des informations (url, photos, adresse via oviMaps, flux rss) directement vers son portable en utilisant le système de notification de celui-ci (mode push).
Une fois reçu, le portable lance l'application requise : oviMaps (gps), reader (rss)...

Je ne vois donc pas en quoi google est innovant sur ce coup là. HA si... contrairement à Nokia, eux ils communiquent, et niq*ù$ Nokia ;-)

[tumoo]

Bah le seul intérêt semble être un gain de temps pour accéder à un endroit précis de Maps. Je pense effectivement que ça fait gagner du temps, après est que ça a une réelle utilité ?
On doit gagner au plus 10sec

[kdmbella]

a vraie dire je comprend rien a ce projet surtout quel est sa porté quelqu'un peut me donner plus d'explication ?

[zeyr2mejetrem]

a vraie dire je comprend rien a ce projet surtout quel est sa porté quelqu'un peut me donner plus d'explication ?

+1

[edwithenwisdom]

Ben moi je pense que c'est une application qui a de l'avenir. Imaginer qu'avec une simple photo on puisse extirper le contenu de tout un ordi. Les gars de la CIA risque de contacter ce stagiaire

[Ozeil]

Envoyé par edwithenwisdom

Ben moi je pense que c'est une application qui a de l'avenir. Imaginer qu'avec une simple photo on puisse extirper le contenu de tout un ordi. Les gars de la CIA risque de contacter ce stagiaire

Et si tu prend ton c*l en photo tu est directement redirigé sur you*orn?

[zeyr2mejetrem]

Envoyé par Ozeil

Et si tu prend ton c*l en photo tu est directement redirigé sur you*orn?

Non. Tu tombes sur le blog de Demis Roussos

[Nebulix]

Vu qu'il apparait ça en haut de mon écran :
http://www.developpez.net/forums/d10...s/#post6064743
Il ne doit pas être bien sorcier de comprendre ce que je fais
Edition : le logiciel a déjà compris qu'il s'agissait d'une url et a converti ce que j'avais noté en texte simple !

[air-dex]

Envoyé par Lyche

Mis à part pour afficher en plus grand une image de google map, je vois pas comment un smartphone pourrait avoir les mêmes applications qu'un PC Sans blague, vous avez des logiciels comme les suites bureautiques (libres ou non) sur votre téléphone pour ouvrir la même avec votre pc .
Honnêtement, j'ai du mal à en voir une utilité quelconque pour le moment. Peut-être quand les appareils mobiles seront plus proche des pcs.. mais à ce moment là, aurat-on encore besoin d'un pc?

Ca se justifie dans le cadre d'une tablette. Le problème des smartphones pour les suites bureautiques est la taille de son écran. 3 à 4 pouces, c'est peu pour avoir un clavier et une vue convenable de ce qu'on écrit.

[Paul TOTH]

Envoyé par Ozeil

Je n'en voie pas l'utilité personnellement Paul TOTH je verrais pas pourquoi je prendrais en photo mon écran d'ordinateur avec mon portable pour avoir la même page sur le portable, alors que j'ai le même site ouvert sur mon ordinateur où l'écran est plus grand!

pour moi c'est juste un mode de communication comme un autre, au lieu de sélectionner une source de donnée, je prend une photo - ce que tout le monde sait faire

c'est pourquoi je n'y vois d’intérêt que pour la communication entre appareils qui ne se connaissent pas, exactement comme le fait le QR Code qui peut aussi bien être sur un bout de papier.

J'ai un carton d'invitation pour une soirée avec un plan Gmaps imprimé...mon smartphone le géolocalise automatiquement...ça évite de coller un QR Code dans le coin.

[Ivelios]

Ma prof de communication a filmé son écran d'ordinateur avec une vidéo de youtube en fond pour nous la repasser en classe...
Donc je pense que l'application n'est pas si bête que ça pour l'utilisateur lambda.

ça peut bien accélérer le temps gagner, : " Je checker sur Gmaps mon chemin, et Yop! direct sur le portable au bon endroit, pas besoin de slider dans tout les sens sur un écran tout petit."

[Lyche]

Envoyé par Ivelios

Ma prof de communication a filmé son écran d'ordinateur avec une vidéo de youtube en fond pour nous la repasser en classe...
Donc je pense que l'application n'est pas si bête que ça pour l'utilisateur lambda.

ça peut bien accélérer le temps gagner, : " Je checker sur Gmaps mon chemin, et Yop! direct sur le portable au bon endroit, pas besoin de slider dans tout les sens sur un écran tout petit."

oui, tu oublies justes que sur les portables, y'a voice, qui t'amène à destination quand tu l'énnonces vocalement... tu trouves que c'est plus efficace?

[Ivelios]

oui, tu oublies justes que sur les portables, y'a voice, qui t'amène à destination quand tu l'énnonces vocalement... tu trouves que c'est plus efficace?

Je précise que mon téléphone n'est pas un smartphone, donc je n'ai pas toutes les clés en main pour répondre au sujet correctement.

Donc je ne connaissais pas voice, autant pour moi

[mbawabdi]

moi non plus je n'y comprends que dalle. je ne sais comment un pc pourrait communiquer avec un smartphone via une image. est ce que quelqu'un pourrait m'expliquer ?

[Paul TOTH]

Envoyé par mbawabdi

moi non plus je n'y comprends que dalle. je ne sais comment un pc pourrait communiquer avec un smartphone via une image. est ce que quelqu'un pourrait m'expliquer ?

si je comprend bien, faut te faire un dessin

le système repose sur l'analyse de l'image, elle identifie Google Maps, repère sa position et hop ! lance Google Maps sur le Smartphone à la même position.