Un module de synthèse vocale pour la plateforme Apple iPod est maintenant disponible en téléchargement sur le forum d’iPodLinux. Il s’agit d’un portage du moteur TTS Flite (Festival-lite) développé par Carnegie Mellon University.

Le module permet d’effectuer la synthèse de texte depuis n’importe quelle application tournant sur l’OS iPodLinux. Toute application cliente peut envoyer du texte à synthétiser au moyen d’un API cliente. La partie serveur se charge de gérer les demandes de synthèse, effectuer la synthèse vocale et mixer le flux audio.

Le projet Podiffusion récemment présente sur Mobile Webdeux utilise ce module pour effectuer la synthèse de flux RSS sur Apple iPod.

Toute application tournant sur iPodLinux peut maintenant intégrer la synthèse vocale. On pourrait par example ajouter la synthèse du nom des chansons, artistes ou piste en debut de lecture de fichier audio. La synthèse des menus lors de la navigation pourrait également être mise en place afin de permettre aux personnes mal-voyantes d’utiliser leur iPod (impossible a present).

Plus d’information sur le forum d’iPodLinux.

La société americaine Reading Technology vient de devoiler ses produits knfbReader Mobile et kReader Mobile a destination des personnes mal-voyantes ou aveugles.

Le logiciel permet la capture de contenu (texte ou image), son agrandissement (zoom) pour une meilleure visibilité, et la synthese vocale du contenu grâce aux technologies de reconnaissance de caractère (Optical Character Recognition, OCR) et synthèse vocale.
Le logiciel fonctionne pour l’instant sur les mobiles Nokia N82 uniquement (OS Symbian S60). Il intègre le logiciel knfbReader Mobile qui utilise les technologie Zoom, OCR et Text-to-Speech de Nuance ou de Code Factory (Mobile Speak).

Nous vous avions deja parlé de Podiffusions précédemment qui intègre la synthèse vocale aux platformes Apple iPod et Windows Mobile. Le marcher de la synthèse vocale sur Mobile est en train de grossir et nous voyons enfin ses applications aujourd’hui. La synthèse vocale sur mobile deviendrait-il un argument de vente (selling point) pour les constructeurs ? Quelque chose me dit que la prochaine mise a jour de l’iPhone pourrait intégrer cette technologie

On a récemment abordé l’iPod et ses possibilités de jeux grâce aux émulateurs de consoles. C’est maintenant parti remise pour les possesseur d’iPhone!

Le projet iPhone NES Emulator hébergé par Google Code a effectué le portage de l’émulateur InfoNES pour la plateforme iPhone. une fois téléchargé et installé, il suffit de sélectionner ses ROMs de jeux à émuler sur son iPhone pour le transformer en véritable console de jeux

Bien que la jouabilité reste encore à désirer et que le son est encore absent, ce projet démontre les possibilités d’intégration d’application tierce sur iPhone. J’ai hâte de voir les prochaines versions et le portage d’autres émulateurs/applications!

Voici une video du projet iPhoneNES en action:

Podiffusions possède une architecture ouverte qui permet d’ajouter des fonctionnalités au terminal mobile. L’architecture se compose d’un serveur de synthèse vocale présent sur le terminal mobile et d’une ou plusieurs applications clientes qui peuvent être locales (sur le terminal) ou distantes (autres systèmes du réseau). Une application cliente envoie au serveur une requête de synthèse qui contient un texte. Ce dernier se charge d’effectuer la synthèse vocale à la volée et de jouer le flux audio à l’utilisateur. Plusieurs clients peuvent envoyer des requêtes sur le même serveur (terminal mobile), dans ce cas, les requêtes sont synthétisées les unes à la suite des autres.

Une simple application de cette architecture a déjà été exposé dans les articles 1 et 2. Il s’agissait d’un aggrégateur de flux RSS ayant la capacité de synthétiser le contenu des flux. Le serveur ainsi que l’application cliente se trouvaient sur le terminal mobile (en l’occurrence la plateforme Apple iPod). Bien d’autres applications peuvent être réalisées. On peut par exemple penser à des applications de domotiques: applications clientes présentes sur un réseau (frigo, répondeur téléphonique, cafétière, etc) qui, lorsque l’utilisateur rentre chez lui, fournissent des informations à celui-ci de manière vocale en envoyant au serveur de synthèse vocale du contenu texte à synthétiser sur le terminal mobile .

D’autres idees d’application ?

Certains débordent d’énergie et imaginent de nouvelles déclinaisons de l’iPhone. Allez je me lance aussi. J’imagine l’iPhone Nike+ : un iPhone qui fait vibrer ses Nike quand lors d’un appel entrant. Pour décrocher un appel, il faudra donner un coup de talon au sol et pour refuser l’appel 2 coups de talon !!! Pour un mode conférence, il convient d’avoir 2 iPhone Nike+ : un dans chaque Nike.

Source : servicesmobiles.fr

Podiffusions sera presenté lors de la conférence IWCMC 2007 (The International Wireless Communications and Mobile Computing Conference 2007) qui se déroulera à Hawaii, USA du 12 au 16 Aout 2007.

Au sommaire: soleil, plage, surf, bikini présentation du concept Podiffusions et de son architecture sur la plateforme Apple iPod. Le papier (publication) accepté porte le titre de : « Podiffusions: An Innovative Functionnality for Pod Devices« .

Le programme complet de l’évènement est disponible sur le site de l’IWCMC 2007.

Apple a rempli une demande de brevet auprès de l’organisme en charge de la gestion des brevets américains et des marques déposées. Le document montre un téléphone portable semblable à l’iPod qui serait équipé d’une roue de défilement pour composer un numéro de téléphone.

C’est juste un brevet. Il n’y a aucune information concernant la commercialisation de ce produit. Très probablement ce sera une version plus simple et meilleur marché de l’iPhone. Et pourquoi pas un iPhone Shuffle avec un reconnaissance vocale pour composer un numéro ?

Les fonctionnalités Web 2.0 s’attaquent au téléphone et autre terminal mobile. De nombreux logiciels de gestion de flux sont disponibles pour Windows, Mac OS X, Linux ou encore sous la forme d’application Web (lire l’excellent article The Ultimate RSS Toolbox – 120+ RSS Resources publié sur Mashable). C’est également le cas du monde mobile qui dispose d’applications de lecture de flux (NewsGator Go, LiteFeeds, Egress..).

Il paraît surprenant qu’Apple ne soit pas positionné sur le marché de l’information et ne propose aucun outil tel que Newsfire ou NetNewsWire. iTunes ne contient pour l’instant aucune fonctionnalité de lecture de flux d’informations autre que le podcast.

L’intégration des fonctionnalités de NetNewsWire dans iTunes pourrait donner ceci:

La tendance actuelle est au flux d’informations sur son mobile! Apple ne devrait pas rester longtemps outsider de ce marche. Quelque chose me dit que l’iPhone devrait proposer de telles fonctionnalités.. surement accompagnées d’un update iTunes pour manager ses flux. Vont ils aller au dela de la simple aggregation de contenu ?Apple est en train de pousser l’utilisation de widget sur mobile afin de limiter les interactions avec les fonctions de l’OS. S’il est véritablement possible de développer sur iPhone, toutes les sociétés qui développent de services en ligne d’aggrégation de flux vont vouloir voir leur widget présent sur l’iPhone.

Enfin, Podiffusions illustre completement les possibilités offertes par la lecture de flux d’information sur son terminal mobile. On en parlait déjà dans les articles 1 et 2.

Qu’en pensez-vous?

Plus qu’un simple aggrégateur de flux RSS pour son Apple iPod ou terminal mobile, Podiffusions innove en proposant à l’utilisateur la synthèse vocale de ses informations à la volée. Plus besoin de télécharger des fichiers audio (MP3 ou autres) ou podcasts pour écouter vos flux d’informations, seul le texte est requis.

Par conséquent, l’économie d’espace mémoire est énorme. Tandis que le fichier audio d’une information de 3 minutes a une taille de 6 à 10 Méga octets Mo, le texte requis par Podiffusions pour la même information a une taille de 30 Kilo-octets (Ko). Soit une économie d’espace mémoire supérieure à 99%. La version actuelle propose seulement une voie de synthèse anglaise mais le concept est fonctionnel sur la plateforme Apple iPod.

Le téléchargement des flux s’effectue lorsque l’iPod est connecté au PC (comme c’est le cas pour iTunes). Un script AppleScript permet de télécharger l’ensemble de ses news a partir d’un fichier OPML (liste de flux RSS utilisés par la majorite des aggrégateurs).

Les flux sont automatiquement téléchargés dans un répertoire sur l’iPod comme c’est le cas des Apple Notes. L’utilisateur peut alors les consulter une fois ‘déconnecté’.La navigabilité est similaire à l’interface proposée par Apple pour la musique: Enfin, pour ceux qui ne veulent pas lire ou ont les yeux ailleurs, ils peuvent écouter car il est possible d’effectuer la synthèse vocale du contenu texte! Ce qui donne a Podiffusions une réelle valeur ajoutée!Pour une démo de l’application, voir la vidéo de l’article précédent

Nous évoquions dans un article précédent les différentes fonctionnalités proposées par les terminaux mobiles actuels. La majorité d’entre elles permet d’améliorer l’interaction entre le terminal et son utilisateur. L’intégration d’Internet au monde mobile permet à l’utilisateur d’obtenir un accès illimité au contenu à des services directement depuis son terminal (audio, vidéo, information, …). On peut alors se questionner sur les prochains services proposés par les terminaux ou sur les nouvelles fonctionnalites qui vont révolutionner leur utilisation.

Podiffusions alimente ce processus d’innovation et propose une nouvelle fonctionnalité pour terminaux mobiles. En résumé, Podiffusions est un service permettant de lire ses flux RSS ainsi que d’effectuer leur synthèse vocale à la volée.

http://www.podiffusions.com

La version actuelle de Podiffusions fonctionne sur la plateforme Apple iPod (après passage a iPodLinux). D’autres plateformes sont en cours de développement et devraient être supportées dans un futur proche. Podiffusions, bien qu’à l’état de prototype, démontre les opportunités de futures applications offertes par un terminal mobile.

L’utilisateur normal d’un téléphone mobile, PDA, lecteur Video/MP3 se limite souvent aux fonctionnalités qui lui sont offertes par l’interface utilisateur de son terminal. Le développement sur mobile est assez limité (Java, .NET, SDK propriétaires…) ou dans la plupart des cas inexistant.. Apple n’échappe pas à cette règle: aucune librairie de développement ou de modification des fonctionnalités initiales n’est proposée par le constructeur pour sa gamme de produits iPod.

Sur ce genre de plateforme, le passage a un OS alternatif ouvre de nouveaux horizons et permet d’étendre les fonctionnalités de son terminal mobile. Cela permet également dans la majorité des cas d’avoir accès au code source et pouvoir effectuer ses propres applications et/ou modifications.

Les projets iPodLinux et RockBox proposent tous deux de nouvelles fonctionnalités pour son lecteur MP3. Outre la simple installation et utilisation de ces OS alternatifs, ils offrent la possibilité de réaliser ses propres applications qui viennent se greffer au système d’exploitation (OS) de base.

Le cas d’IPodLinux :

La plateforme iPod étant basée sur un processeur ARM, la compilation s’effectue au moyen d’un cross-compilateur. Selon la plateforme de développement, celui-ci peut être téléchargé, installé ou construit manuellement.

Le langage de programmation utilisé pour iPodLinux est le langage C. N’importe quel éditeur de texte est suffisant pour éditer le code source. Un IDE ou un environnement de développement de langage C est préférable mais non obligatoire.

Le projet iPodLinux met à disposition une chaîne de compilation complète. Il est possible de compiler ses applications (appelées modules) et de les émuler sur la machine de développement (Linux et MAC). Cela facilite grandement le développement ainsi que les tests (« transfer du module sur iPod + reboot » non nécessaires).

Les librairies de développement sont très bien documentées. Deux documents de référence sont disponibles en supplément du Wiki/Forum du projet:
- Podzilla 2 Programmer’s Reference
- TTK, an iPod GUI Library

Ils contiennent une ensemble d’informations nécessaires à toute personne désirant développer sous iPodLinux: du simple développement de module « Hello World » pour les novices jusqu’aux appels de fonctions « kernel » ou « noyau » pour les plus expérimentés.

Et Rockbox dans tout ça ?

Rockbox propose des fonctionnalités identiques (émulateur, etc) et permet le développement de Plugins à ajouter à son interface. Plus d’informations sont disponibles sur Rockbox sur iPod.

De plus en plus d’appareils mobiles (Téléphone, PDA, Lecteur MP3) se voient porter sous Linux et autres systèmes d’exploitation (OS) libre de droit. Mis à part l’aspect ‘rebelle’ d’une telle modification, le passage à un OS libre apporte en général de nouvelles fonctionnalités pour son terminal. Prenons comme exemple l’iPod d’Apple et analysons comment faire cohexister différents OS alternatifs (iPodLinux, RockBox, …) avec l’OS de base fourni par Apple.

Le projet iPodLinux a développé un programme multiboot pour la plateforme Apple iPod: iPodLoader. Il se présente sous la forme d’un menu multiboot Linux (de type Grub..) et dispose de fonctionnalités classiques (timing, etc..).

Du coté technique, iPodLoader prend en charger les partitions de type FAT32 (Windows), Ext2/3 (Linux) et HFS+ (MacOS). Cela veut dire que les images d’OS peuvent etre copiées à ces emplacements (selon le type de votre iPod) et sont dans la plupart des cas automatiquement reconnues par le multiboot (ajout d’une entrée dans le menu de démarrage).

L’installation d’iPodLoader sur sa plateforme consiste à modifier le firmware d’Apple en insérant le programme multiboot de manière à le lancer au démarrage (avant le chargement de l’OS d’Apple). Cette manipulation est assez simple et est largement documentée par iPodLinux ou Rockbox (à noter que la version actuelle d’iPodLinux requiert une partition Ext2 supplémentaire (non présente sur le schéma) ; contrairement à RockBox).

Une fois modifié, il suffit simplement de redémarrer son iPod (pour la version iPod Video, maintenir les boutons Menu et Ok pendant 5 sec) et de sélectionner l’OS à charger. L’iPod charge alors l’OS choisi et l’exécute. Un simple redémarrage permet de charger à nouveau l’OS d’Apple à tout moment.

L’avantage d’iPodLoader est de permettre l’exécution d’OS alternatifs sur sa plateforme Apple iPod. On peut donc de cette maniere charger tout type d’OS developpé à destination de cette plateforme. C’est le cas d’iPodLinux, RockBox, Think mais également d’iBoy, iDoom, iNES, iGPSP, … Cela permet de disposer de nouvelles fonctionnalités sur son Apple iPod et d’être libre de développer ses propres applications.

Pour plus d’information:
- Page iPodLinux: iPodLoader
- Manuel RockBox d’installation et d’utilisation

La majorité des possesseurs d’un Apple iPod Video s’est essayé au nouveau service proposé par iTunes: iPod Games. Le nombre de jeux proposés est assez faible et la jouabilité laisse à désirer..

Des développeurs issus du projet iPodLinux ont effectué le portage d’émulateurs de différentes consoles afin de proposer de nouveaux jeux pour iPod. Le lancement des jeux s’effectue lors du boot de l’iPod grâce a un multi-boot (de la même manière que pour iPodLinux et RockBox).

On retrouve par exemple un émulateur de Game Boy (nom de code iBoy) basé sur le projet GNU Boy. Cela permet de jouer aux ROMs Game Boy sur son iPod. Il est également possible de jouer aux bons vieux jeux Nintendo NES (grâce a iNES ou iDarcnes), à la Game Boy Advance (iGPSP), ou encore à de nombreux jeux d’arcades (iPodMAME).

Enfin, le célébre DOOM II a aussi été porté et est disponible pour la plateforme iPod. Il est possible de charger ses WADs, comme celle d’Half Life.

Pour voir tout ceci en action, voici une sélection de vidéos:
- DOOM II et Half Life sur iPod Video
- Super Mario Bros sur iPod Video
- iBoy sur iPod G4

Pour les plus bricoleurs, il est aussi possible d’utiliser une manette de jeux type NES/Super NES à brancher sur son iPod: Tutorial et Video par AcidMods.