Netvibes souffrait d’un temps de cache important, les nouveaux posts des blogs apparaissaient longtemps après dans l’interface actuelle. Ceci est du a l’architecture classique du RSS: un client interroge régulièrement le fournisseur du flux pour récupérer les derniers articles. Ce va et vient, anodin entre deux machines, devient un véritable casse tête pour les architectes système: netvibes agrège certainement des millions(?) de flux. Imaginez les ressources machines nécessaire pour interroger un million de sites toutes les dix minutes…

C’est la qu’interviennent les protocoles comme Pubsubhubbub ou RSS Cloud expoités par wasabi. Le principe est simple (presque!):

1. Le lecteur rss s’inscrit sur un blog comme abonné aux modification
2. Dés la publication d’un nouveau article, le blog notifie tous ses abonnés
3. L’abonné a reçu la notification (reçu et pas intérrogé!)
4. L’abonné consulte le flux rss et trouve du nouveau (forcément!)
5. L’utilisateur du lecteur voit le nouvel articles quelques secondes aprés sa publication

Conservant son interface sous forme de widget d’un coté, netvibes repart quand même sur une interface plus linéaire à la google reader ou feed type facebook. Cependant google reader semble a la traine sur le temps réel, et pour feedburner je ne sais pas encore ce qu’il en est: je vous tient au courant quand j’en sais un peu plus…

Ressources

Netvibes is Relaunching to Catch Real-Time Feeds | 901am

Netvibes Delivers A Potent Stream Reader With Wasabi (Beta Invites)

Le nouveau Netvibes : édition Wasabi « Blog de Netvibes

New Netvibes Will Be World’s Biggest Real-Time Feed Reader

Pour rechercher “real time” dans la dernier minute:

http://www.google.com/search?hl=en&tbo=1&tbs=qdr.n&q=real+time&aq=f&oq=&aqi=g10

Ici c’est le parametre “qdr.n” dans cette url qui spécifie la recherche pour la dernier minute.

“qdr.s” = une seconde

“qdr.s30″ = 30 derniere secondes

Pas encore comme twitter

Bien sur, la recherche s’applique au contenu indéxé par google récemment, et ce contenu peut être bien plus vieux (quelques jours).  La force de twitter est de donner un contenu trés récent, a l’instant présent pour des millions (et plus?) de messages. Mais…

La recherche temps réel comme objectif

Comme le co-fondateur l’a exprimé, google se doit d’être présent sur la recherche “temps réel”. Et il a bien des atouts: son index, son contenu trusté (la qualité, réputation, viabilité d’un site indexée est trés bien calculée), son infrastructure…

Il suffirait d’indexer très rapidement le contenu récent.  Sur le web il est bien plus facile (quand on s’appel google) d’évaluer la qualité de la source du contenu. Et bien sur les flux rss de confiance seront crawlés trés rapidement (c’est un peu déja le cas).

Finalement si ce petit hack existe ce ne doit pas être par hasard, non?

Ressources

Larry Page on Real Time Google: We Have To Do It

Make Google Search Real-Time With This URL Hack

Even More Recent Google Search Results

Google Watch – Real-time search – How to Search Google in Near Real-Time

Omgili blog » Near-Real-time search on Google

Son fonctionnement est le suivant:

1. un fllux rss publie une adresse d’inscription a la notification de mise à jour
2. le client rss s’incrit comme client à etre notifié
3. mise à jour du blog: tous les clients sont notifiés  (push)
4. le client a tout de suite connaissance du nouvel  élément, il peut l’afficher

Le principal intéret de cette technologie est de combler l’écart entre le rss et les flux temps réel (twitter etc..).  Aujourd’hui une mise a jour d’un blog n’est tracké par un lecteur que plusieurs dizaines de minutes plus tard. A contrario un post twitter est instantanément diffusé.

Un client RSS doit constamment interroger les serveurs hébergeants les flux RSS pour savoir si il y a du nouveau contenu. Tout cela genére une activité réseaux conséquente, c’est pour cela que l’interrogation se fait avec un écart de plusieurs dizaines de minutes.

Avec RSSCLOUD, le fllux RSS passe à la vitesse du message instantané, ce qui ouvre des perspectives:

• économie de ressources informatiques
• moins de spam
• message instantané plus riches qu’un texte de quelques dizaines de caractères

Des protocoles existaient déja tel que “poing-o-matic” mais étaient largement victimes du spam.

Pas tout de suite de révolution du RSS

1. Les principaux lecteurs RSS n’intégre pas encore le rsscloud
2. Le cout machine de notification de mise a jour est ingérable sur des petits serveurs avec beaucoup d’abonnés: il faudra certainement externaliser cette tache (feeburner like?)
3. La diffusion de cette technologie va prendre du temps

Quoi qu’il en soit, je suis plutôt enthousiaste: il reste de nombreux progrés à faire dans le domaine de la diffusion d’articles de blog  mais nous avons ici  la preuve que des initiatives et de la créativité existent.

De nombreuses ressources

There’s a Reason RSSCloud Failed to Catch On | Workbench

WordPress.com and RSS Streaming Models. « Kevin Burton’s NEW FeedBlog

RSS Cloud Important but Feedburner feeds will still be slow to update! – Geek News Central

WordPress Enters Real-Time: 7.5 Million Blogs Reach Twitter Speed

WordPress.com Enables RSSCloud In Post Feeds

RSSCloud now supported by WordPress – Does this mean no more wait for latest news? | BiGGTech

RSSCloud For WordPress @ Joseph Scott

Quel business model pour un site communautaire?: RSS est mort, vive RSScloud !

WordPress Just Made Millions of Blogs Real-Time With RSSCloud

Il y a quelques années l’information était stockées et interrogeable dans la durée. Google a profité d’un index gigantesque dans lequel toutes les pages de la planète étaient  présentes: il était le moyen le plus courant pour les retrouver. L’information indexée datait en moyenne de quelques dizaines de jour (j’imagine): difficile alors de trouver des données très récentes.

L’arrivée de nouvelles technologies et services ont changé la donne comme:

• twitter
• les réseaux sociaux en général (facebook etc..)
• les flux RSS (ne les oubliont pas)

Le web se publie alors en quelques secondes. Grace au “graphe social”, contrairement a l’email, les messages sont destinés a un grand nombre de personnes. Et grand avantage du “graphe social” il permet de truster l’information: si beaucoup de monde me suit et que ce monde la est aussi digne de confiance mon info a plus de valeur. Le spam devient compliqué. Merci les apis et la notion publique du message: c’est le web entier qui partage et donc capitalise l’information.

Enfin les messages instantanés sont accompagnées de données implicite à caractère psychologique/personnel/humain: mon humeur,mon avis sur un produit, ma réaction à une actualité. Cet indice supplémentaire permet de traduire avec plus de finesse un message (pour la machine)

En résumé il s’agit plus de pratique, de méthode d’utilisation de la technologie qui font le web temps réel que de techniques pures (matériel). Mais l’essentiel est que nous en profitons tous.

Des liens pour en savoir plus

The Real-Time Web: A Primer, Part 2

Real-time Web Monitor

Outils de veille: Google et le “real-time web”

Ron Conway investit sur le temps réel et estime le marché à $1Md en 2011 « Marketing 3.0

L’internet en temps réel : un marché de 5 milliards de dollars selon John Borthwick « Marketing 3.0

The Real-Time Web: A Primer, Part 1

Effectivement, ces derniers jours twitter fait parler de lui sur le theme de la recherche temps réelle: que se passe t’il en ce moment dans cette ville? Que disent les gens de facebook ce soir? etc…

Ce service de microblogging récolte les humeurs, avis, discussions, préoccupations de six millions d’utilisateurs à l’instant t et c’est sa force: sa base de données utilisateur et ce concept feront son business model.

Il sera intéressant pour une marque d’avoir un feedback direct lors de la sortie de son nouveau produit. Également tracker les événements dans une ville,connaitre la popularité d’une personne ou son blog etc…

Google ne sait pas faire ca aujourd’hui, et surtout ne possède pas un flux d’informations alimenté par six millions de personnes, sur un ton personnel et non officiel: un terrain de jeu inégalé pour le data mining social.

Une question quand même, celle de la sécurité: la censure est essentielle sur les thèmes extrêmes, et le spam nous prends la tête trop souvent, espérons que cela ne soit pas LA faille qui nous privera d’un outil utile pour tous…

Quelques lectures de référence

Realtime Twitter Search Results on Google (MT Hacks)

O’Brien: How Twitter could be a threat to Google – San Jose Mercury News

Twitter: We Can Do What Google Can’t – Advertising Age – Digital

Facebook’s Response To Twitter

Twitter Search

It’s Time To Start Thinking Of Twitter As A Search Engine