Dernièrement des étudiants du Miste (bac +5) ont publié leur cartographie du monde de l’intelligence économique.
Chose que malgré mes signaux d’alertes et ma veille sur Internet j’ai ignoré jusqu’à tomber sur un article de l’Académie de l’Intelligence Économique qui mettait en avant ce travail.

Or moi quand j’entends cartographie, en ce moment, j’accours, je me jette, je me précipite. Surtout si en plus il s’agit d’intelligence économique. Avec une certaine impatience donc j’attends l’ouverture du précieux fichier PDF qui va m’en dire plus sur le monde de l’intelligence économique

Je parcours les différents classements et là je m’exclame WTF????!!!!

Qu’est ce que c’est que ces classements ?

Avec surprise je n’y retrouve que peu d’acteurs a priori incontournables dans le monde de l’intelligence économique qu’il s’agisse de blogueurs ou d' »institutions » et encore moins d’entreprises.

Me serais je trompé dans ma perception de la notion d’influence (importance?) dans le secteur de l’intelligence économique ?

Passé ma première surprise donc je décortique un peu plus les classements en question.

…

Ouais OK. Bon. Quand je vois Fleishman Hillard, Edelman, le Conseil Régional d’Ile de France dans les 10 premiers site « d’influence en Intelligence Economique » je me dis effectivement que le problème ne vient peut être pas de moi.

Il m’a donc semblé intéressant de reprendre la méthodologie utilisée dans cette cartographie pour éviter que cela se reproduise (sic …)

1ère étape : la description du champ sémantique

Les auteurs du dit article ont considéré que l’intelligence économique pouvait être décrite par les mots clés suivants :
« intelligence économique »
« knowledge management »
« gestion des connaissances »
« stratégie »
« stratégie économique »
« veille »
« brevet »
« sécurité de l’information »
« information stratégique »
« lobby »
« influence »
« conduite de changement »

Et qu’une requête sur ces mots clés permettrait de générer un corpus de pages webs / sites à analyser.

Je ne dirais pas qu’il y a une erreur fondamentale sur cet aspect là même si une fois encore la définition même de l’intelligence économique revient sur le tapis.

Toutefois je serais tenté de dire que certains termes requêtés sont bien trop vastes et concurrentiels. Et par ailleurs étendant les requêtes au delà du terme intelligence économique (ou veille stratégique, veille concurrentielle..) on attaque des sites webs qui ne sont pas bien positionnés sur le terme intelligence économique, voir qui ne se considèrent pas eux même comme des acteurs de l’intelligence économique.

On mélange donc des sites et acteurs d’un marché de niche au milieu de site sur la « stratégie »…

2) sélection des blogs d’influence

Les auteurs se sont appuyés sur le classement fournis par les moteurs de recherche proposant des services de blog et par la « référence en matière d’IE en France, le Service de Coordination de l’intelligence Economique de Bercy« . [dernière actualité juin 2010 colloque intelligence économique à Narbonne. Y a du bon vin à Narbonne. Rouge. La Clape.]

Les gars, j’ai pas une super bonne nouvelle… Je veux surtout pas dénigrer le SCIE, c’est pas mon genre du tout, par contre sincèrement côté blogs en Intelligence Économique, je ne suis pas sur que vous avez affaire à la pointure en la matière.
Par ailleurs et sauf erreur de ma part, le SCIE n’est qu’un second couteau, puisque dans la politique public d’intelligence économique c’est le coordinateur interministériel qui tire les ficelles.

On se demande d’ailleurs pourquoi les auteurs ne se sont pas référés au site www.intelligence-economique.gouv.fr … ah, pardon, on me dit dans l’oreillette qu’il est out depuis à peu près 9 mois.

Les auteurs se sont également appuyés sur Ami Software qui leur a remonté un grand nombre de documents leur prouvant la croissance quasi exponentielle du nombre de blogs en intelligence économique, même s’ils ne parlent pas d’Intelligence Économique.

Ami Software n’étant en aucun cas une source d’information on aurait aimé en savoir plus sur le process de collecte via Ami Enterprise Intelligence (oui, note aux auteurs, Ami Software c’est la société et non pas le produit…) pour savoir s’ils ont précédé à une extraction sur des sites limités ou s’ils ont utiliséles connecteurs Google / Yahoo d’Ami.

Au final les auteurs ont donc utilisés  pour identifier ces blogs :
– SCIE
– Top Blog Wikio
– IceRocket
– Technorati Blogs top
– Joueb
– Weborama…

Allez. On continue à mélanger joyeusement les moyens d’identification, le tout en induisant des biais multiples par le mix entre plusieurs classement dont on a aucune idée de la façon dont ils sont établis…

Finalement 133 blogs ont été retenus. on a éliminé les blogs qui traitaient d’un sujet éloigné de l’IE (Comment ? Tri humain ???? on aurait bien aimé le savoir…)

3) les critères d’influence

On s’approche des choses qui deviennent vraiment croustillantes….

Les auteurs ont utilisés pour déterminer l’influence d’un blog certains critères qu’ils ont issus de Top Blogs.

Pour Google :
– La classement du blog. Mais quel classement ???? sur quelle requête ????
– Les liens entrant
– Les pages indexées
– Le Page Rank

Tout ceux qui bossent un peu sur le web et dans le référencement le savent : la commande de compte des inbound links et de pages indexées est un total #fail et donne des résultats erronés. Il vaut mieux utiliser Yahoo sur ces deux points. Personne n’a pris le temps de le dire aux auteurs.

Pour Yahoo :
– Le classement du blog. (même remarque… quel classement…)
– Liens entrants
– Pages indexées

Pour les deux derniers critères on somme avec les mêmes de Google, on prend le carré de l’hypothénus on multiplie par l’âge du capitaine et on a le nombre réel d’inbound links… ?

Critères sur Top des blogs :
– Classement Alexa
– Classement Délisious (Delicious)
– Langue du blog
– Date du dernier article
– Catégorie
– Nombre d’abonnés Feedburner

On se demande qu’elle est la portée de la date du dernier article sur l’influence. Mais bon…

4) L’erreur qu’il ne fallait pas commettre

Finalement les étudiants nous disent la métrique qu’ils ont retenus pour classer les blogs par influence:

– Le nombre de visites sur un mois
– Le nombre de visites moyen sur 3 mois

Le tout fourni par Alexa.

Donc je le répète encore et encore pour tous les petits génies du classement en herbe, le nombre de visites d’un blog n’est pas une donnée publique et à part pour certains très grands site qui ont accepté de fournir des stats détaillées de leur audience, la donnée n’est pas une donnée accessible.

A la limite on peut utiliser Alexa « comme ça », sur le pouce, pour comparer deux sites vraiment très similaires en terme de thématiques, de publics, etc… mais utiliser ces données sur un corpus de sites intelligence économique c’est une erreur.

Par ailleurs Alexa utilise beaucoup je crois pour obtenir ses stats un logiciel installé sur le poste utilisateur qui lui permet de connaître les sites visités, les pages etc…
Le problème est donc qu’en mélangeant des types de sites ou blogs trop différents on a des chiffres totalement incohérents.

Par ailleurs j’ai rarement vu une barre Alexa installée sur un poste entreprise… hors l’intelligence économique est plutôt a priori B to B et en reposant sur ces stats Alexa on passe purement et simplement à côté de notre sujet.

Si l’on rajoute à cela les blogs qu’il serait difficile de ne pas qualifier d’influents en intelligence économique et qui n’ont pas de données Alexa car ils ne génèrent pas assez de nombres de visites, on a le complet.

5) le classement des blogs

Outils froids à la 50ème position… et Glaizer.com à la première position d’un classement des blogs. Aller poubelle. Passez votre chemin. Y a rien d’intéressant à voir ici.

Note à l’intention des auteurs de cet article : une petite révision sur les différentes stats web et sur la structuration en nom de domaines et sous nom de domaines s’impose. L’exemple est flagrant sur Glaizer où site corporate et Blog sont allègrement mélangés.

6) Ne perdons pas plus de temps

Les auteurs visiblement motivés ont continué sur une deuxième cartographie des sites influents de l’Intelligence Economique.

Si j’en avais le temps je pourrais accabler cette étude qui n’aurait probablement jamais du être publiée mais je vais m’en tenir à lister quelques unes des erreurs détectées.

Le sourcing, toujours aussi discutable en s’appuyant sur ie-news, strategic-road, lesannuaires.com (hahaha…), les 1000 sites fournis par la CCI de Lyon.

Page 16 : « La particularité des Blogs est singulière puisque d’une part ces « sites » présentent des actualités renouvelés ou reprennent en série, via des liens hypertextes, des articles déjà cités et/ou repris par ces mêmes blogs ; ce qui explique la force des liens et le nombre de liens hypertextes entre Blogs. »

Page 16 : « Les prochains graphes nous montrent très clairement une contribution importante des liens hypertextes en provenance et à destination des Blogs, malgré un nombre moyen de sites au sein de notre corpus. »

Page 17 : « Au regard des explications fournies plus haut, nous avons décidé d’écarter les Blogs de la visualisation finale des réseaux d’acteurs de l’IE.
Ce filtrage permet de s’affranchir des reprises en série de liens qui peuvent générer une visualisation erronée, voire bruitée, des relations entre acteurs « académiques » de l’intelligence économique. »

Bon mauvaise nouvelle les gars : en gros si vous avez un blog influent vous êtes directs exclus de ce classement des sites d’influence en IE pour la simple et bonne raison que vous semblez être influents et que vous avez fait ce qu’il fallait pour.

En gros l’auteur de cette carto en fait le constat mais se trouve une excuse : ces cons de blogueur ont vraiment trop tendances à se rendre la politesse en considérant que les autres blogs sont bons et en faisant des liens vers eux.

Et si tout simplement c’était la réalité ? Si tout simplement les blogs influents étaient tout simplement influents? NOOOON ça ce n’est pas possible mon bon monsieur.

Bon l’auteur a probablement omis de regarder qui tenait ces blogs et que la plupart étaient des professionnels de l’intelligence économique, des chercheurs, des profs… Mais ils ont une tare congénitale : ils sont blogueurs.

Choix des outils pour analyser tous ces sites d’influence ?

Alexa, Webtrafic 24 pour les stats (poubelle donc) et Yahoo site Explorer pour les inbound links (bon choix selon moi).

Numéro 1 du classement : Edelman. 3ème : Fleishman Hillard. Des acteurs incontournables du monde de l’intelligence économique.
En 26ème position on a quand même www.icc.fr …

Seul le classement des solutions technologiques m’a semblé crédible en fait. Bizarre car il semblerait qu’ils aient utilisés la même méthodologie. Comme quoi on peut avoir de la chance des fois.

7) La méthodologie en détail

Les auteurs plutôt que de prendre les inbound links fournis par Yahoo site Explorer, limités à 1000, ont préféré crawler les sites sélectionnés et extraire les liens avec Xenu’s Link  Sleuth.

Première remarque : ils auraient pu demander une API Yahoo Site explorer.
Deuxième remarque : c’est quand même pas la même chose de partir d’un corpus de sites et de regarder les liens sortants que les liens entrants…. surtout en question d’influence… Un influenceur aurait plutôt tendance à être linké et à linker peu.

Mais bon comme de toute façon on se trouve déjà à la 21ème page d’un document qui parle d’influence sans jamais la définir.

Une fois ces liens extraits on les pondère par l’audience du site.
Si vous avez eu la patience de lire ma prose énervée jusque là vous savez ce que je pense des audiences de site qui ont été utilisées…

8) Conclusion :

Il s’agit là d’un travail académique. Réalisé par des étudiants, que l’on pourrait pardonner, mais visiblement encadrés.
Si un étudiant m’avait présenté un rendu tel que celui là et malgré le travail visiblement fourni je lui aurais mis 0.

A aucun moment les auteurs ne prennent le temps de définir l’influence qu’ils aiment pourtant citer.

A aucun moment on ne se pose la moindre questions sur l’intérêt de la segmentation et sa viabilité. En point d’orgue de cette absence totale de raisonnement l’exclusion pure et simple des blogs qui se font des liens entre eux. Ouh les vilains.

Je suis affligé. Atterré par ce que j’ai lu.

Je comprends à la limite la petite hésitation sur les mots clés de l’intelligence économique. Et ma foi sur ce point là on peut même discuter.

Mais alors rien ne semble sérieux dans cette cartographie : la méthode d’identification du corpus de site de travail, les données extraites, les coefficients de pondération… et les choix totalement subjectifs ponctués d’une petite citation académique.

Voilà ce que je pense de la cartographie :

– Il faut se poser des questions claires sur la définition de son environnement, de son périmètre d’étude. Définir des limites et des critères précis de sélection.
– Il faut se poser des questions sur ce qu’on veut représenter car l’on n’est pas ici dans un mode de représentation souple. Chaque choix sur la collecte, la donnée doivent permettre d’obtenir des données qui vont faciliter la différenciation et l’émergence des critères sur lesquels on travaille.
– Le travail d’extraction, d’homogénéisation, de dédoublonnage est essentiel.
– Les données que vous utilisez à chacune de vos étapes doivent être sérieuses, contrôlées, vérifiées. C’est par ailleurs un concept de base de l’analyse stratégique. Injecter des données merdiques dans un système qui permet de les représenter permet dans le meilleur des cas un mauvais résultat et dans le pire une désinformation.

Donc jetez vite ce fichier à la poubelle.

Je peux vous inviter à regarder :

– La cartographie des blogs d’intelligence économique d’Aref : elles est humaine, faite par un expert, forcément sélective et subjective mais d’une qualité sans commune mesure avec celle ci.
– La carto un peu datée et pas actualisée proposée par Pikko dans la version d’évaluation de son logiciel. Là encore subjective mais bien plus représentative.
– Si vous voulez une carto plus sérieuse, plus académique, tournez vous vers le site de Christophe Jorge qui à l’époque a fait un travail tout à fait correct.

Et mon petit doigt me dit qu’avec un de mes compères on devrait vous proposer une carto dans les semaines à venir.