Projet d'annuaire collaboratif

[Popop56]

Bonjour,

Je suis parti d’un constat voir même de plusieurs :
-référencé son site, pour un webmaster, c’est ennuyeux au possible… surtout que si l’on veut obtenir des bon résultats il faut s’inscrire sur énormément d’annuaire (en autre bien sur).
-Pour l’administrateur d’un annuaire devoir valider énormément de demande chaque jour est également un travail, à la longue, barbant. Je n’ai jamais tenu d’annuaire mais il n’y a cas voir le temps d’attente avant d’être valider… des fois plusieurs mois !

J’ai donc eu une idée qui ne me semble pas trop mauvaise : Un annuaire collaboratif

Comment cela fonctionnerait ?
-Les administrateurs inscrivent leurs annuaires en précisant la thématique, le type de lien etc.
-Le webmaster lambda soumet son site comme dans n’importe qu’elle annuaire sauf qu’il choisit le type d’annuaire dans lequel il veut être référencés
-Pour la validation, chaque administrateur valide ce qu’il peut, quand il peut. La validation est stricte et plus certainement plus longue car la fiche du site doit être précise.
-A chaque fin de semaine, un fichier xml (ou autre) et généré pour chaque annuaire inscrit. Celui-ci comportera les sites qui correspondent au choix de l’administrateur de l’annuaire mais également du webmaster.
Un site ne pourra apparaître que dans 10 (à définir) fichier d’annuaire chaque semaine (ceci pour eviter la sandbox)
-Une fois le fichier généré, chaque administrateur crawl le fichier et ajoute les sites dans son annuaire (après il en fait ce qu’il veut… demande de confirmation par mail au webmaster, demande d’inscription)

Les Avantages :
Pour le Webmaster :
-Inscription dans un grand nombre d’annuaires de qualité sans répéter 20 fois la même chose.
-Pas de sandbox car le site n’est pas ajouté dans tous les annuaires d’un coup mais petit à petit
-Validation rapide car un grand nombre d’administrateur valident les sites

Pour les admin d’annuaires :
-Un certain nombre de site respectant les conditions de l’annuaire inscrit chaque semaine
-Travail de validation moins important car on n’est pas seul

Bien entendu certaine devront être mis en place :
-annuaire de qualité
-une « sandbox perso » pour les administrateurs ne validant pas assez de site mais qui récupère les liens...

J’espère que cette idée n’a pas déjà fait un bide !
Apporter moi vos idée, améliorations possible notamment pour éviter la sandbox des sites…
Ce n’est encore qu’un projet mais j’ai une bonne idée de comment je peux m’y prendre.

 

[Sini]

Je trouve l'idée assez sympas

Surtout le fait d'inscrire son site dans plusieurs annuaires "choisis" en une seule fois.

 

[Leonick]

Ca me parait intéressant, des 2 côtés en plus.

 

[shelcko]

J'ai un projet d'annuaire en cours je trouve que ça pourrait etre pas mal :twisted:

 

[sureau]

L'incovénient, c est que tous les annuaires se retrouvent avec les memes inscriptions... Ce qui ne sert à rien pour les 2 parties

 

[Zecat]

La gestion des catégories/rubrique propre a chaque annuaire va pas être une sinécure.

Par ailleurs, chaque annuaire a ses propres règles d'acceptation et trouver le dénominateur commun .... hum ...

L'idée est séduisante, la mise en musique risque d'étre compliquée (sans parler des problèmes de duplicate évoqués ci-dessus).

Sinon à propos des délais de validation, beaucoup de gestionnaire d'annuaire se sont organisés pour aller vite (c'est ce qui va faire la différence sur le long terme entre les annuiares ou l'on revient inscrire ses sites et ceux ou on renonce).

 

[Popop56]

L'incovénient, c est que tous les annuaires se retrouvent avec les memes inscriptions... Ce qui ne sert à rien pour les 2 parties

Je pense que l'on peut demander au webmaster qui soumet son site de rentrer par exemple 3 titres et 3 descriptions... je ne pense pas que cela lui pose de problème vu le temps qu'il gagne.
Après on sélectionne au hasard pour chaque annuaire.

La gestion des catégories/rubrique propre a chaque annuaire va pas être une sinécure.

J'y ai pensé. Pour le moment je pense que c'est à l'admin de l'annuaire de faire correspondre les catégories lors du crawl... ca prends pas beaucoup de temps à scripter et une fois que c'est fait pas de problème. Par la suite je pourrai integrer dans le pannel d'admin la correspondance des categories pour chaque annuaires.

Par ailleurs, chaque annuaire a ses propres règles d'acceptation et trouver le dénominateur commun .... hum ...

C'est pour cela que la fiche de chaque site doit etre détaillé afin que chaque annuaire intègre les sites en fonction de ses critères

Il est vrai que ce n'est pas un projet facile mais il me semble intéréssant

 

[arnaudmn]

Un site ne pourra apparaître que dans 10 (à définir) fichier d’annuaire chaque semaine (ceci pour eviter la sandbox)

Ouf, j'ai eu peur que tu oublies ça
Reste à faire comprendre a ceux qui inscrivent leur site qu'ils ne pourront le faire en automatique que dans 10 annuaires .... et qu'ils devront le faire manuellement dans les autres.
Peut-être ajouter plusieurs zone de description, et ainsi répartir chaque description dans 10 annuaires ; comme ça pas de risque de duplicate contenu (même si, si les annuaires sont vraiment différents, la mise en forme est tellement différente que ça n'a pas de raison d'arriver)
Mais bon ; si le principe est bien, le faire est compliqué. Chaque annuaire (sauf ceux basé sur des scripts tout fait) demande des infos différentes. Par exemple, moi j'accepte des descriptions mises en forme avec des liens et des images et du gras et de l'italique (etc...), mais peut le font.

 

[NxtGen]

L'idée est interressante
Moi je verrais le truc comme une base de données géante de site pret a etre indexer dans les annuaires, et les webmaster des annuaires peuvent choisir, selon des criteres (thématique, etc) ceux qu'ils veulent indexer dans leur annuaire, ainsi ca evite ca :

L'incovénient, c est que tous les annuaires se retrouvent avec les memes inscriptions... Ce qui ne sert à rien pour les 2 parties

 

[Popop56]

Un site ne pourra apparaître que dans 10 (à définir) fichier d’annuaire chaque semaine (ceci pour eviter la sandbox)

Ouf, j'ai eu peur que tu oublies ça
Reste à faire comprendre a ceux qui inscrivent leur site qu'ils ne pourront le faire en automatique que dans 10 annuaires .... et qu'ils devront le faire manuellement dans les autres.
Peut-être ajouter plusieurs zone de description, et ainsi répartir chaque description dans 10 annuaires ; comme ça pas de risque de duplicate contenu (même si, si les annuaires sont vraiment différents, la mise en forme est tellement différente que ça n'a pas de raison d'arriver)
Mais bon ; si le principe est bien, le faire est compliqué. Chaque annuaire (sauf ceux basé sur des scripts tout fait) demande des infos différentes. Par exemple, moi j'accepte des descriptions mises en forme avec des liens et des images et du gras et de l'italique (etc...), mais peut le font.

Ben en faite dans mon idée le site est soumis à TOUS les annuaires. Mais pour eviter la sandbox le site sera soumis a 10 annuaires la premiere semaine, 10 autres la semaine suivante etc...

Pour la mis en forme c'est un problème. Je ne vois pas d'autre solution que de demander au referenceur de mettre plusieurs type de description.

 

[Popop56]

L'idée est interressante
Moi je verrais le truc comme une base de données géante de site pret a etre indexer dans les annuaires, et les webmaster des annuaires peuvent choisir, selon des criteres (thématique, etc) ceux qu'ils veulent indexer dans leur annuaire, ainsi ca evite ca :

L'incovénient, c est que tous les annuaires se retrouvent avec les memes inscriptions... Ce qui ne sert à rien pour les 2 parties

Avec une bdd ouverture à tous les annuaires j'ai peur que le site ce fasse sandboxé car il serait intégré trop rapidement... et donc ça ferai fuir les gens

 

[Leonick]

Avec une bdd ouverture à tous les annuaires j'ai peur que le site ce fasse sandboxé car il serait intégré trop rapidement... et donc ça ferai fuir les gens

Non, car comme il parlait de 10 annuaires, il suffit de ne plus laisser accès aux infos de ce site une fois le 10° téléchargement effectué dans la semaine.

 

[xescorp]

L'idée est très bonne, moi je permettrai plutôt 10 titres différents, voire même un système combinatoire 1 mot-clé au hasard + 1 titre

Car si tu arrives à le mettre en place tu risques de te faire blinder d'annuaires.

Si tu as 3 titre sur 10000 annuaires cela fait 330 fois le même lien.

L'autre problème sera la modération des sites car une fois qu'ils sont dans la base, il ne faut pas qu'il passe en porno...

 

[Popop56]

L'idée est très bonne, moi je permettrai plutôt 10 titres différents, voire même un système combinatoire 1 mot-clé au hasard + 1 titre

Car si tu arrives à le mettre en place tu risques de te faire blinder d'annuaires.

Si tu as 3 titre sur 10000 annuaires cela fait 330 fois le même lien.

L'autre problème sera la modération des sites car une fois qu'ils sont dans la base, il ne faut pas qu'il passe en porno...

Je ne m'y connais pas trop en référencement... apparemment c'est le titre du lien qui tient un grande importance pour le duplicate content ?
Si c'est le cas ton idée est pas mal pouvoir avoir un grand nombre de possibilités !

 

[arnaudmn]

La gestion des catégories/rubrique propre a chaque annuaire va pas être une sinécure.

J'y ai pensé. Pour le moment je pense que c'est à l'admin de l'annuaire de faire correspondre les catégories lors du crawl...

A condition que tu ai suffisament de catégories. Si tu en mets que 10, ça va être dur de dispatcher ça dans des annuaires qui en ont plusieurs centaines. Alors que l'inverse est beaucoup plus facile.

 

[Popop56]

C'est vrai... Pour que ça marche il faut que chaque site ai une fiche la plus précise possible ce qui implique des catégories très détaillées

 

[xescorp]

J'imagine mieux un fonctionnement par mots-clefs.

Les admins d'annuaires classeraient les MC dans leurs propres catégories.

 

[Popop56]

Je vais prévoir les mots clés mais je sais pas trop comment rendre ça pratique pour l'administrateur de l'annuaire.
En attendant j'ai bien avancé sur la structure de l'appli... le plus important étant que cela soit un minimum optimisé !

 

[arnaudmn]

Je vais prévoir les mots clés mais je sais pas trop comment rendre ça pratique pour l'administrateur de l'annuaire.

Je vois pas en quoi des mots clés aideraient a trouver une catégorie. Amha, des catégories bien précises, c'est mieux
Mais je veux bien que l'utilisateur entre des mots clés (6) pour que je puisse les récupérer

En attendant j'ai bien avancé sur la structure de l'appli... le plus important étant que cela soit un minimum optimisé !

L'important avant de fignoler, c'est de tester

 

[xescorp]

Oui j'ai manqué de précision dans mon idée.

Le problème des catégories c'est qu'elles se recoupent souvent, ou qu'un lien peut être présent dans plusieurs catégories.

Du coup, j'imaginais une grande liste de mots-clés prédéfinis (1000 ou 2000 peut être), l'internaute choissisant 5 ou 10 mots-clefs dans cette liste, lui correspondant le mieux.

Ensuite, l'idée est qu'un admin d'annuaire généraliste, classera par exemple automatiquement tous les MC de type mode (mode femme, lingerie...), vers sa rubrique Mode.

Un autre annuaire beaucoup plus spécialisé tel que www.createur-de-mode.fr classera automatiquement lui aussi mais avec presque un rapport : 1 mot-clé = 1 rubrique.

Suis-je clair ? j'ai des doutes

 

[Popop56]

Moi j'ai compris :!:
Cependant ca fait pas un peu lourd de trier 2000 mots clés pour un admin ? Surtout que parfois certains mots clés peuvent faire parti de plusieurs catégories

 

[xescorp]

Oui mais c'est à faire 1 fois pour toute et cela reste moins lourds que de les choisir 1 à 1 pour des milliers de sites.

L'idée c'est que tu peux classer, les MC par grande catégorie pour que les annuaires généralistes et spécialisé s'y retrouve mieux.

Si ce n'est pas automatique, je ne vois aucun intérêt au système puisque l'admin d'annuaire devra valider la catégorie dans lequel doit se retrouver le site.

 

[arnaudmn]

(snip)
Suis-je clair ? j'ai des doutes

Ben en fait, on est d'accord ; ce que tu appels des mots clés, j'appels ça des catégories Chez moi les mots clés se sont des mots clés pour lesquels l'utilisateur peut mettre n'importe quoi
Mais si c'est une liste définie, et que celui qui soumet le site doit OBLIGATOIREMENT en sélectionner plusieurs, c'est parfait.

 

[arnaudmn]

Moi j'ai compris :!:
Cependant ca fait pas un peu lourd de trier 2000 mots clés pour un admin ? Surtout que parfois certains mots clés peuvent faire parti de plusieurs catégories

Ben oui, justement ; mais au moins ça marche pour tout le monde
Ex : chez quelqu'un qui a peu de catégorie, les mots clés "voiture", "moto", "camion" iront tous dans la même catégorie "Site de véhicules à moteur". Par contre, pour quelqu'un qui a les 3 catégories, chaque mot correspondra a une catégorie unique.
A celui qui fait l'annuaire de faire la correspondance.

 

[Popop56]

Et si un site choisi les mots clés: "voiture" "garagiste" "assurances automobile"
Comment l'annuaire va sélectionner la catégorie ?

 

[arnaudmn]

Et si un site choisi les mots clés: "voiture" "garagiste" "assurances automobile"
Comment l'annuaire va sélectionner la catégorie ?

Je dirais : c'est pas ton problème, mais celui de l'annuaire
Je dirais qu'il y a plusieurs solutions ; par exemple prendre le premier mot sélectionné. Ou alors utiliser celui qui correspond a une catégorie la moins pleine (pour equilibrer les sites dans l'annuaire) ; ou au contraire prendre celui qui correspond a une catégorie la plus remplie (ce qui donnera plus de choix au visiteur de cet catégorie); etc....

 

[Ytz]

C'est limpide !
J'attend de voir fonctionner ca avec impatience.

Une version Beta ? "OpenSource"... ?

 

[Popop56]

Ok... pour le moment je ne vois pas trop comment faire un truc propre avec ça alors je vais m'en tenir à des catégories précisent. Cependant je garde ça dans un coin de mon cerveau =)

 

[xescorp]

Oui une liste de mot clé, prédéfini cela peut ressembler à des catégories, mais c'est souvent 1 site = 1 catégorie.

Du coup, cela ressemble plus à des mots-clefs, il faut inventé un nouveau concept

Par rapport à l'exemple de Popop :
"voiture" sera évidemment un MC
Le cas "assurances automobile" est simple puisque cela fait du :
if(MC="voiture" AND MC="assurance") goincat ("assurrances automobile")

"garagiste" plus difficile, mais on peut imaginer que "réparation" soit un MC (pour réparer PC par ex), cela donnera donc :
if(MC="voiture" AND MC="réparation") goincat ("garagiste")


En ce qui me concerne, si tu n'as pas un système plus automtisé je ne vois pas trop l'intérêt, mais bon c'est ton projet

 

[crindor]

perso je trouve que l'idée des mc est bonne
apres, chaque annuaire aura loisir de faire des associations de mc pour diriger les sites qu'il aura selectionnés vers ses propres catégories sans remettre en cause ses structures

j'ai 3 annuaires, je suis preneur et participatif

 

[arnaudmn]

Faudrait aussi qu'on puisse savoir quel annuaire a valider le site le premier. Et qu'on puisse demander a ne plus voir de sites validé par cet annuaire (pour le cas ou tu acceptes n'importe quoi comme annuaire, et qu'il y en ai un qui accepte par exemple des descriptions qui soient uniquement une suite de mots clés .... moi j'en veux pas)

 

[Popop56]

Ok, merci a vous pour les propositions.

J'y vois un peu plus clair pour les mots clés, me reste plus qu'à codé le truc !

 

[crindor]

Faudrait aussi qu'on puisse savoir quel annuaire a valider le site le premier.

peu importe, tu n'ai pas obligé d'intégrer un site qui ne te convient pas
la validation collégiale est une chose, l'intégration personnelle en est une autre

 

[arnaudmn]

Faudrait aussi qu'on puisse savoir quel annuaire a valider le site le premier.

peu importe, tu n'ai pas obligé d'intégrer un site qui ne te convient pas

Sauf que si je sais qu'il a été validé par quelqu'un qui le fait correctement, j'aurai tendance a accepter le site sans aucun controle suplémentaire ; et s'il l'a été par quelqu'un qui accepte n'importe quoi, je veux y regarder à 2 fois.

 

[crindor]

il suffit de ne selectionner que des annuaires sérieux, c'est simple à voir en les visitant au préalable

 

[Popop56]

Un petit message pour vous informer les personnes intéressées sur l'état du projet !

J’ai fini le script permettant à chaque annuaire de faire correspondre un mots clés à une catégorie. (Merci à ce qui m’ont donné les idées de départ !). J’ai essayé de faire une interface la plus simple possible afin que ça ne soit pas trop chiant à gérer (surtout si il y a un grand nombre de mots clés).

L’interface de validation de site et également bien avancée, j’ai la aussi essayé d’automatiser le plus possible le boulot afin que le validateur n’ai qu’à jeter un petit coup d’œil sur les infos données avant de rendre son verdict.

J’ai par ailleurs fais un premier jet du script qui génèrera les fichiers à parser par chaque annuaire contentant les sites validés. Comme conseillé juste au dessus chaque annuaire pourra bannir les validateurs qui, selon eux, ne font pas du bon boulot (ainsi que sur d'autres critères).

Après il me reste à codé le plus facile le plus chiant, c'est-à-dire l’interface public et coté validateur ainsi que les outils statistiques et de contrôle.

Si des personnes sont intéressés pour devenir beta-testeur (pas tout de suite, j’ai encore pas mal de truc à finir) envoyé moi un message en MP.