Bienvenue sur PHP Débutant

Mise à jour de mon code "recherche en full text"

Message original de yule

Le : 03/11/2008 à 13:56:46

Dejà lu 2937 fois avant vous

Bonjour,

J'ai crée il y a 5 ans un petit moteur de recherche en full-text (méta moteur en php-mysql) j'indexe uniquement une page par sitete, soit sa page principale sur le titre, sa description, ses métas tags et son url, je n'index pas les autres pages de ce même site et ce n'est pas le but.

J'aimerais le remettre au goût du jour et que celui-ci offre plus de résultats…
Comme vous le savez, Le recherche en full-text est assez strict, il y a une restriction avec la recherche en texte intégral d'ou l'utilisation des boolens si MATCH() est utilisé, c'est le cas de mon petit moteur de recherche.

Actuellement, si la recherche est infructueuse et que le résultat est NULL, j'affiche les 5 derniers résultats de google par son API…

Comme le full text est très strict, j'aimerais élargir la recherche comme suit

Recherche full text avec boolen (pom* pour tous les mots qui commencent avec pom.. pomme, pommes, pomme de terre, etc…) FONCTIONNE ACTUELLEMENT

Pour l'ordre d'affichage, c'est selon la valeur sémantique du mot recherché sur le titre du site, la description, son url et ses métats tags, FONCTIONNE ACTUELLEMENT

J'aimerais une sorte de soundex sur la recherche, une recherche phonétique + orthographique si la recherche stricte est null du type : A FAIRE

ai en e
ou en u
y en i
au en o
eau en o
qu en c
th en t
dé-doublonnage de rr en r tt en t ss en s
Simplification des doubles consonnes
Suppression des consonnes en dernière lettre etc…

Pari --> Paris
Parriss --> Paris

ou encore :

bato --> bateau
batteau --> bateau
bateaus --> bateau
battau -- > bateau
Bateaux --> bateau etc..

Etc…

Le but serait bien d'avoir une recherche moins strict qu'actuellement et avec plus de choix à proposer sur la recherche effectués par les visiteurs

Si à ce stade, le résultat est encore NULL, il faudrait donc switcher sur une recherche en LIKE% qui est plus souple et y donner également une valeur sur les mots clefs trouvés (une valeur plus grande si le mot clef se trouve dans le titre du site, moins grande si celui-ci se trouve dans la description et encore moins grande s'il se trouve dans les métas tags.. etc… A FAIRE si nécessaire… Peut-être que la recherche phonétique et orthographique peut suffire ? à l'écoute de votre avis sur ce point

Et si à ce stade la recherche est toujours NULL… Alors affichage par l'API de google, les 5 premiers résultats de google , FONCTIONNE ACTUELLEMENT

J'ai des petits filtres sur des mots bannis au niveau sexe, il faudrait mieux coder mon regex…, A MODIFIE SI NECESSAIRE

Et évidemment nettoyer mon code sur cette recherche qui n'est certainement pas au top des top.. néanmoins, sur un total de 45'000 sites, la recherche reste très rapide..

Actuellement j'offre 2 choix sur la recherche, une recherche pour un site suisse ou un site francophone, ne sachant pas en son temps.. regrouper mes deux recherches, j'avais deux pages identiques pour juste un WHERE qui changeait en 1 ou 0 (on ne rigoles pas…)

Je souhaiterais donc une offre pour ces modifications, il s'agit de deux pages php + une page en include pour mes filtres, actuellement ce moteur de recherche fonctionne, mais il est malheureusement assez limité pour les raisons mentionnées ci-dessus. Merci de me mentionner ce que comprend votre offre et vos solutions.

D'avance merci pour votre réponse si cela vous intéresse.
Cordialement
Yule

Retour à l'index du forum

Charte des forums PHPDébutant

Bienvenue à vous,

Vous voici donc prêt à poster sur les forums de PHPDébutant. Avant toute chose, merci de prendre le temps de lire les quelques lignes qui suivent.

Attention, à partir du moment ou vous postez dans les forums, vous acceptez la présente charte. Si votre message est modéré ou supprimé, vous ne pourrez pas dire que vous n'étiez pas au courant des règles !

Pourquoi une charte

Le but de cette charte est simple : que ces forums restent cordiaux et que les personnes aidant les autres ne se sentent pas lésées, insultées, critiquées. Pour que ces forums fonctionnent, il faut des personnes qui répondent aux questions. Pour que celles ci restent sur le forum, il faut les traiter avec respect, et ne pas les confondre avec des bonnes poires, esclaves, etc...

Mesures de régulation

Un nouveau message ne disant pas bonjour, ou insultant, dont le titre est tout en majuscules, pourra être supprimé sans justification (raisons non limitatives).
Prenez le temps de vérifier que la question que vous allez poser n'a pas déjà été posée, à l'aide du formulaire de recherche.
Prenez également le temps de vérifier que la réponse à votre question ne se trouve pas dans les tutoriaux. Nous ne pouvons pas répeter pour chaque visiteur tous les cours, il sont écrits, profitez-en (dans l'ordre tant qu'à faire) !
Nous ne faisons pas de scripts tout prêts. Nous aidons et vous guidons pour que vous puissiez trouver vous même la réponse, ce qui est beaucoup plus formateur.
Si vous comptez poster un message publicitaire, abstenez-vous. Au mieux le message sera supprimé, au pire les habitués descendront votre service en flamme.
Pour tout message de recrutement, précisez bien votre demande. Inutile de poster pour trouver un développeur pour faire gratuitement votre site de webmastering qui vous rapportera plein de sous. Les seuls coups de mains donnés en développement sont pour des associations ou des sujets passionnant un développeur.
Toute personne tenant des propos racistes ou illicites sera bannie et pourra faire l'objet de poursuites.
L'humour étant très présent sur ces forums, ne réagissez pas violemment à des propos qui pourraient être à prendre au second degré et avec de l'humour.
Attention aux trolls ! Leur multiplication peut entraîner la mort des forums, et sans forum, plus d'aide !
Respectez les thèmes des forums. Pensez aussi à vérifier que votre message n'a pas été déplacé si vous le croyez effacé.

Conseils

N'oubliez pas que les personnes à qui vous vous adressez sont des bénévoles qui donnent de leur temps pour vous. Si vous êtes méchants avec eux, il n'aideront plus et vous n'aurez plus d'aide !
Ne soyez pas pressé. Nous avons une vie aussi, et nous ne sommes par forcément tout le temps disponibles.
N'oubliez pas que les smileys sont la pour faire comprendre l'humeur dans laquelle vous rédigez un message. Il est indispensable de mettre des smileys quand vous faites de l'humour, sinon le message pourrait être mal perçu (ca serait quand même idiot de plomber l'ambiance en faisant de l'humour !).
Surveillez votre orthographe, nous ne vous demandons pas d'être littéraire, mais que votre message soit au moins compréhensible. Evitez à tout prix le style SMS.
Expliquez clairement le problème, ce n'est pas toujours facile, mais mieux vaut essayer de le faire le plus possible.
Ne postez pas de questions trop vagues du genre "comment faire un forum". Cela ne sert à rien, cela ne s'explique pas sur un coin de forum.
Mettez un titre clair, correspondant au sujet que vous allez poster. A l'aide, au secours, etc... ne sont pas d'une grande utilité pour ceux qui vont vous aider. Parfois nous passons en coup de vent, et si nous ne savons pas ce que va contenir le message, nous ne le regarderons même pas.
Ne mettez par [URGENT] ou autre joyeuseté du genre dans vos titres de messages. Cela irrite les gens (il y'a plus urgent dans la vie, pensez aux gens qui meurent de faim ou ayant besoin des pompiers, ça c'est urgent), et vous n'aurez pas votre réponse plus vite pour autant.
Si vous connaissez déjà à quel domaine votre question d'adresse (par exemple mysql, html, php, javascript), n'hésitez pas à le marquer au début de votre message, avec un [html] par exemple (notez les minuscules).
Ne dites pas "ça marche pas". Il y a toujours des raisons. Je vous invite à consulter le tutorial "ça marche pas" qui vous aidera à mieux expliquer votre problème.
Ne postez pas 36000 lignes de code. Sur le forum, le code apparaît non coloré et sans indentation, ce qui est illisible. Au dessus de 5 lignes, plus personne ne lit et vous n'aurez pas de réponse. Utilisez le wall
En règle générale restez courtois et clair, n'oubliez pas que la politesse fait partie de la vie courante. Il est de bon ton de dire bonjour même pour une réponse, même plusieurs fois dans la journée (ceux qui vous lisent n'ont pas forcément lu vos autres messsages)

La Fin

Avec tout ces conseils vous augmenterez les chances de réponse, leur pertinence et leur rapidité

Voilà, ça sera tout, bonne écriture :)

Fermer les règles et poster un message

Rechercher dans le forum