Bonjour,

J'ai compris comment fonctionne le Bag of Words et le TF-IDF. J

e me demandais s'il y avait une méthode spécifique pour extraire les syntagmes nominaux les plus pertinents d'un texte. Je précise que je parle des syntagme nominaux à emboîtement simple qui suivent un pattern max de type determinant+nom+ adjectif +préposition +déterminant + nom + adjectif (ou variante ex. la maison de la forêt noire).

Merci de vos réponses.

AC

Avec NLTK tu peux récupérer facilement la classe grammaticale des mots (adverbe, préposition, etc...) et leurs fonctions.

A partir de ça tu peux facilement construire toi même une logique de récupération.  (si nom suivit de adjectif alors ...) 

Merci de la réponse. J'extrais déjà les syntagmes nominaux avec Spacy. Mon problème est de savoir quels sont les plus pertinents (en terme de poids sémantique). Je me demandais s'il y avait une méthode de pondération pour les syntagmes car si j'ai bien compris, le tf idf concerne uniquement les "mots simples"..

Est-ce que le fait de baser l'extraction des syntagmes nominaux sur un des termes du syntagme avec un score TF-IDF est pertinent ?

Je sais que c'est utilisé pour jauger le sentiment (-1 = négatif, 0 = neutre, 1 = positif) ainsi que l'objectivité (-1 = subjectif, 1 = objectif), mais je n'ai jamais vu de cas pour mesurer la pertinence des syntagmes. A mon avis oui ça a un sens, surtout dans le cadre d'un résumé automatique, mais je ne connais pas d'API ou lib qui mesure cela, après c'est pas du tout mon domaine donc je ne suis pas une référence.

-
Edité par WorstDevEver 9 juillet 2019 à 9:01:54

Ok, merci de ta réponse. Je continue mes recherches....

Bonjour,

Serait-il possible d'avoir le code nécessaire pour obtenir la "Première visualisation t-sne de notre corpus" s'il vous plaît ? Merci d'avance

-
Edité par Jofo777 15 août 2019 à 9:17:11

Bonjour, je reprends la question de Jofo777

Serait-il possible d'avoir le code nécessaire pour obtenir la "Première visualisation t-sne de notre corpus" s'il vous plaît ?

Pour les besoins du cours, quels sont les jeux de données par défaut qu'on peut utiliser sur la librairie nltk

Bonjour, je pense que ce cours n'a pas été relu. On ne peut pas utiliser les mêmes données que le prof, les codes sont incomplets ou source d'erreur, on ne peut pas vraiment suivre, on ne peut pas tester les librairies. Il faudrait le mettre à jour..

Bonjour,

Hello @OC

Afin de vous assurer d'avoir une réponse le plus rapidement possible, je vous invite à directement contacter l'équipe du site via l'adresse hello@openclassrooms.com. En effet, l'équipe du site ne passant que très rarement sur les forums, il sera beaucoup plus efficace de les contacter directement.