๐๐ฎ’๐ž๐ฌ๐ญ-๐œ๐ž ๐ช๐ฎ๐ž le ๐œ๐ฅ๐š๐ฌ๐ฌ๐ข๐Ÿ๐ข๐ž๐ฎ๐ซ ๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ ?

Le ๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ est un ๐œ๐ฅ๐š๐ฌ๐ฌ๐ข๐Ÿ๐ข๐ž๐ฎ๐ซ ๐ฉ๐ซ๐จ๐›๐š๐›๐ข๐ฅ๐ข๐ฌ๐ญ๐ž rapide, fondรฉ sur le ๐ญ๐ก๐ž́๐จ๐ซ๐ž̀๐ฆ๐ž ๐๐ž ๐๐š๐ฒ๐ž๐ฌ.

Son objectif est de prรฉdire la classe d’une observation en calculant la probabilitรฉ de chaque classe ร  partir des variables explicatives.

Pourquoi dit-on “naive” ?
Parce qu’il suppose que toutes les variables explicatives sont
๐ข๐ง๐๐ž́๐ฉ๐ž๐ง๐๐š๐ง๐ญ๐ž๐ฌ ๐œ๐จ๐ง๐๐ข๐ญ๐ข๐จ๐ง๐ง๐ž๐ฅ๐ฅ๐ž๐ฆ๐ž๐ง๐ญ ร  la classe.

Cette hypothรจse est souvent peu rรฉaliste dans la pratique, mais le modรจle donne malgrรฉ tout des rรฉsultats surprenamment efficaces.

๐Ÿ“ ๐‹๐š ๐Ÿ๐จ๐ซ๐ฆ๐ฎ๐ฅ๐ž :
P(Cโ‚– | x) = P(Cโ‚–) × ∏ P(x
แตข | Cโ‚–) / P(x)

๐Ž๐ฎ̀ :
P(Cโ‚– | x) → probabilitรฉ a posteriori de la classe k sachant les variables
P(Cโ‚–) → probabilitรฉ a priori de la classe k
P(x
แตข | Cโ‚–) → vraisemblance de la variable i sachant la classe k
P(x) → รฉvidence, commune ร  toutes les classes, souvent ignorรฉe dans la dรฉcision finale

⚡ ๐‚๐จ๐ฆ๐ฆ๐ž๐ง๐ญ ๐œ̧๐š ๐Ÿ๐จ๐ง๐œ๐ญ๐ข๐จ๐ง๐ง๐ž ?
① Calculer les probabilitรฉs a priori ร  partir des donnรฉes d’apprentissage
② Estimer la vraisemblance de chaque variable pour chaque classe
③ Multiplier la probabilitรฉ a priori par les vraisemblances de toutes les variables
④ Retenir la classe ayant la probabilitรฉ la plus รฉlevรฉe

๐Ÿ” ๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ ๐ฏ๐ฌ ๐‘๐ž́๐ ๐ซ๐ž๐ฌ๐ฌ๐ข๐จ๐ง ๐‹๐จ๐ ๐ข๐ฌ๐ญ๐ข๐ช๐ฎ๐ž

La ๐ซ๐ž́๐ ๐ซ๐ž๐ฌ๐ฌ๐ข๐จ๐ง ๐ฅ๐จ๐ ๐ข๐ฌ๐ญ๐ข๐ช๐ฎ๐ž apprend les poids des variables par optimisation et modรฉlise directement P(y|x). C’est un modรจle discriminant.

Le ๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ, lui, estime les probabilitรฉs ร  partir des frรฉquences observรฉes, modรฉlise la distribution conjointe P(x,y) et appartient aux modรจles gรฉnรฉratifs.

En pratique :
๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ est trรจs rapide ร  entraรฎner.
La rรฉgression logistique demande une optimisation itรฉrative, mais gรจre souvent mieux les variables corrรฉlรฉes.

✍️ ๐๐ฎ๐š๐ง๐ ๐ฎ๐ญ๐ข๐ฅ๐ข๐ฌ๐ž๐ซ ๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ ?
Utilisez-le notamment pour :
• la classification de textes (spam, analyse de sentiments)
• les prรฉdictions en temps rรฉel quand la rapiditรฉ est essentielle
• les donnรฉes de grande dimension et creuses avec peu d’exemples d’apprentissage

๐€̀ ๐ซ๐ž๐ญ๐ž๐ง๐ข๐ซ :
Le
๐๐š๐ข๐ฏ๐ž ๐๐š๐ฒ๐ž๐ฌ est un modรจle simple, rapide et puissant, particuliรจrement utile lorsque l’on veut construire un classificateur efficace avec peu de complexitรฉ.

________________________________________

________________________________________

Si vous avez trouvรฉ cette publication utile, n'hรฉsitez pas ร  ๐’๐’‚ ๐’๐’Š๐’Œ๐’†๐’“ ๐’†๐’• ร  ๐’๐’‚ ๐’‘๐’‚๐’“๐’•๐’‚๐’ˆ๐’†๐’“ avec vos amis et collรจgues !

Pour mieux apprendre l’utilisation des logiciel et modรจles statistiques, nous vous invitons ร  prendre part ร  la prochaine session de notre formation en ๐™€๐™˜๐™ค๐™ฃ๐™ค๐™ขรฉ๐™ฉ๐™ง๐™ž๐™š ๐™š๐™ฉ ๐™๐™š๐™˜๐™๐™ฃ๐™ž๐™ฆ๐™ช๐™š๐™จ ๐™Œ๐™ช๐™–๐™ฃ๐™ฉ๐™ž๐™ฉ๐™–๐™ฉ๐™ž๐™ซ๐™š๐™จ https://forms.gle/yZAZimRXbTFbUWZk6



________________________________________

________________________________________

#MachineLearning #NaiveBayes #Statistiques #DataScience #Classification

 

Commentaires

Posts les plus consultรฉs de ce blog

ร‰conomรฉtrie des donnรฉes de panel: de la thรฉorie ร  la pratique

Optimisez vos donnรฉes avec l'ACP avant le clustering K-means !