Coursera Learner working on a presentation with Coursera logo and
Coursera Learner working on a presentation with Coursera logo and

L’analyse de regroupement ou simplement le regroupement est essentiellement une technique d’apprentissage non assistée qui partitionne les informations en fonction de divers groupes ou rassemblements explicites, avec pour objectif final que les informations regroupées dans des rassemblements similaires aient des propriétés comparables et que les informations regroupées dans divers rassemblements aient des propriétés différentes dans un certain sens. Elle contient un large éventail de stratégies dépendant de divers progrès.

Par exemple K-Means (séparation entre les foyers), Liking proliferation (séparation en diagramme), Mean-move (séparation entre les foyers), DBSCAN (séparation entre les foyers les plus proches), Gaussian blends (séparation de Mahalanobis vers les foyers), Unarthly grouping (séparation en diagramme) et ainsi de suite.

À un niveau très élémentaire, toutes les techniques de regroupement utilisent une méthodologie similaire ; par exemple, nous calculons d’abord les similitudes et ensuite, nous l’utilisons pour regrouper les informations en fonction des rassemblements ou des amas. Nous nous concentrerons ici sur la stratégie de regroupement spatial des utilisations basée sur l’épaisseur avec commotion (DBSCAN).

Les groupes sont des lieux épais dans l’espace d’information, isolés par des zones de moindre épaisseur de foyers. Le calcul du DBSCAN repose sur cette idée naturelle de “grappes” et de “commotion”. L’essentiel est cependant que pour chaque objectif d’un groupe, la zone d’un balayage donné doit contenir en tout cas un nombre de base de foyers.

Pourquoi DBSCAN ?

Stratégies de regroupement (K-implies, PAM bunching) et travail de regroupement progressif pour trouver des grappes de forme circulaire ou des grappes arquées. En tant que telles, elles sont raisonnables uniquement pour les grappes conservatrices et bien isolées. En outre, ils sont sérieusement influencés par la proximité de l’agitation et des anomalies dans les informations.

Les informations authentiques peuvent contenir des anomalies, comme –

I) Les grappes peuvent avoir une forme discrétionnaire, par exemple, celles qui figurent dans la figure ci-dessous.

ii) L’information peut contenir de la clameur.

les chiffres ci-dessous montrent un index informatif contenant des groupes non convexes et des anomalies/clameurs. Compte tenu de ces informations, le calcul de k-implies connaît des problèmes pour distinguer ces grappes avec des formes discrétionnaires.

Le calcul du DBSCAN nécessite deux paramètres –

Dans cet algorithme, nous avons 3 types de points de données.

Point central : Un point est un point de base s’il a plus de points MinPts dans l’eps.

Poste frontière : Un point qui a moins de MinPts dans l’eps mais qui est dans le voisinage d’un point central.

Bruit ou aberration : Un point qui n’est pas un point central ou un point frontalier.

eps : Il caractérise la zone autour d’un point d’information, par exemple dans le cas où la séparation entre deux points est inférieure ou équivalente à “eps” à ce point, ils sont considérés comme voisins. Si, par hasard, l’estime des eps est trop faible, une grande partie de l’information sera alors considérée comme une exception. S’il y a de fortes chances qu’elle soit extrêmement importante, les groupes se regrouperont et la plupart des informations seront regroupées de la même manière. Une approche pour découvrir l’estime des eps dépend du diagramme de séparation k.

Voici l’algorithme de regroupement DBSCAN en pseudo-code :

DBSCAN(dataset, eps, MinPts){

# indice de regroupement

C = 1

pour chaque point p non visité dans l’ensemble de données {

         marquer p comme visité

         # trouver des voisins

         Voisins N = trouver les points voisins de p

         if |N|>=MinPts :

             N = N U N’.

             si p’ n’est membre d’aucun groupe :

                 ajouter “p” au groupe C

Langages

Weekly newsletter

No spam. Just the latest releases and tips, interesting articles, and exclusive interviews in your inbox every week.