Heim > Artikel > Backend-Entwicklung > PHP und maschinelles Lernen: So erkennen Sie Anomalien und behandeln Ausreißer
PHP und maschinelles Lernen: So führen Sie eine Anomalieerkennung und Ausreißerverarbeitung durch
Übersicht:
Bei der tatsächlichen Datenverarbeitung treten häufig Ausreißer im Datensatz auf. Ausreißer können aus verschiedenen Gründen auftreten, darunter Messfehler, unvorhersehbare Ereignisse oder Probleme mit der Datenquelle. Diese Ausreißer können sich negativ auf Aufgaben wie Datenanalyse, Modelltraining und Vorhersage auswirken. In diesem Artikel stellen wir vor, wie Sie PHP und Techniken des maschinellen Lernens zur Anomalieerkennung und zum Umgang mit Ausreißern verwenden.
1.1 Z-Score-Methode:
Z-Score-Methode ist eine statistische Anomalieerkennungsmethode, die durch Berechnung den Abweichungswert jedes Datenpunkts vom Mittelwert bestimmt Datensatz Ist es ein Ausreißer? Die spezifischen Schritte sind wie folgt:
Der Beispielcode lautet wie folgt:
function zscore($data, $threshold){ $mean = array_sum($data) / count($data); $std = sqrt(array_sum(array_map(function($x) use ($mean) { return pow($x - $mean, 2); }, $data)) / count($data)); $result = []; foreach ($data as $value) { $deviation = ($value - $mean) / $std; if (abs($deviation) > $threshold) { $result[] = $value; } } return $result; } $data = [1, 2, 3, 4, 5, 100]; $threshold = 3; $result = zscore($data, $threshold); echo "异常值检测结果:" . implode(", ", $result);
1.2 Isolation Forest:
Isolation Forest ist eine auf festgelegten Bäumen basierende Anomalieerkennungsmethode, die die Anomalie von Datenpunkten durch den Aufbau eines zufällig geteilten Binärbaums bestimmt. Die spezifischen Schritte sind wie folgt:
Der Beispielcode lautet wie folgt:
require_once('anomaly_detection.php'); $data = [1, 2, 3, 4, 5, 100]; $contamination = 0.1; $forest = new IsolationForest($contamination); $forest->fit($data); $result = $forest->predict($data); echo "异常值检测结果:" . implode(", ", $result);
2.1 Ausreißer löschen:
Eine einfache Verarbeitungsmethode besteht darin, Ausreißer direkt zu löschen. Basierend auf den Ergebnissen der Anomalieerkennung können wir Datenpunkte, die den Schwellenwert überschreiten, aus dem Datensatz entfernen.
Der Beispielcode lautet wie folgt:
function removeOutliers($data, $threshold){ $result = []; foreach ($data as $value) { if (abs($value) <= $threshold) { $result[] = $value; } } return $result; } $data = [1, 2, 3, 4, 5, 100]; $threshold = 3; $result = removeOutliers($data, $threshold); echo "异常值处理结果:" . implode(", ", $result);
2.2 Ausreißer ersetzen:
Ein anderer Ansatz besteht darin, Ausreißer durch vernünftige Werte wie Mittelwert oder Median zu ersetzen. Auf diese Weise können die Gesamtverteilungseigenschaften des Datensatzes erhalten bleiben.
Der Beispielcode lautet wie folgt:
function replaceOutliers($data, $threshold, $replacement){ $result = []; foreach ($data as $value) { if (abs($value) > $threshold) { $result[] = $replacement; } else { $result[] = $value; } } return $result; } $data = [1, 2, 3, 4, 5, 100]; $threshold = 3; $replacement = 0; $result = replaceOutliers($data, $threshold, $replacement); echo "异常值处理结果:" . implode(", ", $result);
Fazit:
In diesem Artikel haben wir Methoden zur Anomalieerkennung und zum Umgang mit Ausreißern mithilfe von PHP und Techniken des maschinellen Lernens vorgestellt. Durch die Z-Score-Methode und den Isolation-Forest-Algorithmus können wir Ausreißer erkennen und sie nach Bedarf löschen oder ersetzen. Diese Methoden können uns helfen, Daten zu bereinigen, die Modellgenauigkeit zu verbessern und zuverlässigere Datenanalysen und Vorhersagen durchzuführen.
Die vollständige Implementierung des Codebeispiels ist auf GitHub verfügbar. Ich hoffe, dass dieser Artikel für Ihr Studium und Ihre Praxis hilfreich sein wird.
Referenz:
Das obige ist der detaillierte Inhalt vonPHP und maschinelles Lernen: So erkennen Sie Anomalien und behandeln Ausreißer. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!