Calculer Girl
  1. Calculer Girl
  3. Analyse des journaux apache bruts
Intereting Posts
Impossible de redémarrer elasticsearch Comment planifier l’exécution d’un script shell un jour particulier d’un mois Comment puis-je savoir si SQLite est correctement installé sous Linux? Quel paquet dans Ubuntu contient le fichier d’en-tête X11.h? Le service Nginx ne démarre pas sous Windows 10 – nginx: n’a pas pu ouvrir le fichier journal des erreurs: CreateFile () Qt + Phonon: ne joue pas sur certains ordinateurs Réinitialisation de la connexion Nginx, réponse de uWsgi perdue Conversion de la substitution vim avec des références arrières en sed, awk ou une commande unix similaire Est-ce considéré comme une mauvaise pratique d’écrire des applications Windows en utilisant GNUStep? Apache localhost / ~ nom d’utilisateur / ne fonctionne pas Installation de pip pour importer des modules Est-ce excessif d’exécuter le test unitaire avec Valgrind? comportement source du script de shell Apache Rewrite casse PHP SuperGlobals Grepping d’une chaîne spécifique à partir d’un fichier dans un script

Analyse des journaux apache bruts

J’ai besoin de code php pour parsingr les logs apache bruts. En particulier, je veux le nombre de fois mode = recherche et le terme utilisé pour la recherche. Voici un exemple: 

207.46.195.228 - - [30/Apr/2010:03:24:26 -0700] "GET /index.php?mode=search&term=AE1008787E0174 HTTP/1.1" 200 13047 "-" "msnbot/2.0b (+http://search.msn.com/msnbot.htm)" 212.81.200.167 - - [30/Apr/2010:04:21:43 -0700] "GET /index.php?mode=search&term=WH2002D-YYH HTTP/1.1" 200 12079 "http://www.mysite.com/SearchGBY.php?page=81" "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 5.1; GTB6.4; .NET CLR 1.1.4322; .NET CLR 2.0.50727; WinuE v6; InfoPath.2; WinuE v6)" 212.81.200.167 - - [30/Apr/2010:04:21:44 -0700] "GET /file_uploads/banners/banner.swf HTTP/1.1" 200 50487 "-" "contype" 66.249.68.168 - - [30/Apr/2010:04:21:45 -0700] "GET /index.php?mode=search&term=WH2002D-YYH HTTP/1.1" 200 12079 "-" "Mediapartners-Google"

J’ai récemment écrit un parsingur très grossier pour ceci: 

$ignore = array('css', 'png', 'gif', 'jpg', 'jpeg', 'js', 'ico'); $f = fopen('access_log', "r"); if(!$f) die("Failed to open log for reading."); while (!feof($f)) { $buff = fgets($f, 4096); $parts = explode(' ', $buff); if(in_array(end(explode('.', $parts[6])), $ignore)) continue; $domain = sortingm(end($parts)); // http method $http_method = substr($parts[5], 1); if($http_method != 'GET' && $http_method != 'POST') continue; // parse out the date list($d, $m, $y) = explode('/', substr($parts[3], 1)); $y = substr($y, 0, 4); $time = strtotime("{$d} {$m} {$y}"); print "{$time} {$parts[0]} {$http_method} {$parts[6]} $domain\n"; }
$ignore = array('css', 'png', 'gif', 'jpg', 'jpeg', 'js', 'ico'); $f = fopen('access_log', "r"); if(!$f) die("Failed to open log for reading."); while (!feof($f)) { $buff = fgets($f, 4096); $parts = explode(' ', $buff); if(in_array(end(explode('.', $parts[6])), $ignore)) continue; $domain = sortingm(end($parts)); // http method $http_method = substr($parts[5], 1); if($http_method != 'GET' && $http_method != 'POST') continue; // parse out the date list($d, $m, $y) = explode('/', substr($parts[3], 1)); $y = substr($y, 0, 4); $time = strtotime("{$d} {$m} {$y}"); print "{$time} {$parts[0]} {$http_method} {$parts[6]} $domain\n"; }

$ parts [6] devrait contenir la partie qui vous intéresse (la ressource à laquelle vous avez accédé). Cela devrait vous amener sur votre chemin …

Aussi simple que d’utiliser des expressions régulières: http://php.net/manual/en/book.regex.php