Datentypen Problem mit Date-Object

J

Jannik

Mitglied
Hallo zusammen,

für die Schule sollen wir einen Apache Server Logfile mithilfe von regulären Ausdrücken durchsuchen und dann eine Statistik generieren.

Ein Datensatz sieht zum Beispiel so aus:
Code: 
127.0.0.1 - - [02/Dec/2008:09:43:12 +0100] "GET /phpmyadmin/navigation.php?db=testdb&token=607ffb00d35d07043baca5a9d4cea54c HTTP/1.1" 200 1759

Mithilfe des regulären Ausdrucks
Code: 
(?<=\[)[0-9]{1,2}\/([A-Z]|[a-z]){3}\/[0-9]{4}\:([0-9]{2}\:){2}[0-9]{2}\ [\+|\-][0-9]{4}(?=\])
hole ich mir das Datum dort heraus.

Das klappt auch soweit.

Code: 
datum = new String(line.substring(matcher.start(), matcher.end()));
							SimpleDateFormat format = new SimpleDateFormat("dd/MMM/yyyy:HH:mm:ss z");
							Date dt = new Date();
							format.format(dt);
							try {
								dt = format.parse(datum);
								zeile.add(dt);
								dt = null;
							} catch (ParseException e) {
								// TODO Auto-generated catch block
								e.printStackTrace();
							}
Der Abschnitt geht ca. 200mal gut, und dann kommt es auf einmal zu "unparsebeln Dates" was ich überhaupt nicht verstehen kann!

Wisst ihr weiter?

Mein Programm:
Java: 
package de.szut.dqi;

import java.io.BufferedReader;
import java.io.File;
import java.io.FileNotFoundException;
import java.io.FileReader;
import java.io.IOException;
import java.sql.Timestamp;
import java.text.DateFormat;
import java.text.ParseException;
import java.text.SimpleDateFormat;
import java.util.ArrayList;
import java.util.Calendar;
import java.util.Collections;
import java.util.Date;
import java.util.GregorianCalendar;
import java.util.HashMap;
import java.util.regex.Matcher;
import java.util.regex.Pattern;

public class LogfileAnalyzer {
	private ArrayList<String> regex;
	private ArrayList<ArrayList<Object>> inhalt = new ArrayList<ArrayList<Object>>();
	private HashMap<String, String> monate = new HashMap<String, String>();
	
	public static void main(String [] args) {
		LogfileAnalyzer a = new LogfileAnalyzer();
		a.generiereRegex();
		a.readLog(new File("access.log"));
	}
	
	//Diese Methode generiert die Statistik. Sie durchsucht den Inhalt nach den einzelnen 
	//Typen wie IP-Adresse, Datum usw und schreibt dieses dann in eine weitere Statistik
	//Array, welches die einzelnen Dateneinträge beinhaltet und zählt, sofern sie verschieden sind.
	private void generiereStatistik() {
		
	}
	
	
	//Diese Methode generiert das Array, welches die regulären Ausdrücke für die
	//verschiedenen Inhalte einer Zeile beinhaltet.
	private void generiereRegex() {
		regex = new ArrayList<String>();
		regex.add("([0-9]{1,3}\\.){3}[0-9]{1,3}(?=\\ \\-\\ \\-\\ )"); //ip adresse
		regex.add("(?<=\\[)[0-9]{1,2}\\/([A-Z]|[a-z]){3}\\/[0-9]{4}\\:([0-9]{2}\\:){2}[0-9]{2}\\ [\\+|\\-][0-9]{4}(?=\\])"); //datum
		regex.add("(?<=\\ \")[A-Z]{3,7}(?=\\ \\/)"); //befehl
		regex.add("(?<=\\ )(\\/(\\w)+)+(\\.[\\w]+)(?=\\ )"); //datei
		regex.add("(?<=\\ )[A-Z]+\\/([0-9]\\.)+[0-9](?=\"\\ )"); //protokoll
		regex.add("(?<=\"\\ )[0-9]{3}(?=\\ )"); //status
		regex.add("(?<=\"\\ [0-9]{3}\\ )[0-9]*"); //datenmenge
		
		monate.put("JAN", "01");
		monate.put("FEB", "02");
		monate.put("MAR", "03");
		monate.put("APR", "04");
		monate.put("MAY", "05");
		monate.put("JUN", "06");
		monate.put("JUL", "07");
		monate.put("AUG", "08");
		monate.put("SEP", "09");
		monate.put("OCT", "10");
		monate.put("NOV", "11");
		monate.put("DEC", "12");
		
	}
	
	//Diese Methode soll die Apache-Logdatei einlesen und mithilfe von regülären Ausdrücken 
	//ein String-Array erstellen, welches dann in ein Array-Array geschrieben wird. 
	private void readLog(File filename) {
		Matcher matcher;
		ArrayList<Object> zeile = new ArrayList<Object>();
		
		String line;
		
		String ip;
		String datum;
		String befehl;
		String datei;
		String protokoll;
		String status;
		String datenmenge;
		
		try {
			BufferedReader in = new BufferedReader(new FileReader(filename));
			
			line = in.readLine();
			while (line != null) {
				for (int i = 0; i < 7; i++) {
					System.out.println(line);
					matcher = Pattern.compile(regex.get(i)).matcher(line);
					if (matcher.find()) {
						if (i != 1) {
							zeile.add(new String(line.substring(matcher.start(), matcher.end())));
						} else {
							datum = new String(line.substring(matcher.start(), matcher.end()));
							SimpleDateFormat format = new SimpleDateFormat("dd/MMM/yyyy:HH:mm:ss z");
							Date dt = new Date();
							format.format(dt);
							try {
								dt = format.parse(datum);
								zeile.add(dt);
								dt = null;
							} catch (ParseException e) {
								// TODO Auto-generated catch block
								e.printStackTrace();
							}
							
							
						}
					}
				}
				inhalt.add((ArrayList<Object>) zeile.clone());
				zeile.clear();
				line = in.readLine();	
			}
			System.out.println(inhalt);
			in.close();
		} catch (FileNotFoundException e) {
			// TODO Auto-generated catch block
			e.printStackTrace();
		} catch (IOException e) {
			// TODO Auto-generated catch block
			e.printStackTrace();
		}
	}
}


Apache Logfile Beispiel:
Code: 
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/phpmyadmin.css.php?token=607ffb00d35d07043baca5a9d4cea54c&js_frame=right&nocache=3671410324 HTTP/1.1" 200 20584
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/logo_left.png HTTP/1.1" 200 6854
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/b_home.png HTTP/1.1" 200 370
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/b_selboard.png HTTP/1.1" 200 274
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/b_sqlhelp.png HTTP/1.1" 200 287
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/b_docs.png HTTP/1.1" 200 292
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/b_help.png HTTP/1.1" 200 229
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/s_host.png HTTP/1.1" 200 316
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/logo_right.png HTTP/1.1" 200 5658
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/s_asci.png HTTP/1.1" 200 254
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/item_ltr.png HTTP/1.1" 200 173
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/window-new.png HTTP/1.1" 200 583
127.0.0.1 - - [02/Dec/2008:09:42:49 +0100] "GET /phpmyadmin/themes/original/img/b_info.png HTTP/1.1" 200 234
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/b_newdb.png HTTP/1.1" 200 408
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_process.png HTTP/1.1" 200 362
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_status.png HTTP/1.1" 200 313
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_reload.png HTTP/1.1" 200 245
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/b_engine.png HTTP/1.1" 200 362
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_vars.png HTTP/1.1" 200 306
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_rights.png HTTP/1.1" 200 512
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_db.png HTTP/1.1" 200 285
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/b_import.png HTTP/1.1" 200 310
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/b_export.png HTTP/1.1" 200 313
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_lang.png HTTP/1.1" 200 422
127.0.0.1 - - [02/Dec/2008:09:42:50 +0100] "GET /phpmyadmin/themes/original/img/s_theme.png HTTP/1.1" 200 737
127.0.0.1 - - [02/Dec/2008:09:42:57 +0100] "GET /phpmyadmin/index.php?db=testdb&token=607ffb00d35d07043baca5a9d4cea54c HTTP/1.1" 200 2321
127.0.0.1 - - [02/Dec/2008:09:42:57 +0100] "GET /phpmyadmin/navigation.php?db=testdb&token=607ffb00d35d07043baca5a9d4cea54c HTTP/1.1" 200 1720
127.0.0.1 - - [02/Dec/2008:09:42:58 +0100] "GET /phpmyadmin/themes/original/img/b_sbrowse.png HTTP/1.1" 200 197
127.0.0.1 - - [02/Dec/2008:09:42:57 +0100] "GET /phpmyadmin/db_structure.php?db=testdb&token=607ffb00d35d07043baca5a9d4cea54c HTTP/1.1" 200 3813
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_sql.png HTTP/1.1" 200 322
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_props.png HTTP/1.1" 200 294
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_search.png HTTP/1.1" 200 605
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_deltbl.png HTTP/1.1" 200 364
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_tipp.png HTTP/1.1" 200 308
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_relations.png HTTP/1.1" 200 280
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_select.png HTTP/1.1" 200 540
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_browse.png HTTP/1.1" 200 265
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_tblops.png HTTP/1.1" 200 345
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_empty.png HTTP/1.1" 200 298
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_insrow.png HTTP/1.1" 200 283
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/arrow_ltr.png HTTP/1.1" 200 277
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_drop.png HTTP/1.1" 200 311
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_tblanalyse.png HTTP/1.1" 200 296
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_print.png HTTP/1.1" 200 574
127.0.0.1 - - [02/Dec/2008:09:42:59 +0100] "GET /phpmyadmin/themes/original/img/b_newtbl.png HTTP/1.1" 200 409



Danke schonmal und voraus
Liebe Grüße
 
E

eRaaaa

Top Contributor
Probiers mal mit
Java: 
SimpleDateFormat format = new SimpleDateFormat("dd/MMM/yyyy:HH:mm:ss z", Locale.ENGLISH);

Ansonsten kann er evtl. mit Dec beispielsweise nichts anfangen (nur Dez)
 
Zuletzt bearbeitet:
S

SlaterB

Gast
der Fehler wird doch wohl nicht zufällig kommen sondern immer einen Grund haben, schau dir die entsprechende Zeile mit dem Date an?!
oder ist das nicht reproduzierbar?, das gibts doch nicht

aus
Java: 
                            Date dt = new Date();
                            format.format(dt);
                            try {
                                dt = format.parse(datum);
                                zeile.add(dt);
                                dt = null;
                            } catch (ParseException e) {
                                // TODO Auto-generated catch block
                                e.printStackTrace();
                            }
mach mal
Java: 
                            Date dt = null
                            try {
                                dt = format.parse(datum);
                                zeile.add(dt);
                            } catch (ParseException e) {
                                System.out.println(Probleme exakt bei folgenden Date: ..);
                                System.exit(0); // Achtung, Ende 
                                e.printStackTrace();
                            }

edit: ok, die Erklärung von eRaaaa reicht für mich zumindest ;)
 
Ähnliche Java Themen
  Titel Forum Antworten Datum
F Problem mit TimeStamp to Date Allgemeine Java-Themen 8
N Date & RMI Problem Allgemeine Java-Themen 3
krgewb Problem mit Umlauten und Eszett bei InputStream Allgemeine Java-Themen 3
Max246Sch Backtracking Problem Box Filler Allgemeine Java-Themen 6
NightVision402 VisualVM Startskript Problem Allgemeine Java-Themen 3
javaBoon86 Email Server Connection Problem Allgemeine Java-Themen 1
F Problem mit PDFBOX Library Allgemeine Java-Themen 1
A Java modul Problem Allgemeine Java-Themen 4
D Read JSON File Problem Allgemeine Java-Themen 9
urmelausdemeis Exception in thread "main" java.lang.Error: Unresolved compilation problem: Allgemeine Java-Themen 7
J Problem mit JasperReports Allgemeine Java-Themen 8
M log4j Problem mit jlink Allgemeine Java-Themen 19
8u3631984 Problem beim Mocken von Record Klassen Allgemeine Java-Themen 4
torresbig Website login Problem - Jsoup, wie bisher, klappt nicht! Allgemeine Java-Themen 31
P Selenium . getText Problem Allgemeine Java-Themen 9
A Jar zu Exe Problem Allgemeine Java-Themen 13
sserio Variablen Liste erstellt und ein Problem mit dem Index Allgemeine Java-Themen 6
S Folgendes Problem bei einem Programm Allgemeine Java-Themen 1
stormyark Problem beim Klassen erstellen Allgemeine Java-Themen 1
A Thread.sleep Problem Allgemeine Java-Themen 2
A Problem bei der Nachbarschafttest Allgemeine Java-Themen 11
Splayfer Problem: no main manifest attribute Allgemeine Java-Themen 3
G javamail Problem beim Empfangen von Nachrichten Allgemeine Java-Themen 3
Splayfer JDA Problem mit MessageCounter Allgemeine Java-Themen 0
Splayfer Problem mit BufferedWriter Allgemeine Java-Themen 3
F Streams als Alternative für dieses Problem ? Allgemeine Java-Themen 15
N Maven Problem mit Datenbanktreiber (H2 Embedded) Allgemeine Java-Themen 12
T Problem beim Umwandeln in eine Jar-Datei Allgemeine Java-Themen 3
B Einfach Elemente zweier Arraylisten kreuz und quer vergleichen, min und max Problem? Allgemeine Java-Themen 16
C ArrayList Problem Allgemeine Java-Themen 3
kev34 nim-Spiel problem Allgemeine Java-Themen 1
D Firebase retrieve data Problem, Child Element wird nicht angesprochen Allgemeine Java-Themen 0
G Welches Problem besteht bei den Typparametern? Allgemeine Java-Themen 5
temi Problem mit Aufrufreihenfolge bei Vererbung Allgemeine Java-Themen 3
Sumo_ow "ArrayIndexOutofBoundsException: 2" Array Problem Allgemeine Java-Themen 6
T PIM basierend auf netbeans via AnyDesk Problem Allgemeine Java-Themen 3
xGh0st2014 Problem mit Java Array Allgemeine Java-Themen 1
Kirby.exe Verständnis Problem bei Rucksack Problem Allgemeine Java-Themen 6
B Eclipse-Lombok-Problem Allgemeine Java-Themen 19
I Input/Output ObjectOutputStream - Problem Allgemeine Java-Themen 7
1 Multiple Choice Knapsack- Problem Allgemeine Java-Themen 2
kodela Problem mit strukturiertem Array Allgemeine Java-Themen 18
E Problem mit Gridlayout und Button Allgemeine Java-Themen 2
A Array Problem Allgemeine Java-Themen 8
bueseb84 Problem Allgemeine Java-Themen 0
S Problem mit Arrays Allgemeine Java-Themen 1
D Nullpointer Exception Problem Allgemeine Java-Themen 5
B Problem mit meinen Klassen Allgemeine Java-Themen 6
A HashMap Methode "get()"-Problem Allgemeine Java-Themen 28
J Problem beim Umstellen auf Java jdk 13 Allgemeine Java-Themen 3
J Problem bei Install java 13 Allgemeine Java-Themen 3
X Profitable Reise Problem Allgemeine Java-Themen 32
A Problem beim öffnen von Java-Installern Allgemeine Java-Themen 1
Dann07 Problem mit JavaMail API Allgemeine Java-Themen 26
J Problem beim Generischen Klassen und Interfaces Allgemeine Java-Themen 2
L Klassen Algorithmus für das folgende Problem entwickeln? Allgemeine Java-Themen 30
J Clear-Problem Allgemeine Java-Themen 10
B Problem zu einem Java Projekt Allgemeine Java-Themen 6
S JFileChooser Problem Allgemeine Java-Themen 4
M Traveling Salesman - MST Heuristik Problem Allgemeine Java-Themen 4
J Traveling Salesman Problem Allgemeine Java-Themen 14
E Java Editor Problem mit 2er Exceptions Allgemeine Java-Themen 12
C code oder Bibliotheken für 2-Center Problem Allgemeine Java-Themen 4
M Salesman Problem - Bruteforce Algorithmus Allgemeine Java-Themen 23
S Methoden Problem mit NullPointerException Allgemeine Java-Themen 9
Javafan02 Problem mit if-clause Allgemeine Java-Themen 17
J Lombok Problem mit Konstruktoren bei Verberbung Allgemeine Java-Themen 1
kodela Event Handling Problem mit der Alt-Taste Allgemeine Java-Themen 16
W Threads Problem Allgemeine Java-Themen 15
D (Verständnis-)Problem mit Unterklasse Allgemeine Java-Themen 4
S Problem mit Generic bei unmodifiableCollection Allgemeine Java-Themen 4
S jserialcomm Problem Allgemeine Java-Themen 1
Flynn Thread-Problem... Allgemeine Java-Themen 2
J Generische Interface - Problem Allgemeine Java-Themen 3
G Problem beim GUI Allgemeine Java-Themen 9
L Applet Problem "security: Trusted libraries list file not found" ? Allgemeine Java-Themen 7
A OOP Problem beim Berechnen der größten Fläche eines Ringes Allgemeine Java-Themen 19
T Problem mit externen Datenbankzugriff über SSH Tunnel Allgemeine Java-Themen 4
F Problem beim Einlesen einer Textdatei Allgemeine Java-Themen 12
S Java OpenOffice Problem mit Windows-Benutzerwechsel Allgemeine Java-Themen 19
K Threads RAM Problem Allgemeine Java-Themen 20
P Operatoren Problem mit Zähler in recursiver Schleife Allgemeine Java-Themen 2
C Int Problem Allgemeine Java-Themen 8
C J2V8 NodeJs Java Bride Problem und Frage!?!? Allgemeine Java-Themen 1
J Problem bei Hashmap Key-Abfrage Allgemeine Java-Themen 4
C Webseiten Programm problem Allgemeine Java-Themen 5
M LocalDate Problem Allgemeine Java-Themen 4
J "Problem Objektorientierung" Allgemeine Java-Themen 20
geekex Problem Meldung! Was tun?! Allgemeine Java-Themen 19
T Klassen Override Problem Allgemeine Java-Themen 7
L Unbekanntes Problem Allgemeine Java-Themen 1
FrittenFritze Problem mit einer JComboBox, Event temporär deaktivieren Allgemeine Java-Themen 11
Blender3D Java Swing Programm Windows 10 Autostart Problem Allgemeine Java-Themen 2
F HTTPS Zertifikat Problem Allgemeine Java-Themen 3
M OpenCV KNearest Problem Allgemeine Java-Themen 0
Tommy Nightmare Project Euler: Problem 22 Allgemeine Java-Themen 2
C Abstrakte Klasse, lokale Variable-Problem Allgemeine Java-Themen 1
N Vererbung Design-Problem mit vorhandenen, von der Klasse unabhängigen Methoden Allgemeine Java-Themen 12
P Eclipse Projekt anlegen macht Problem Allgemeine Java-Themen 1
RalleYTN META-INF/services Problem Allgemeine Java-Themen 3

Ähnliche Java Themen

Aktuelle Jobs

Neue Themen


Oben