StreamTokenizer

[Guest]

Hallo,


ich hoffe, dass mir jemand von Euch helfen kann.

Ich analysiere mit dem StreamTokenizer eine Datei. Diese ist, vereinfacht dargestellt, folgendermassen aufgebaut:



43242 43P53454 63
53453 54T54354 76

Der Tokenizer erkennt 43P53454 als zwei Tokens: 43 und P53454. Das sollte aber als ein Token erkannt werden. Ich dachte, dass lediglich white spaces als default-Trennzeichen gewertet werden.

Hat jemand von Euch eine Idee?

Besten Dank und viele Gruesse,


Theo

 

[SlaterB]

poste mal ein kleines lauffähiges Testprogramm,
mit main, StreamTokenizer und Schleife welche die einzelnen Token ausgibt
< 30 Zeilen

dann werde ich gerne bei mir eine Textdatei mit den beiden Zeilen erstellen
und dich darüber informieren, dass es zumindest bei dir geht (nehme ich zumindest an 😉 )

du könntest auch mal eine neue Textdatei erstellen,
vielleicht enthält die alte irgendwelche Sonderzeichen,
diese vielleicht als byte[] einlesen und byte für byte vergleichen

 

[Guest]

Moin,


ich habe das Ganze weiterhin geprueft und das Problem bleibt das Gleiche: 6P214
wird als 6 (nval) und P124 (sval) erkannt. Somit werden zwei Tokens erzeugt.

Hat jemand eine Idee?



Gruss,
T

 

[Guest]

up

 

[SlaterB]

ich würde dir gerne helfen, kann aber dazu nicht mehr schreiben als ich schon schrieb,
denn ganz allgemein werde ich dieses unerständliche Verhalten ja nicht reproduzieren können 😉

(bin die nächsten Tage an Weihnachen evtl. aber nicht besonders oft da)

 

[Guest]

Die Datei ist: 6P342 6P445 6P563

Das Beispieprogramm:

public class Dateiversuch{

public static void main(String [] args) throws IOException{ 

String filename = args [0];
File xfile = new File(filename);

try{

BufferedReader br = new BufferedReader(new FileReader(xfile));
StreamTokenizer st = new StreamTokenizer(br);
int tokenType;

do{
switch(tokenType=st.nextToken()){

case StreamTokenizer.TT_NUMBER:
System.out.println(st.nval);
break;

case StreamTokenizer.TT_WORD:
System.out.println(st.sval);
break;
}
while(tokenType!=StreamTokenizer.TT_EOF);
}
catch(IOException e){
System.out.println(e);
}

}
}

Ausgabe:

6.0
P342
6.0
P445
6.0
P563



Waere genial, wenn mir jemand helfen koennte.




Gruss,

Theo


[/code]

 

[Roar]

nimm keinen tokenizer, lies die zeile ein mit readLine() und benutz dann split():

br.readLine().split(" ");

 

[Guest]

Gracias!



Es laeuft wie geschmiert.