Umlaute Windows machen Probleme in bash

uschu.do · 29. April 2009, 22:46

Hallo,

ich habe eine Datei, welcher unter WinDoof erzeugt wird. Es ist eine ASCII-Datei, darin sind allerdings Umlaute welche der bash Kopfzerbrechen bereiten.

Mit

Quellcode

sort windoof.txt | uniq > uniqText.txt

Will ich die Datei bearbeiten. Dabei bekomme ich z.B. diese Meldung
sort: string comparison failed: Illegal byte sequence
sort: Set LC_ALL='C' to work around the problem.
sort: The strings compared were `TKD K\366rbulak' and `TKD K\366rbulak'.

Im windoof.txt steht TKD Körbulak und das macht der bash Probleme.

Was kann ich tun, damit das sort und uniq auch windoof.txt richtig bearbeiten kann?

Das mit dem set LC_ALL='C' scheint nicht so ganz zu klappen.

Der Output soll natürlich die Umlaute haben. Ich kann und darf diese nicht ersetzen. Weil der Output wieder mit Windoof weiter verarbeitet werden muss.

Danke für eure Hilfe.

zingo · 30. April 2009, 00:07

recode (gnu.org/software/recode/) wäre die Wollmilchsau. Gibt es als Macport: macports.org/ports.php?by=name&substr=recode

macmoonshine · 30. April 2009, 11:44

Kann es sein, dass Dein Terminal auf UTF-8 eingestellt ist? Dann sind die meisten Bytewerte größen 127 nicht erlaubt und dann kommen die UNIX-Kommandos damit durcheinander. Hier sollte eine 8-Bit -Zeichenkodierung (z.B. Windows LATIN 1, MacOS Roman oder ISO Latin 1) Abhilfe schaffen.

uschu.do · 30. April 2009, 23:09

Hallo,

ich mach es jetz so

Quellcode

textutil -convert txt -encoding 7 tallClubs.txt
sed "s/[\]366/./g" tallClubs.txt > tallClbs.txt # ersetze das 'oe'
...

Damit habe ich mit 7==NSNonLossyASCIIStringEncoding und es klappt so.

Danke

uschu.do · 1. Mai 2009, 09:17

kann ich mein Terninal auf UTF-16 umstellen?

Wenn ja wie?

macmoonshine · 1. Mai 2009, 11:51

Kannst Du natürlich auch. Unter Umständen musst Du diese Codierung erst zulassen, damit Du sie auswählen kannst.

uschu.do · 1. Mai 2009, 13:33

wie und wo kann ich es einstellen?

Bei den Einstellungen?

Michael · 1. Mai 2009, 16:27

Original von uschu.do
Bei den Einstellungen?

Klingt danach, als ob man in den Einstellungen was einstellen könnte. Mal selbst nachgeguckt?

Michael

uschu.do · 1. Mai 2009, 16:28

Ja,
aber sort mag "ü" immer noch nicht. Nur wenn ich cat benutze, werden die Umlaute richtig angezeigt.

Michael · 1. Mai 2009, 17:03

Das liegt daran, dass die Einstellung der Codierung für das Terminal, auf das Programm „sort” keinen Einfluss hat. „sort” liest ja selbst die Datei ein, das Terminal selbst hält sich da raus. Die Codierung für das Terminal beeinflusst nur die Ausgabe auf den Bildschirm. Das Terminal benutzt die Codierung, um die anfliegenden Zahlenkolonnen in die grafische Darstellung auf dem Bildschirm umzusetzen.

Die Lösung Deines Problems ist die Umgebungsvariable LC_ALL. Du schreibst: „das scheint nicht so ganz zu klappen”. Was heißt das genau? Hier bei mir klappt das nämlich wunderbar.

Michael

uschu.do · 1. Mai 2009, 17:09

set LC_ALL='C'

ergibt

_=LC_ALL=C

und hat auf sort, uniq keinen einfluss.

Michael · 1. Mai 2009, 17:47

Du arbeitest doch mit der „bash” Shell, oder?

Bash:

Quellcode

export LC_ALL='C'

C-Shell:

Quellcode

setenv LC_ALL 'C'

Michael

uschu.do · 1. Mai 2009, 17:50

Ja,

setenv LC_ALL 'C'

ergibt

-bash: setenv: command not found

Michael · 1. Mai 2009, 17:53

Augen auf!

Michael

uschu.do · 1. Mai 2009, 17:58

sorry

macmoonshine · 1. Mai 2009, 21:55

Original von Michael
Du arbeitest doch mit der „bash” Shell, oder?

Bash:

Quellcode

export LC_ALL='C'

C-Shell:

Quellcode

setenv LC_ALL 'C'

Michael

Wir sind doch hier in einem Mac-Forum, oder? WO macht mensch die Einstellungen?

uschu.do · 1. Mai 2009, 21:58

auf'm MacBook!?

Umlaute Windows machen Probleme in bash

Umlaute Windows machen Probleme in bash

Quellcode

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

Quellcode

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

RE: Umlaute Windows machen Probleme in bash

Quellcode

Quellcode

Quellcode

Quellcode