»Gegen Angriffe kann man sich wehren,
gegen Lob ist man machtlos.«
– Sigmund Freud
8 Reguläre Ausdrücke
Nun kommen wir zu drei sehr populären und mächtigen Tools: sed, grep und awk. Um mit ihnen umgehen zu können, muss man erst einmal sogenannte reguläre Ausdrücke (engl. regular expressions) verstehen.
Diese Ausdrücke – es gibt übrigens ganze Bücher zum Thema – dienen in der Shell zum Filtern von Zeichenketten (Strings) aus einer Eingabe, etwa einer Textdatei. Am besten lässt sich das an einem Beispiel verdeutlichen.
[zB]Das Programm grep filtert aus einem Input (Pipe, Datei) Zeilen heraus, in denen ein bestimmtes Muster vorkommt. Gegeben sei eine Datei mit den Namen von Städten, wobei jede Stadt in einer separaten Zeile steht. grep soll nun all jene Zeilen herausfiltern, in denen ein kleines »a« enthalten ist.
Listing 8.1 grep filtert alle Zeilen mit einem »a« heraus
$ cat Standorte
Augsburg
Bremen
Friedrichshafen
Aschersleben
Bernburg
Berlin
Halle
Essen
Furtwangen
Kehlen
Krumbach
Osnabrueck
Kempten
// Nun werden alle Orte, die ein 'a' enthalten gefiltert:
$ grep a Standorte
Friedrichshafen
Halle
Furtwangen
Krumbach
Osnabrueck
Wie Sie sehen, wurden tatsächlich nur die Zeilen ausgegeben, in denen das Zeichen »a« vorkam. Dies können Sie mit jedem Zeichen und sogar mit ganzen Strings durchführen – hier ein paar Beispiele:
Listing 8.2 Weitere Beispiele für reguläre Ausdrücke
$ grep b Standorte // filtert nach 'b'
$ grep B Standorte // filtert nach 'B'
$ grep hafen Standorte // filtert nach 'hafen'
Reguläre Ausdrücke sind case-sensitive. Das bedeutet, es wird zwischen Groß- und Kleinbuchstaben unterschieden.
Nun zurück zur eigentlichen Definition regulärer Ausdrücke: Mit ihnen können Sie Muster für solche Filtervorgänge, wie sie gerade gezeigt wurden, angeben. Allerdings können mithilfe dieser regulären Ausdrücke nicht nur explizit angegebene Strings, wie etwa »hafen«, gefiltert werden, sondern dies funktioniert auch dynamisch. So können Sie angeben, dass »hafen« am Zeilenende oder -anfang vorkommen kann, dass das zweite Zeichen ein »a«, aber auch ein »x« sein kann, dass das letzte Zeichen entweder klein- oder großgeschrieben werden darf und so weiter.
Sollen beispielsweise alle Zeilen, die auf »n« oder »g« enden, ausgegeben werden, kann der reguläre Ausdruck [ng]$ verwendet werden: [Fn. Keine Angst, dies ist nur ein Beispiel – gleich lernen Sie, wie solche Ausdrücke zu lesen und zu schreiben sind.]
Listing 8.3 Ein erstes Beispiel für einen dynamischen regulären Ausdruck
$ grep "[ng]$" Standorte
Augsburg
Bremen
Friedrichshafen
Aschersleben
Bernburg
Berlin
Essen
Furtwangen
Kehlen
Kempten
8.1 Der Aufbau regulärer Ausdrücke
Nach dieser kleinen Einleitung wenden wir uns nun den regulären Ausdrücken selbst zu. Im Folgenden werden Sie lernen, wie solche Ausdrücke, die man übrigens recht oft vorfindet, zu verstehen sind und wie Sie selbst welche formulieren können. Keine Sorge – so schwer ist das nicht.
Erst exakt
Eben wandten wir den regulären Ausdruck [ng]$ an. Wie ist dieser zu verstehen? Das Dollarzeichen ($) steht für das Ende einer Zeile. Vor diesem Dollarzeichen sind in eckigen Klammern zwei Zeichen (»ng«) gesetzt. Das bedeutet, dass diese zwei Zeichen (und kein anderes) am Zeilenende stehen können.
Und zwar kann nur genau eines der beiden Zeichen das letzte Zeichen der Zeile ausmachen. Würden Sie in der Klammer also beispielsweise noch ein »h« hinzufügen, so könnte auch dieses »h« das letzte Zeichen in der Zeile sein.
Jetzt einfach
Lesen würde man den Ausdruck so: Das letzte Zeichen der Zeile ($) kann entweder ein »n« oder ein »g« sein ([ng]). Reguläre Ausdrücke können sich aus mehreren solcher Muster zusammensetzen. Sie können beispielsweise das Zeichen, das vor dem letzten Zeichen einer Zeile steht, auch noch festlegen und so weiter. Hier ist eine Auflistung der möglichen Filterausdrücke mit Beispielen:
- abc
der String »abc« - [xyz]
Eines der Zeichen in der eckigen Klammer muss (an der jeweiligen Stelle) vorkommen. - [aAbc]
entweder »Abc« oder »abc« - [a-b]
Mit dem Minus-Operator werden Zeichenbereiche für eine Position festgelegt. - [a-zA-Z0-9]bc
In diesem Beispiel werden alle kleinen und großen Zeichen des Alphabets und alle Ziffern von 0 bis 9 akzeptiert, worauf die Zeichen »bc« folgen müssen. - [^a-b]
Das Zirkumflex (^) negiert die Angabe. Dies funktioniert sowohl mit als auch ohne Minus-Operator. Dieser Ausdruck ist also dann erfüllt, wenn an der entsprechenden Stelle ein Zeichen steht, das nicht »a« oder »b« ist. - [xyz]\*
Der Stern ist das Joker-Zeichen (*) und steht für eine beliebige Anzahl von Vorkommen eines Zeichens. - K[a\*tze]
würde beispielsweise sowohl »Kaaatze«, »Katze« als auch »Ktze« herausfiltern. - [xyz]\+
Das Plus-Zeichen (+) steht für eine beliebige Anzahl von Vorkommen eines Zeichens. Im Gegensatz zum Stern muss das Zeichen allerdings mindestens einmal vorkommen. - K[a\+tze]
würde beispielsweise sowohl »Kaaatze«, als auch »Katze« herausfiltern – es muss mindestens 1 »a« vorhanden sein. - $
Dieses Zeichen steht für das Zeilenende. - hafen$
Die letzten Zeichen der Zeile müssen »hafen« sein. - ^
Dieses Zeichen steht für den Zeilenanfang und ist nicht mit der Negierung (die in eckigen Klammern steht) zu verwechseln. - ^Friedrichs
Die ersten Zeichen der Zeile müssen »Friedrichs« sein. - .
Der Punkt steht für ein beliebiges Zeichen. - Friedr.chshafen
In der Zeile muss die Zeichenkette »Friedr« enthalten sein. Darauf muss ein beliebiges Zeichen (aber kein Zeilenende) folgen und darauf die Zeichenkette »chshafen«. - \x
Das Metazeichen »x« wird durch den Backslash nicht als Anweisung im regulären Ausdruck, sondern als bloßes Zeichen interpretiert. Metazeichen sind die folgenden Zeichen:
s \ {} $ . [ ] *
Auch sind Kombinationen aus solchen Filterausdrücken möglich – hier ein Beispiel: Um festzulegen, dass eine Zeile mit einem kleinen oder großen »H« anfangen soll und dass darauf die Zeichen »alle« und das Zeilenende folgen sollen, wäre dieser Ausdruck der richtige: \^[hH]alle$
Listing 8.4 Suche nach einem Stadtnamen
$ \gpfett{grep "^[hH]alle$" Standorte}
Halle
Vergessen Sie nicht, die regulären Ausdrücke in Anführungszeichen oder Hochkommata zu setzen. Wenn Sie diese weglassen, wird die Shell diese Zeichen anders interpretieren und der Ausdruck wird verfälscht. Um einen regulären Ausdruck auch ohne Anführungszeichen verwenden zu können, müssen Sie alle sogenannten Metazeichen »escapen«. Das bedeutet, dass den Zeichen \ ^ $ . [ ] * ein Backslash (\) vorangestellt werden muss.
Der obige Ausdruck müsste somit folgendermaßen aussehen:
Listing 8.5 Regulärer Ausdruck mit Escape-Sequenzen
\^\[hH\]alle\$
Ihr Kommentar
Wie hat Ihnen das <openbook> gefallen? Wir freuen uns immer über Ihre freundlichen und kritischen Rückmeldungen.