J

awk 사용하기

1) awk란?

* awk의 개념
   - 프로그래밍 언어/패턴의 검색과 조작. 
   - 파일의 각 라인에서 필드(field)를 인식할 수 있는 패턴 매칭 기능

* awk의 응용분야. 
   - 데이터 프로세싱, 리포트 작성, 간단한 데이터 베이스 구축 등...

* awk를 이용한 작업.
   - 프로그램의 입력 파일이 특정한 형식에 맞게 이루어져 있는지 검사. 
   - 출력화일을 처리하여 리포트를 만들어 냄. 
   - 다른 프로그램의 입력 형식에 맞게 변환하는 작업에 이용.

* c언어와 같은 연산자를 사용할 수 있다
  ---> +=, *=, %= 등등
2) awk 프로그램의 구조 및 실행.

* awk의 구조. 
   - awk [option] [files] 
   - awk -f pattern-action-file 파일이름.

*awk의 pattern.  패 턴

BEGIN
 입력화일을 읽어들이기 전에 옆에 제시되는 문자를 실행.
 ---> BEGIN {print "kuja의 프로그램“} {print}
“kuja의 프로그램“을 먼저 찍고 다음이 계속 찍힘

END
 awk가 모든 입력을 처리한 후, 옆에 제시되는 문장을 실행.
 ---> END {print "kuja의 프로그램“} {print}
내용을 먼저 찍고 “kuja의 프로그램“이 찍힘

-f fileName : awk 프로그램을 파일로 만들었을 때 이를 지정함.
   ----> kjh.awk를 만들었을경우는 awk -f kjh.awk (파일명) 
 
{fileName}* : 지정된 파일에서 받아들임.

-$1 (첫 번째 항목), $2 (두 번째 항목)..... 
-$0 (줄 전체)

** awk '/kuja/' * = grep "kuja" *
--> 모든 화일에서 kuja라는 단어가 있는 줄을 찾아 그 줄을 출력해 줍니다.

kjh(텍스트파일) -> 이름,주소,취미,나이 4개의 필드
** awk를 이용하여 '구자현'이라는 이름을 가진 사람을 찾는다.
----> $ awk '/구자현/' kjh

** friend 텍스트 파일 중 영역 세번째 와 첫번째를 출력한다. 
----> (.. awk '{print $3,$1}' kjh

1. '구'단어를 이용하여 구씨 성을 가진 사람을 찾는다.
(.. $ awk '/구/' kjh
2. 나이가 27살인 사람을 찾는다.
(.. $ awk '$4 -- 27' kjh
3. 나이가 27살보다 작은 모든 사람을 출력한다.
(.. $ awk '$4 < 27' kjh
4. kjh파일에서나이가 27살 보다 적고 성이 구씨인 사람을 출력한다. 
(.. $ awk '$4 < 27 && /구/' kjh

% ls -al kuja.pc | awk '{print $2, $7}'
kuja.pc의 2번째 필드와 7번째 필드를 보여줌

다. 그러나 sed에서 사용하는 것과는 차이가 남을 명심하라.(sed는 앞의 검색문이 실패할 경우만 뒤의 명령을 수행한다.)

awk는 두가지 특수한 패턴을 제공한다. BEGIN과 END가 바로 그것이다. BEGIN은 첫번째 행이 읽어들이기 전에 수행되는 행위를 지정하는 것이고, END는 마지막 행이 읽어들이고 나서 수행되는 행위를 지정하는 것이다. 예를 들어서 awk에서 필드를 나누는 문자를 행을 읽기전에 미리 정의한다고 생각해보자.


% awk 'BEGIN { FS = ":" } $2 == ""' /etc/passwd
awk에서 FS는 필드를 나누는 문자를 의미한다. END에 대한 예는 아래 '쓸만한 예제 하나'편에 나와있으므로 참조하기 바란다.

$ vi kuja
10 20 30 40 50
----> 5개의 필드 10, 20, 30, 40, 50이 있는 kuja라는 파일을 만든다 
$ awk '{ s = $1 + $2 + $3 + $4 + $5 } END { print s }' kuja 
---> 150

* NR --> 줄을 입력 , NF --> 필드를 입력

** for문
$ vi ku
10 20 30 40 50
$ vi ku.awk
>       '{ for ( i = 1; i <= NF; i++ )
>            sum += $i }
>       END { print sum }' data
--> 필드값의 합인 150이 출력됨

** while문
$ vi ku1.awk
>        '{ i = 1
>        while ( i <= NF ) {
>           s += $i
>           i++
>        }
>       }
>       END { print s }' data
---> 마찬가지로 150이 출력

** for : for(초기화; 조건검사; 명령) { 명령어들 }
** while : while(조건검사) {명령어들}
** if : if(조건검사) {명령어들}
       [ else {명령어들} ]
** break : for, while의 loop문 안에서 빠져나가기.
** continue : continue문장 뒤에 오는 명령어들은 생략하고 다시 조건검사로
돌아갑니다.

** 변수사용시에는 "$변수명"로 사용함

** 패턴 사용법 : "/패턴/,/패턴/"



/^kuja/ : ^(맨처음) --> kuja로 시작되는 줄
/kuja$/ : $(맨끝) --> kuja러 끝나는 줄
/^$/ : 공백줄
/.bbc/ : .(정해지지 않은 한문자)


[이 게시물은 관리자님에 의해 2011-10-31 17:32:05 Linux에서 이동 됨]

댓글 2개

좋은 정보 고맙습니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,187건
+
제목 글쓴이 날짜 조회
10-05-15 조회 4,296
10-05-10 조회 2,986
10-04-29 조회 5,699
10-04-28 조회 3,906
10-04-17 조회 4,833
10-04-15 조회 3,278
10-04-04 조회 3,514
10-04-02 조회 2,807
10-03-23 조회 5,985
10-03-19 조회 5,525
10-03-05 조회 5,285
10-03-01 조회 6,959
10-02-27 조회 5,121
10-02-26 조회 3,518
10-02-23 조회 3,470
10-02-23 조회 3,626
10-02-19 조회 3,322
10-02-17 조회 5,731
10-02-17 조회 4,460
10-02-17 조회 3,882
10-02-12 조회 3,204
10-02-12 조회 3,542
10-02-12 조회 3,872
10-02-11 조회 3,010
10-02-11 조회 4,088
10-02-09 조회 3,389
10-02-09 조회 3,496
10-02-09 조회 3,197
10-02-09 조회 3,859
10-02-09 조회 3,131
10-02-09 조회 3,475
10-01-26 조회 3,589
10-01-25 조회 2,718
10-01-25 조회 2,819
10-01-23 조회 3,421
10-01-23 조회 6,935
10-01-20 조회 3,153
10-01-19 조회 3,633
10-01-13 조회 3,835
10-01-07 조회 3,020
10-01-07 조회 2,804
10-01-07 조회 3,778
10-01-07 조회 6,485
09-12-31 조회 3,777
09-12-27 조회 4,463
09-12-18 조회 3,260
09-12-14 조회 5,273
09-12-14 조회 6,155
09-12-06 조회 4,867
09-11-26 조회 3,789
09-11-24 조회 3,922
09-11-24 조회 4,345
09-11-23 조회 3,689
09-11-21 조회 7,041
09-11-20 조회 4,916
09-11-19 조회 2,831
09-11-19 조회 3,197
09-11-13 조회 6,664
09-11-11 조회 3,794
09-11-09 조회 4,814
09-11-09 조회 4,091
09-11-09 조회 2,982
09-11-04 조회 6,813
09-10-26 조회 3,947
09-10-10 조회 7,432
09-10-09 조회 3,445
09-10-08 조회 5,411
09-09-19 조회 4,480
09-09-15 조회 3,617
09-09-14 조회 3,647
09-09-11 조회 5,846
09-09-04 조회 4,900
09-08-31 조회 4,249
09-08-31 조회 4,456
09-08-30 조회 3,526
09-08-30 조회 3,285
09-08-30 조회 3,125
09-08-30 조회 2,808
09-08-30 조회 3,112
09-08-30 조회 3,340
09-08-30 조회 3,046
09-08-16 조회 6,371
09-08-14 조회 5,350
09-08-12 조회 3,313
09-08-12 조회 3,090
09-08-12 조회 3,805
09-07-24 조회 6,056
09-07-23 조회 5,113
09-07-22 조회 4,188
09-07-22 조회 5,762
09-07-22 조회 4,790
09-07-22 조회 2,935
09-07-21 조회 2,827
09-07-21 조회 3,464
09-07-19 조회 3,342
09-07-17 조회 4,051
09-07-17 조회 3,585
09-07-17 조회 2,848
09-07-15 조회 5,940
09-07-11 조회 3,022