J

awk 사용하기

1) awk란?

* awk의 개념
   - 프로그래밍 언어/패턴의 검색과 조작. 
   - 파일의 각 라인에서 필드(field)를 인식할 수 있는 패턴 매칭 기능

* awk의 응용분야. 
   - 데이터 프로세싱, 리포트 작성, 간단한 데이터 베이스 구축 등...

* awk를 이용한 작업.
   - 프로그램의 입력 파일이 특정한 형식에 맞게 이루어져 있는지 검사. 
   - 출력화일을 처리하여 리포트를 만들어 냄. 
   - 다른 프로그램의 입력 형식에 맞게 변환하는 작업에 이용.

* c언어와 같은 연산자를 사용할 수 있다
  ---> +=, *=, %= 등등
2) awk 프로그램의 구조 및 실행.

* awk의 구조. 
   - awk [option] [files] 
   - awk -f pattern-action-file 파일이름.

*awk의 pattern.  패 턴

BEGIN
 입력화일을 읽어들이기 전에 옆에 제시되는 문자를 실행.
 ---> BEGIN {print "kuja의 프로그램“} {print}
“kuja의 프로그램“을 먼저 찍고 다음이 계속 찍힘

END
 awk가 모든 입력을 처리한 후, 옆에 제시되는 문장을 실행.
 ---> END {print "kuja의 프로그램“} {print}
내용을 먼저 찍고 “kuja의 프로그램“이 찍힘

-f fileName : awk 프로그램을 파일로 만들었을 때 이를 지정함.
   ----> kjh.awk를 만들었을경우는 awk -f kjh.awk (파일명) 
 
{fileName}* : 지정된 파일에서 받아들임.

-$1 (첫 번째 항목), $2 (두 번째 항목)..... 
-$0 (줄 전체)

** awk '/kuja/' * = grep "kuja" *
--> 모든 화일에서 kuja라는 단어가 있는 줄을 찾아 그 줄을 출력해 줍니다.

kjh(텍스트파일) -> 이름,주소,취미,나이 4개의 필드
** awk를 이용하여 '구자현'이라는 이름을 가진 사람을 찾는다.
----> $ awk '/구자현/' kjh

** friend 텍스트 파일 중 영역 세번째 와 첫번째를 출력한다. 
----> (.. awk '{print $3,$1}' kjh

1. '구'단어를 이용하여 구씨 성을 가진 사람을 찾는다.
(.. $ awk '/구/' kjh
2. 나이가 27살인 사람을 찾는다.
(.. $ awk '$4 -- 27' kjh
3. 나이가 27살보다 작은 모든 사람을 출력한다.
(.. $ awk '$4 < 27' kjh
4. kjh파일에서나이가 27살 보다 적고 성이 구씨인 사람을 출력한다. 
(.. $ awk '$4 < 27 && /구/' kjh

% ls -al kuja.pc | awk '{print $2, $7}'
kuja.pc의 2번째 필드와 7번째 필드를 보여줌

다. 그러나 sed에서 사용하는 것과는 차이가 남을 명심하라.(sed는 앞의 검색문이 실패할 경우만 뒤의 명령을 수행한다.)

awk는 두가지 특수한 패턴을 제공한다. BEGIN과 END가 바로 그것이다. BEGIN은 첫번째 행이 읽어들이기 전에 수행되는 행위를 지정하는 것이고, END는 마지막 행이 읽어들이고 나서 수행되는 행위를 지정하는 것이다. 예를 들어서 awk에서 필드를 나누는 문자를 행을 읽기전에 미리 정의한다고 생각해보자.


% awk 'BEGIN { FS = ":" } $2 == ""' /etc/passwd
awk에서 FS는 필드를 나누는 문자를 의미한다. END에 대한 예는 아래 '쓸만한 예제 하나'편에 나와있으므로 참조하기 바란다.

$ vi kuja
10 20 30 40 50
----> 5개의 필드 10, 20, 30, 40, 50이 있는 kuja라는 파일을 만든다 
$ awk '{ s = $1 + $2 + $3 + $4 + $5 } END { print s }' kuja 
---> 150

* NR --> 줄을 입력 , NF --> 필드를 입력

** for문
$ vi ku
10 20 30 40 50
$ vi ku.awk
>       '{ for ( i = 1; i <= NF; i++ )
>            sum += $i }
>       END { print sum }' data
--> 필드값의 합인 150이 출력됨

** while문
$ vi ku1.awk
>        '{ i = 1
>        while ( i <= NF ) {
>           s += $i
>           i++
>        }
>       }
>       END { print s }' data
---> 마찬가지로 150이 출력

** for : for(초기화; 조건검사; 명령) { 명령어들 }
** while : while(조건검사) {명령어들}
** if : if(조건검사) {명령어들}
       [ else {명령어들} ]
** break : for, while의 loop문 안에서 빠져나가기.
** continue : continue문장 뒤에 오는 명령어들은 생략하고 다시 조건검사로
돌아갑니다.

** 변수사용시에는 "$변수명"로 사용함

** 패턴 사용법 : "/패턴/,/패턴/"



/^kuja/ : ^(맨처음) --> kuja로 시작되는 줄
/kuja$/ : $(맨끝) --> kuja러 끝나는 줄
/^$/ : 공백줄
/.bbc/ : .(정해지지 않은 한문자)


[이 게시물은 관리자님에 의해 2011-10-31 17:32:05 Linux에서 이동 됨]
|

댓글 2개

좋은 정보 고맙습니다.
댓글을 작성하시려면 로그인이 필요합니다.

프로그램

8,188건
+
제목 글쓴이 날짜 조회
11-10-25 조회 2,461
11-10-18 조회 3,987
11-10-18 조회 2,357
11-10-15 조회 3,565
11-10-10 조회 2,635
11-10-02 조회 2,555
11-09-28 조회 2,374
11-09-24 조회 2,455
11-09-22 조회 2,361
11-09-05 조회 2,844
11-08-31 조회 2,213
11-08-31 조회 2,515
11-08-31 조회 2,374
11-08-29 조회 2,939
11-08-28 조회 2,417
11-08-25 조회 2,478
11-08-17 조회 2,203
11-08-16 조회 2,418
11-08-11 조회 2,887
11-08-07 조회 2,587
11-08-03 조회 2,308
11-07-22 조회 2,055
11-07-12 조회 3,270
11-06-27 조회 2,064
11-06-01 조회 1,733
11-05-17 조회 2,510
11-05-01 조회 2,584
11-04-28 조회 2,871
11-04-28 조회 2,913
11-04-13 조회 2,573
11-03-27 조회 2,702
11-03-27 조회 2,578
11-03-14 조회 1,993
11-03-02 조회 2,311
11-03-02 조회 2,549
11-02-27 조회 2,980
11-02-23 조회 2,356
11-02-19 조회 2,498
11-02-14 조회 4,119
11-02-03 조회 2,910
11-01-24 조회 3,853
11-01-04 조회 2,380
10-12-08 조회 5,385
10-11-15 조회 2,380
10-11-14 조회 2,560
10-11-14 조회 3,585
10-10-29 조회 3,665
10-10-19 조회 2,674
10-10-07 조회 2,506
10-10-05 조회 4,411
10-09-18 조회 2,715
10-09-18 조회 2,467
10-09-17 조회 4,852
10-09-15 조회 2,799
10-09-15 조회 2,327
10-09-15 조회 2,798
10-09-15 조회 2,640
10-09-11 조회 3,961
10-09-11 조회 2,477
10-09-11 조회 2,512
10-09-07 조회 3,787
10-09-07 조회 3,326
10-08-29 조회 2,780
10-07-01 조회 3,040
10-06-30 조회 2,439
10-06-30 조회 2,624
10-06-30 조회 2,976
10-06-13 조회 2,003
10-04-15 조회 3,174
10-04-04 조회 3,403
10-02-23 조회 3,497
10-02-09 조회 3,116
10-01-25 조회 2,616
10-01-25 조회 2,717
09-12-27 조회 4,364
09-11-23 조회 3,582
09-11-20 조회 4,822
09-08-30 조회 3,019
09-08-30 조회 3,018
09-08-12 조회 2,967
09-07-22 조회 4,041
09-07-22 조회 4,687
09-07-15 조회 5,865
09-07-11 조회 2,939
09-06-17 조회 2,683
09-06-15 조회 2,969
09-05-29 조회 3,237
09-05-11 조회 5,880
09-05-08 조회 2,629
09-04-30 조회 3,755
09-04-17 조회 3,066
09-04-04 조회 3,250
09-03-05 조회 3,634
09-02-09 조회 3,610
09-02-03 조회 6,107
08-12-27 조회 3,179
08-12-20 조회 4,273
08-11-21 조회 5,232
08-11-14 조회 2,805
08-11-03 조회 3,254