pig stream stderr 남기기 ( LOG ) define CMD `stream.pl` stderr('CMD_logs' limit 100) pig로 프로그램을 작성하다보면 User Define Function(UDF)을 만드는 경우가 허다하다 이런 경우 문제가 생겼을때 debugging이 힘들데 이럴 경우 위와 같이 설정을 하면 STORE에 설정된 디렉토리가 만약 /data1 이라면 /data1/CMD_logs 라는 디렉토리에 log가 남게된다. .. hadoop 2014.11.07
sort backslash 파일에 다음과 같이 값이 들어 있다고 할때 ########################## 1 2 3 \ ' ########################## 위 파일을 정렬을 했더니 ########################## \ ' 1 2 3 ########################## 처럼 되었다. code 값을 찍어보니 \는 ascii table에서 97이거 '는 39이다. backslash는 라인이 끝나지 않았음을 표시하기도 하는.. C언어 2014.08.19
ML & MAP 이것은 bayes의 정리이다. 여기서 P(h|D) = 사후확률(posteior)로써 우리가 얻고자 하는 값이고 P(h) = 사전 확률(prior), P(D|h) = Likelihood 로써 사후확률을 구하기 위한 확률값으로 생각하면 된다. 즉 사전 확률에 Likelihood를 곱하면 사후 확률을 얻을수 있다. ( P(D)는 가설에 상관없이 모두 동일한 조.. 확률 2014.08.05