歡迎您光臨本站 註冊首頁

pig安裝及問題

←手機掃碼閱讀     火星人 @ 2014-03-12 , reply:0
  

pig安裝,大家在安裝pig前,想必已經安裝好了hadoop,這裡就不在強調java的版本和JAVA_HOME的配置問題了

相關閱讀:http://www.linuxidc.com/Linux/2011-12/48785.htm 與 http://www.linuxidc.com/Linux/2011-12/48784.htm 還有 http://www.linuxidc.com/Linux/2011-12/48783.htm 及 http://www.linuxidc.com/Linux/2011-12/48782.htm

1.下載pig包:(pig-0.9.1) 

apache版本:

http://pig.apache.org/

2.解壓文件:

# tar -zxvf pig-0.9.1.tar.gz

3.配置/etc/profit

 

 
  1. export PIG_INSTALL=/usr/pig/pig-0.9.1  
  2. export PATH=$PATH:$PIG_INSTALL/bin  
  3. export PIG_HADOOP_VERSION=20      //支持hadoop版本,我的是hadoop-0.20.2  
 
  1. source /etc/profile   使配置文件生效  
4.pig的本地模式這裡就不多講,主要講hadoop模式下的一些配置
兩種方式配置,主要是指明namenode和jobtracker的位置:

 

a.寫profile文件 

 

 
  1. export PIG_CLASSPATH=$HADOOP_INSTALL/conf/  
 
  1. b.在pig目錄下的conf文件夾里創建pig.properties  
 
  1. [root@localhost conf]# cat pig.properties   
 
  1. fs.default.name=hdfs://hadoop149:9000/  
  2. mapred.job.tracker=hadoop149:9004  
5.啟動pig

 

 

 
  1. [root@localhost conf]# pig  
  2. 2011-12-06 17:57:48,357 [main] INFO  org.apache.pig.Main - Logging error messages to: /usr/pig/pig-0.9.1/conf/pig_1323165468355.log  
  3. 2011-12-06 17:57:48,528 [main] INFO  org.apache.pig.backend.hadoop.executionengine.HExecutionEngine - Connecting to hadoop file system at: hdfs://hadoop149:9000/  
  4. 2011-12-06 17:57:48,634 [main] INFO  org.apache.pig.backend.hadoop.executionengine.HExecutionEngine - Connecting to map-reduce job tracker at: hadoop149:9004  
  5. grunt> 出現如上信息,說明pig啟動成功  

我一朋友安裝pig時一直出一個問題,最後也沒有解決:在這裡先貼出來,留著以後查看:failed to create DataStorage  



[火星人 ] pig安裝及問題已經有415次圍觀

http://coctec.com/docs/net/show-post-68190.html