HDFS 問題

112 views
Skip to first unread message

陳培基

unread,
Dec 2, 2011, 3:05:47 AM12/2/11
to nthu-201...@googlegroups.com
助教好:
  
我在將 hdfs 上的檔案copy 到local 端時會出現緊告訊息:
11/12/02 07:44:15 WARN util.NativeCodeLoader: 
Unable to load native-hadoop library for your platform... 
using builtin-java classes where applicable

下載到 local 端的檔案權限 (777) 也跟在 hdfs 上的檔案權限(644)不同
想請問是跟那個Warning 訊息有關嗎?
有辦法可以修掉那個Warning嗎?

附檔是完整的執行狀況~
Warn.JPG

周宗毅

unread,
Dec 2, 2011, 3:37:16 AM12/2/11
to nthu-201...@googlegroups.com
Hi , 

請執行一下hadoop "jar" ex3 重新嘗試看看:)

猜想你可能忘記了jar這個參數

另外  請將編譯過的code包裝成jar檔~:)

TA


hothero

unread,
Dec 2, 2011, 10:21:19 PM12/2/11
to NTHU Cloud 2011
Hi 助教,
我也有一樣的問題，我是用jar執行的

周宗毅

unread,
Dec 2, 2011, 10:41:38 PM12/2/11
to nthu-201...@googlegroups.com
Hi ,

如果錯誤訊息是一樣的話~

應該是你們上傳的檔案是在hadpoop - 0.20.203版本下編譯的

而我們架設的平台是0.20.205

不過只要將原始碼上傳到server之後重新編譯   應該就不會有這個問題了:)

TA

hothero

unread,
Dec 3, 2011, 11:43:43 PM12/3/11
to NTHU Cloud 2011
那個...我編譯跟執行都是在server上做的QQ

周宗毅

unread,
Dec 4, 2011, 12:07:42 AM12/4/11
to nthu-201...@googlegroups.com
!?

有沒有log檔之類的?

這樣我比較方便了解原因在哪

TA

關子揚

unread,
Dec 9, 2011, 3:14:54 AM12/9/11
to nthu-201...@googlegroups.com
我也是遇到相同的問題。雖然可以顯示出來，但是在FTP端，無法找到我的檔案。
test.jpg

周宗毅

unread,
Dec 9, 2011, 3:46:08 AM12/9/11
to nthu-201...@googlegroups.com
Hi ,

我可能沒有清楚你的問題

這個檔案使用root我可以正常看到內容

其內容應該為Hello TA, I'm student 100062401 ID. (^.^)

所以是用ftp看不到?

但是我將該檔案複製到TA的資料夾中還是可以看到這個檔案...也可以使用FTP下載...

 

Yafang

unread,
Dec 9, 2011, 8:05:42 AM12/9/11
to nthu-201...@googlegroups.com
既然你已經有檔案應該就是有做成功了

warning應該不會有太大影響

你可以直接cat 100062401.txt 確認是否有copy正確

在ftp的部分在做完以後也記得要重新整理一下

關子揚

unread,
Dec 9, 2011, 10:52:56 AM12/9/11
to nthu-201...@googlegroups.com
哦哦，我知道了。謝謝大家&助教。
Reply all
Reply to author
Forward
0 new messages