導航:首頁 > 編程語言 > javahdfs刪除

javahdfs刪除

發布時間:2024-09-17 09:38:30

A. 用 java遍歷hadoop分布式文件系統中某個目錄下的全部文件,我的hadoop是單節點的

原因:
你訪問的是本地文件系統而非hdfs , 因為Configuration默認的是在core-default.xml中的屬性fs.default.name默認值是file:///,表示本地文件系統。在我們new Configuration();時會默認載入core-default.xml文件,所以根據這個文件的fs.default.name值使用了本地文件系統。

解決方法:
一般安裝hadoop時都是修改core-site.xml文件,這個文件設置的屬性值一般使用來覆蓋core-default.xml這個文件的,在core-site.xml文件中會設置fs.default.name值為hadoop的namenode的地址以及埠號,如hdfs://localhost:9000,即表示namenode是本機,也就是為分布式。所以我們在連接hdfs時需要指定連接的地址,也就是hadoop集群中core-site.xml中fs.default.name屬性值。所以解決方法有三種:
1)在代碼Configuration conf=new Configuration();之後手動為Configuration對象設置fs.default.name屬性值,如:conf.set("fs.default.name","hdfs:localhost:9000");
2)在代碼的classpath下創建一個文件,在文件中設置fs.default.name屬性值,再使用conf.addResource("文件路徑")將該文件添加到Configuration中;
3)直接將集群的core-site.xml添加到classpath下即可,無需手動添加到Configuration,在new Configuration時會自動載入該文件

B. hbase java端調用

這是缺少必要的類org/apache/hadoop/thirdparty/guava/common/primitives/UnsignedBytes
你可以到jarsearch上搜索含有這個類的jar包,然後把它放到classpath下就行了

閱讀全文

與javahdfs刪除相關的資料

熱點內容
linux怎麼搭web伺服器 瀏覽:253
房產證加密收費嗎 瀏覽:153
slam演算法處理數據 瀏覽:267
如何判斷伺服器ip地址和版本號 瀏覽:965
python獲取html內容 瀏覽:770
北歐大神程序員 瀏覽:205
安卓手機怎麼拍出照片的質感 瀏覽:835
編譯後的病毒長什麼樣子 瀏覽:23
圍棋與程序員 瀏覽:260
加密和解密的單詞 瀏覽:983
我的世界td伺服器怎麼注冊 瀏覽:415
編譯器的堆空間 瀏覽:601
雲引擎雲伺服器 瀏覽:910
解壓視頻聲控吃冰義大利 瀏覽:408
渦旋壓縮機動渦盤 瀏覽:881
手機郵件發文件夾 瀏覽:451
魔獸世界懷舊服tbc薩滿宏命令 瀏覽:549
linuxsvn手冊 瀏覽:271
程序員圖鑒 瀏覽:539
東營程序員 瀏覽:716