Tag Archives: HDFS

Hive中找出Table和Partition的真实路径。

在Hive中，如果使用了External Table或者Partition，那么路径是不在自己的hive warehouse下的。
-- 获取table的真实hdfs路径
desc formatted my_table;

-- 获取partition的真实hdfs路径
desc formatted my_table (pt='20140804');
[......]

HDFS的Java接口

至少有两种方法：

1、java.net.URL
把解析 " hdfs://localhost:9000:/user/liheyuan/xxx " 这种HDFS URL的解析器加到java.net.URL中，然后用传统Java的URL相关接口搞定。
import java.io.InputStream;
import java.net.URL;
import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;
import org.apa[......]