基于kerberos的hdfs上传出现了问题
我连接到群集以通过Python上传文件。它以大约36 MB的...
java.io.IOException：文件系统在org.apache.hadoop.hdfs.DFSClient.checkOpenDFSClient.java:815关闭
这是一个例外： <pre><code> java.io....
将文件名称拆分为pyspark数据框的不同列
我正在使用pyspark SQL函数input_file_name将输入文...
HDFS over S3 / Google存储桶转换层-怎么样？
我很想将HDFS上的Google存储桶公开给服务。 有问题的...
hadoop命令可一次性获取多个文件夹的大小
我正在尝试弄出hadoop命令来一次性获得多个文件夹/目...
hdfs无法将数据追加到同一文件hadoop2.6.0-cdh5.7.2
<pre><code> var fileOutputStream: F...
为什么Impala花大量时间打开HDFS文件TotalRawHdfsOpenFileTime？
我发现我的Impala群性能不稳定，通常只需要几秒钟（...
Macbook Pro上的hadoop 2.7设置
我正在尝试在Macbook上设置hadoop 2.7。我正在遵循&...
无法使用Hadoop GCS连接器在命令行中列出GCS存储桶中的文件
我已经在Spark中安装了GCS连接器。上周，我按照<...
hadoop-streaming.jar中的-input和-output是什么？我阅读了其中的帮助部分，但在编写自定义映射器和reducer时仍然有疑问
我在HDFS上有一个文件夹，每个文件夹有6k个文件，每...
Hadoop名称节点无法关闭安全模式
全部 我是Hadoop的新手。在docker中构建具有5个节点...
在Hive中的数组内查询
我看过<a href="https://stackoverflow.com/...
在pyspark中导入多个py文件
我在hdfs中具有以下文件夹结构。 / home / myid -m...
使用Spark的HDFS文件流
我无法通过Spark作业从HDFS中流式传输“旧”文件。如...