代码之家 › 专栏 › 技术社区 › Long.zhao

为什么alluxio文件始终保持TO_BE_状态

alluxio hdfs hadoop

Long.zhao · 技术社区 · 7 年前

我部署了一个 Alluxio 基于的群集 HDFS 簇当我使用Alluxio本机Java Api通过设置writetype ASYNC\u将一些文件写入Alluxio时,文件(即使只有1G)似乎没有写入HDFS,几天后一直保持to\u be\u的状态。

1 回复 | 直到 5 年前

Long.zhao 7 年前

我找到了答案。我发现日志“ERROR DefaultAsyncPersistHandler-Not all blocks of file/test/sample\u data/order\u detail\u titile\u 2.0.txt存储在同一个worker上”,当使用ASYNC\u THROUGH时,Alluxio请求一个worker中的所有文件阻止程序。我在哪里使用CACHE\u没有问题

推荐文章

Nk.Pl · 为Kafka主题创建配置单元表生成器

7 年前

enodmilvado · 从HDP当前版本2.6.0.3升级到2.6.4失败

7 年前

Enrico Gallinucci · HDFS配置的容量高于磁盘容量

7 年前

Omid · 计算fat 32和HDFS的最大体积大小

7 年前

Danny · AWS中的Spark:“S3AbortableInputStream:并非所有字节都是从S3ObjectInputStream读取的”

7 年前

Tran Thien An · Hadoop Kerberos:Datanode无法连接到Namenode。jsvc启动Datanode与特权端口绑定(不使用SASL)

7 年前

dhalfageme · HBase:MasterNotRunningException:节点/HBase不在zookeeper中

7 年前

dlamblin · Hadoop HDFS就地压缩

7 年前

user2007861 · 在HDFS文件夹中查找旧文件

7 年前

osk · 加载a。Scala中HDFS的csv文件

7 年前