hdfsへの多くの読み取りおよび書き込み操作の後(この問題の原因となる正確な操作はわかりません)。これらの2つのファイル:dncp_block_verification.log.curr、dncp_block_verification.log.prevは、それぞれ200 000 000000バイトを超えています。
hdfsに対するどの操作がこれらのファイルの急速な成長を引き起こす可能性がありますか?
インターネットから、hdfsを撃墜してログを削除できることはわかっていますが、それは良い解決策ではありません。この問題を回避する方法は?どうもありがとうございました
ブロックスキャナーは、ファイルを大きくする原因です。動作を説明する記事へのリンクは次のとおりです:http://aosabook.org/en/hdfs.html(セクション8.3.5)。
バグこれを原因とHDFS 2.6.0で修正されています
この記事はインターネットから収集されたものであり、転載の際にはソースを示してください。
侵害の場合は、連絡してください[email protected]
コメントを追加