天天看點

HDFS--unable to create new native thread

  • Exception展示
unable to create native thread
引發,
讀取block,stream closed
引發,
發生一系列io異常
引發,
namenode kill datanode
           
  • 分析
發生此種情況,因為需要寫入hdfs的程序數多于linux配置設定給hdfs可操作的程序數,配置設定的程序數都被占用了,不夠重新建立。
現在提供兩種解決思路:
    (1):程式中同時有大量的非正常檔案正在寫入。針對此情況需要梳理代碼。
    (2):确實需要同時又大量的檔案寫入的話,可以調節linux配置設定給hdfs的程序數。
           

注:有關資料倉庫等問題,有興趣的同學可以聯系我。TEL/微信:18310801089