CESM运行错误

FHHFHH

[img]file:///C:\Users\FHH\AppData\Roaming\Tencent\Users\1658093099\QQ\WinTemp\RichOle\1UU9K_(DW8)X8583MRPB@50.png[/img][img]file:///C:\Users\FHH\AppData\Roaming\Tencent\Users\1658093099\QQ\WinTemp\RichOle\1UU9K_(DW8)X8583MRPB@50.png[/img]运行CLM5，进行case.submit之后，出现这个错误， 。我打开cesm.log，弹出这个错误， 下面是cesm.log文件所有内容：
Invalid PIO rearranger comm max pend req (comp2io),            0
Resetting PIO rearranger comm max pend req (comp2io) to           64
PIO rearranger options:
   comm type     =p2p                                                                             
   comm fcd      =2denable                                                                        
   max pend req (comp2io)  =           0
   enable_hs (comp2io)     = T
   enable_isend (comp2io)  = F
   max pend req (io2comp)  =          64
   enable_hs (io2comp)    = F
   enable_isend (io2comp)  = T
(seq_comm_setcomm)  init ID (  1 GLOBAL          ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_setcomm)  init ID (  2 CPL             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_setcomm)  init ID (  5 ATM             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID (  6 CPLATM          ) join IDs =     2     5       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID (  3 ALLATMID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID (  4 CPLALLATMID     ) join IDs =     2     3       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID (  9 LND             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 10 CPLLND          ) join IDs =     2     9       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID (  7 ALLLNDID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID (  8 CPLALLLNDID     ) join IDs =     2     7       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID ( 13 ICE             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 14 CPLICE          ) join IDs =     2    13       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID ( 11 ALLICEID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID ( 12 CPLALLICEID     ) join IDs =     2    11       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID ( 17 OCN             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 18 CPLOCN          ) join IDs =     2    17       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID ( 15 ALLOCNID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID ( 16 CPLALLOCNID     ) join IDs =     2    15       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID ( 21 ROF             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 22 CPLROF          ) join IDs =     2    21       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID ( 19 ALLROFID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID ( 20 CPLALLROFID     ) join IDs =     2    19       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID ( 25 GLC             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 26 CPLGLC          ) join IDs =     2    25       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID ( 23 ALLGLCID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID ( 24 CPLALLGLCID     ) join IDs =     2    23       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID ( 29 WAV             ) pelist   =     0    23     1 ( npes =    24) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 30 CPLWAV          ) join IDs =     2    29       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID ( 27 ALLWAVID        ) join multiple comp IDs       ( npes =    24) ( nthreads =  1)
(seq_comm_joincomm) init ID ( 28 CPLALLWAVID     ) join IDs =     2    27       ( npes =    24) ( nthreads =  1)
(seq_comm_setcomm)  init ID ( 33 ESP             ) pelist   =     0     0     1 ( npes =     1) ( nthreads =  1)( suffix =)
(seq_comm_joincomm) init ID ( 34 CPLESP          ) join IDs =     2    33       ( npes =    24) ( nthreads =  1)
(seq_comm_jcommarr) init ID ( 31 ALLESPID        ) join multiple comp IDs       ( npes =     1) ( nthreads =  1)
(seq_comm_joincomm) init ID ( 32 CPLALLESPID     ) join IDs =     2    31       ( npes =    24) ( nthreads =  1)
(seq_comm_printcomms)     1     0    24     1  GLOBAL:
(seq_comm_printcomms)     2     0    24     1  CPL:
(seq_comm_printcomms)     3     0    24     1  ALLATMID:
(seq_comm_printcomms)     4     0    24     1  CPLALLATMID:
(seq_comm_printcomms)     5     0    24     1  ATM:
(seq_comm_printcomms)     6     0    24     1  CPLATM:
(seq_comm_printcomms)     7     0    24     1  ALLLNDID:
(seq_comm_printcomms)     8     0    24     1  CPLALLLNDID:
(seq_comm_printcomms)     9     0    24     1  LND:
(seq_comm_printcomms)    10     0    24     1  CPLLND:
(seq_comm_printcomms)    11     0    24     1  ALLICEID:
(seq_comm_printcomms)    12     0    24     1  CPLALLICEID:
(seq_comm_printcomms)    13     0    24     1  ICE:
(seq_comm_printcomms)    14     0    24     1  CPLICE:
(seq_comm_printcomms)    15     0    24     1  ALLOCNID:
(seq_comm_printcomms)    16     0    24     1  CPLALLOCNID:
(seq_comm_printcomms)    17     0    24     1  OCN:
(seq_comm_printcomms)    18     0    24     1  CPLOCN:
(seq_comm_printcomms)    19     0    24     1  ALLROFID:
(seq_comm_printcomms)    20     0    24     1  CPLALLROFID:
(seq_comm_printcomms)    21     0    24     1  ROF:
(seq_comm_printcomms)    22     0    24     1  CPLROF:
(seq_comm_printcomms)    23     0    24     1  ALLGLCID:
(seq_comm_printcomms)    24     0    24     1  CPLALLGLCID:
(seq_comm_printcomms)    25     0    24     1  GLC:
(seq_comm_printcomms)    26     0    24     1  CPLGLC:
(seq_comm_printcomms)    27     0    24     1  ALLWAVID:
(seq_comm_printcomms)    28     0    24     1  CPLALLWAVID:
(seq_comm_printcomms)    29     0    24     1  WAV:
(seq_comm_printcomms)    30     0    24     1  CPLWAV:
(seq_comm_printcomms)    31     0     1     1  ALLESPID:
(seq_comm_printcomms)    32     0    24     1  CPLALLESPID:
(seq_comm_printcomms)    33     0     1     1  ESP:
(seq_comm_printcomms)    34     0    24     1  CPLESP:
(t_initf) Read in prof_inparm namelist from: drv_in
(t_initf) Using profile_disable=          F
(t_initf)       profile_timer=                      4
(t_initf)       profile_depth_limit=                4
(t_initf)       profile_detail_limit=               2
(t_initf)       profile_barrier=          F
(t_initf)       profile_outpe_num=                  1
(t_initf)       profile_outpe_stride=               0
(t_initf)       profile_single_file=      F
(t_initf)       profile_global_stats=     T
(t_initf)       profile_ovhd_measurement= F
(t_initf)       profile_add_detail=       F
(t_initf)       profile_papi_enable=      F


24 pes participating in computation for CLM

-----------------------------------

NODE#  NAME
(    0)  node1
(    1)  node1
(    2)  node1
(    3)  node1
(    4)  node1
(    5)  node1
(    6)  node1
(    7)  node1
(    8)  node1
(    9)  node1
(   10)  node1
(   11)  node1
(   12)  node1
(   13)  node1
(   14)  node1
(   15)  node1
(   16)  node1
(   17)  node1
(   18)  node1
(   19)  node1
(   20)  node1
(   21)  node1
(   22)  node1
(   23)  node1
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        80.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     
surfrd_get_grid WARNING: lat/lon min/max is   -90.000000000000014        70.000000000000000     

proc=            1  beg gridcell=           12  end gridcell=           22  total gridcells per proc=           11
proc=            1  beg landunit=           38  end landunit=           75  total landunits per proc=           38
proc=            1  beg column  =          114  end column  =          220  total columns per proc  =          107
proc=            1  beg patch     =          172  end patch     =          343  total patches per proc =          172
proc=            1  beg coh     =           12  end coh     =           22  total coh per proc     =           11
proc=            1  lnd ngseg   =          253  lnd nlseg   =           11
proc=            1  gce ngseg   =          253  gce nlseg   =           11
proc=            1  lun ngseg   =          832  lun nlseg   =           37
proc=            1  col ngseg   =          832  col nlseg   =           37
proc=            1  patch ngseg   =          832  patch nlseg   =           37
proc=            1  coh ngseg   =            0  coh nlseg   =            0
proc=            1  nclumps =            1
proc=            1  clump no =            1  clump id=            2  beg gridcell=           12  end gridcell=           22  total gridcells per clump=           11
proc=            1  clump no =            1  clump id=            2  beg landunit=           38  end landunit=           75  total landunits per clump =           38
proc=            1  clump no =            1  clump id=            2  beg column  =          114  end column  =          220  total columns per clump  =          107
proc=            1  clump no =            1  clump id=            2  beg patch     =          172  end patch     =          343  total patches per clump =          172
proc=            1  clump no =            1  clump id=            2  beg cohort     =           12  end cohort     =           22  total cohorts per clump     =           11

proc=           11  beg gridcell=          122  end gridcell=          132  total gridcells per proc=           11
proc=           11  beg landunit=          407  end landunit=          441  total landunits per proc=           35
proc=           11  beg column  =         1161  end column  =         1267  total columns per proc  =          107
proc=           11  beg patch     =         1746  end patch     =         1905  total patches per proc =          160
proc=           11  beg coh     =          122  end coh     =          132  total coh per proc     =           11
proc=           11  lnd ngseg   =          253  lnd nlseg   =           11
proc=           11  gce ngseg   =          253  gce nlseg   =           11
proc=           11  lun ngseg   =          832  lun nlseg   =           35
proc=           11  col ngseg   =          832  col nlseg   =           35
proc=           11  patch ngseg   =          832  patch nlseg   =           35
proc=           11  coh ngseg   =            0  coh nlseg   =            0
proc=           11  nclumps =            1
proc=           11  clump no =            1  clump id=           12  beg gridcell=          122  end gridcell=          132  total gridcells per clump=           11
proc=           11  clump no =            1  clump id=           12  beg landunit=          407  end landunit=          441  total landunits per clump =           35
proc=           11  clump no =            1  clump id=           12  beg column  =         1161  end column  =         1267  total columns per clump  =          107
proc=           11  clump no =            1  clump id=           12  beg patch     =         1746  end patch     =         1905  total patches per clump =          160
proc=           11  clump no =            1  clump id=           12  beg cohort     =          122  end cohort     =          132  total cohorts per clump     =           11

proc=           22  beg gridcell=          234  end gridcell=          243  total gridcells per proc=           10
proc=           22  beg landunit=          770  end landunit=          800  total landunits per proc=           31
proc=           22  beg column  =         2204  end column  =         2289  total columns per proc  =           86
proc=           22  beg patch     =         3385  end patch     =         3525  total patches per proc =          141
proc=           22  beg coh     =          234  end coh     =          243  total coh per proc     =           10
proc=           22  lnd ngseg   =          253  lnd nlseg   =           10
proc=           22  gce ngseg   =          253  gce nlseg   =           10
proc=           22  lun ngseg   =          832  lun nlseg   =           31
proc=           22  col ngseg   =          832  col nlseg   =           31
proc=           22  patch ngseg   =          832  patch nlseg   =           31
proc=           22  coh ngseg   =            0  coh nlseg   =            0
proc=           22  nclumps =            1
proc=           22  clump no =            1  clump id=           23  beg gridcell=          234  end gridcell=          243  total gridcells per clump=           10
proc=           22  clump no =            1  clump id=           23  beg landunit=          770  end landunit=          800  total landunits per clump =           31
proc=           22  clump no =            1  clump id=           23  beg column  =         2204  end column  =         2289  total columns per clump  =           86
proc=           22  clump no =            1  clump id=           23  beg patch     =         3385  end patch     =         3525  total patches per clump =          141
proc=           22  clump no =            1  clump id=           23  beg cohort     =          234  end cohort     =          243  total cohorts per clump     =           10

proc=           23  beg gridcell=          244  end gridcell=          253  total gridcells per proc=           10
proc=           23  beg landunit=          801  end landunit=          835  total landunits per proc=           35
proc=           23  beg column  =         2290  end column  =         2392  total columns per proc  =          103
proc=           23  beg patch     =         3526  end patch     =         3682  total patches per proc =          157
proc=           23  beg coh     =          244  end coh     =          253  total coh per proc     =           10
proc=           23  lnd ngseg   =          253  lnd nlseg   =           10
proc=           23  gce ngseg   =          253  gce nlseg   =           10
proc=           23  lun ngseg   =          832  lun nlseg   =           35
proc=           23  col ngseg   =          832  col nlseg   =           35
proc=           23  patch ngseg   =          832  patch nlseg   =           35
proc=           23  coh ngseg   =            0  coh nlseg   =            0
proc=           23  nclumps =            1
proc=           23  clump no =            1  clump id=           24  beg gridcell=          244  end gridcell=          253  total gridcells per clump=           10
proc=           23  clump no =            1  clump id=           24  beg landunit=          801  end landunit=          835  total landunits per clump =           35
proc=           23  clump no =            1  clump id=           24  beg column  =         2290  end column  =         2392  total columns per clump  =          103
proc=           23  clump no =            1  clump id=           24  beg patch     =         3526  end patch     =         3682  total patches per clump =          157
proc=           23  clump no =            1  clump id=           24  beg cohort     =          244  end cohort     =          253  total cohorts per clump     =           10
ERROR: ('shr_map_2dto1d')  ERROR
#0  0xc1462a
#1  0x9e9653
#2  0x9e97d3
#3  0xa62932
#4  0xa62a11
#5  0xa72b31
#6  0xa4e90f
#7  0xaaf2c6
#8  0xab12b6
#9  0xab1600
#10  0x82b37c
#11  0x82b531
#12  0x51146d
#13  0x50e66c
#14  0x502ca5
#15  0x482670
#16  0x473874
#17  0x47fdd2
#18  0x39b081ed20
#19  0x468389
--------------------------------------------------------------------------
MPI_ABORT was invoked on rank 0 in communicator MPI_COMM_WORLD
with errorcode 1001.

NOTE: invoking MPI_ABORT causes Open MPI to kill all MPI processes.
You may or may not see output from other processes, depending on
exactly when Open MPI kills them.
--------------------------------------------------------------------------
--------------------------------------------------------------------------
mpiexec has exited due to process rank 0 with PID 654 on
node node1 exiting improperly. There are two reasons this could occur:

1. this process did not call "init" before exiting, but others in
the job did. This can cause a job to hang indefinitely while it waits
for all processes to call "init". By rule, if one process calls "init",
then ALL processes must call "init" prior to termination.

2. this process called "init", but exited without calling "finalize".
By rule, all processes that call "init" MUST call "finalize" prior to
exiting or it will be considered an "abnormal termination"

This may have caused other processes in the application to be
terminated by signals sent by mpiexec (as reported here).
--------------------------------------------------------------------------