sbatch(1)                       Slurm Commands                       sbatch(1)



<?><?><?> (NAME)
       sbatch - <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> Slurm.


<?><?><?><?><?> <?><?><?><?><?> (SYNOPSIS)
       sbatch [OPTIONS(0)...] [ : [OPTIONS(N)...]] script(0) [args(0)...]

       <?><?><?><?><?>(<?><?>) <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?>
       <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
       <?><?><?> <?><?> <?><?><?><?><?><?>:
       https://slurm.schedmd.com/heterogeneous_jobs.html


<?><?><?><?><?><?><?> (DESCRIPTION)
       <?><?><?><?><?> sbatch <?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> (batch script) <?><?> <?><?> Slurm
       <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
       <?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> sbatch
       <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?><?><?> sbatch <?><?><?><?><?><?><?>
       <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?>.

       <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
       <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?>
       "#SBATCH" <?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?><?> <?><?>
       <?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
       <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.
       <?><?><?><?><?><?><?><?><?><?><?><?><?><?> #SBATCH
       <?><?><?><?><?><?><?><?> <?><?><?><?> Slurm <?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
       <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
       (literal) <?><?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?><?>
       <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?> #SBATCH
       <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?>
       <?><?> <?><?><?><?><?><?>.

       <?><?><?><?><?> sbatch <?><?><?><?><?><?><?><?> <?><?> <?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> Slurm <?>
       <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> (job ID) <?><?>
       <?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?>
       <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.

       <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?> <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?>
       "slurm-%j.out" <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
       <?><?> "%j" <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
       <?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?>
       <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?> <?><?><?> <?><?>
       <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> Slurm
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?>.

       <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
       <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> Slurm <?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?>
       <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?><?><?> (batch
       host) <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?> --batch <?><?><?><?> <?><?><?> <?><?> <?><?><?>
       <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.

       <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?><?> (CPUs) <?><?> <?><?><?><?><?> <?>
       <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>:
       https://slurm.schedmd.com/cpu_management.html


<?><?><?><?><?> <?><?><?><?><?><?><?> (RETURN VALUE)
       <?><?><?><?><?> sbatch <?><?> <?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?> 0 <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?>.


<?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> (SCRIPT PATH RESOLUTION)
       <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>:

       1. <?><?><?> <?><?><?><?><?><?><?> <?><?> "." <?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?>: <?><?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?><?><?> / script
       2. <?><?><?> <?><?><?><?><?><?><?> <?><?> "/" <?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?>.
       3. <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?><?>.
       4. <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> PATH
       <?><?><?><?> <?><?><?><?><?> <?><?><?><?>. path_resolution(7) <?><?>
       <?><?><?><?><?><?>.

       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?> --chdir <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
       <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.


<?><?><?><?><?><?><?><?> (OPTIONS)
       -A, --account=<account>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              account <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> scontrol <?><?><?><?><?> <?><?><?><?>.



       --acctg-freq=<datatype>=<interval>[,<datatype>=<interval>...]
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              JobAcctGatherFrequency <?><?> <?><?><?><?> slurm.conf
              <?><?><?><?><?><?><?> <?><?><?>. <datatype>=<interval>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>
              jobacct_gather <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> acct_gather_profile <?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?>
              <datatype>=<interval> <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?> datatype <?><?><?><?><?><?><?> <?><?>:

              task        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                          jobacct_gather <?> <?><?><?><?>
                          <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?> acct_gather_profile.
                          <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                          <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                          <?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?>
                          <?><?><?><?> <?><?><?><?><?>
                          <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                          <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                          <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                          <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
                          <?><?><?> <?><?> <?><?> <?><?><?><?> slurm.conf
                          <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?>.
                          <?><?><?> <?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                          <?><?><?>.



              energy      <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                          acct_gather_energy.



              network     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          infiniband <?><?> <?><?><?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?> acct_gather_interconnect.



              filesystem  <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?><?><?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                          acct_gather_filesystem.



              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?> 0 <?><?><?>.
              <?><?><?><?><?> 0 <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> 0
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> (<?><?>
              <?><?><?><?><?> Slurm <?><?> <?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?>).
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?> <?><?><?>)
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              10,000 <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



       -a, --array=<indexes>
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> (job array)<?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?>.  <?><?><?><?><?> indexes <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?>/<?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> "-" <?><?><?><?> <?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?> "--array=0-15" <?><?>
              "--array=0,6,16-32".  <?><?> <?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?><?>
              <?><?><?><?> <?><?><?>. <?><?><?><?> <?><?><?><?><?>
              "--array=0-15:4" <?><?><?><?><?> <?><?> "--array=0,4,8,12"
              <?><?><?>.  <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> "%"
              <?><?><?><?> <?><?><?>.  <?><?><?><?> <?><?><?><?>
              "--array=0-15%4" <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?>
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> 0 <?><?><?>.  <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> MaxArraySize
              <?><?><?>.  <?><?><?><?>: <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?>.



       --batch=<list>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              features (<?><?><?><?><?><?><?><?><?><?>) <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> Slurm <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>
              features <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?>.  <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?> <?><?><?> Intel Haswell <?> KNL
              <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
              "haswell" <?> "knl" <?><?><?><?>.  <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> Haswell
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              "--batch=haswell" <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> AND <?> OR <?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> (&) <?> <?><?> <?><?><?><?><?> (|)
              <?><?><?><?><?>. <?><?><?><?> <?><?><?><?>:
              "--batch=haswell|broadwell" <?><?> "--batch=haswell|big_memory".
              <?><?><?><?><?><?><?> --batch <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> --constraint=<list> <?><?><?> <?><?><?><?>
              (<?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?> KNL <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?> <?><?><?> Haswell <?><?><?><?><?><?>
              <?><?><?><?><?>).  <?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?>.



       --bb=<spec>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> (burst
              buffer). <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?> --bbf <?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> --bb
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> Slurm <?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> Slurm <?><?> <?><?><?><?><?><?>:
              https://slurm.schedmd.com/burst_buffer.html



       --bbf=<file_name>
              <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> (burst buffer).  <?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?>.  <?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?>.  <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> Slurm
              <?><?> <?><?><?><?><?><?>:
              https://slurm.schedmd.com/burst_buffer.html



       -b, --begin=<time>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?>.

              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> HH:MM:SS
              <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>
              (<?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?>).  (<?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.)
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> midnight
              (<?><?><?><?><?><?><?>)<?> noon (<?><?><?>)<?> elevenses
              (<?><?><?><?> <?><?> <?><?><?>)<?> fika (<?><?><?><?> <?>
              <?><?><?><?><?><?><?><?>) <?><?> teatime (<?><?><?><?> <?>
              <?><?><?><?><?><?><?><?>) <?><?> <?><?><?><?> <?><?><?><?> <?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?>
              <?><?><?><?><?> AM <?><?> PM <?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
              MMDDYY <?><?> MM/DD/YY <?><?> YYYY-MM-DD <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?>. <?><?><?><?><?> <?> <?><?><?><?> <?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?>: YYYY-MM-DD[THH:MM[:SS]].
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> now + count
              time-units <?><?><?><?><?><?> <?><?> <?><?> <?><?> time-units
              <?><?><?><?><?><?><?><?> seconds (<?><?><?><?><?><?><?>)<?>
              minutes<?> hours<?> days<?> <?><?> weeks <?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?> today <?> tomorrow <?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> scontrol <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?> <?><?><?><?>:.IP
                 --begin=16:00
                 --begin=now+1hour
                 --begin=now+60           (<?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>)
                 --begin=2010-01-20T12:34:00


              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?>/<?><?><?><?>:
               - <?><?><?><?><?> <?><?><?><?> 'seconds' (<?><?><?><?><?>)
              <?><?> <?><?><?><?> <?><?><?><?><?> HH:MM:SS <?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> (poll time) <?><?><?><?><?><?><?><?> Slurm
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?>
              (<?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              sched/builtin <?><?><?><?><?><?><?>).
               - <?><?><?> <?><?><?><?><?> (HH:MM:SS) <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (00:00:00)
              <?><?><?>.
               - <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?> (<?><?><?><?><?> MM/DD)<?> <?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> MM/DD <?> HH:MM:SS <?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?>.



       -D, --chdir=<directory>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> (batch script) <?><?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?> directory <?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?>.



       --cluster-constraint=[!]<list>
              <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?> (sibling
              job) <?><?> <?><?> <?><?><?><?><?> <?><?><?>. <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> Slurm <?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?>. <?><?><?>
              <?><?><?><?><?><?> <<!>> <?><?><?><?> <?><?><?> <?><?><?><?><?>
              Slurm <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?>.



       -M, --clusters=<string>
              <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?>. <?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?>. <?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?>. <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?><?><?> 'all' <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> --export
              <?><?><?><?> <?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?><?> slurmdbd <?><?><?><?>
              <?><?><?><?> <?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> FederationParameters=fed_display
              <?><?><?><?> <?><?><?>.



       --comment=<string>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?>.



       --consolidate-segments
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> (segments) <?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?> topology/block <?><?><?> <?><?><?><?><?>
              <?><?><?>.



       -C, --constraint=<list>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> (features) <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> Slurm <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> constraint
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?>. <?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <<<?><?><?>>> (soft)
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> --prefer <?><?>
              <?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?>.  <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> AND<?>
              OR<?> matching OR<?> <?><?><?><?><?> <?><?><?><?><?> <?>
              <?><?><?><?> <?><?><?><?> <?><?><?> (<?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?>).

              <?><?><?><?>: <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> (Changeable features)
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?> NodeFeatures
              <?><?><?><?><?> <?><?><?><?><?><?><?>.

              <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?><?> --constraint
              <?><?><?><?><?><?><?> <?><?>:


              <?><?><?> <?><?><?> (Single Name)
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?>.  <?><?><?><?> <?><?><?><?><?><?>
                     --constraint="intel"



              <?><?><?><?><?> <?><?><?> (Node Count)
                     <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?> <?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?> --nodes=16 --constraint="graphics*4"
                     <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <<graphics>> <?><?><?><?><?>.  <?><?><?>
                     <?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?> <?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.

                     <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> helpers NodeFeatures
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?>
                     <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> (Heterogeneous
                     jobs) <?><?><?><?><?><?><?> <?><?><?>.



              AND    <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                     <?><?><?><?><?> <?><?><?><?><?><?><?> (&) <?><?><?><?>
                     <?><?><?><?><?> AND <?><?> <?><?><?> <?><?><?><?><?><?>.
                     <?><?><?><?> <?><?><?><?><?><?> --constraint="intel&gpu"



              OR     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>.  <?><?>
                     <?><?><?><?><?> (|) <?><?><?><?> <?><?><?><?><?> OR
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?><?> salloc -N2 --constraint="intel|amd"
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?>
                     <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     intel <?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> amd <?><?><?><?>.  <?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> OR <?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?> Matching OR
                     <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?><?> salloc -N2 --constraint="foo|bar&baz"
                     <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> foo<?> <?><?> bar <?> baz <?><?><?><?><?>
                     (<?><?> <?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> foo<?> bar
                     <?> baz <?><?><?><?><?>). <?><?><?><?><?><?> helpers
                     NodeFeatures <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?>
                     RebootProgram (<?><?><?><?><?><?> slurm.conf(5)) <?>
                     <?><?><?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?><?>
                     helpers.conf(5)) <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?>. <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> helpers <?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <<foo>> <?><?> <<bar,baz>> <?><?>
                     <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.



              Matching OR
                     <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> OR
                     <?><?><?><?><?><?><?> <?><?><?><?> <?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?>
                     --constraint="[rack1|rack2|rack3|rack4]" <?><?><?><?>
                     <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.



              <?><?><?><?><?> <?><?><?><?><?><?><?> (Multiple Counts)
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> AND <?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?><?> <?><?><?><?><?><?>
                     --constraint="[rack1*2&rack2*4]" <?><?><?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <<rack1>> <?> <?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <<rack2>> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?>.

                     <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> helpers NodeFeatures
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?><?><?>
                     (Multiple Counts) <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?>.



              <?><?><?><?><?><?><?><?> (Brackets)
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.
                     <?><?><?><?> <?><?><?><?><?><?>
                     --constraint="[(rack1|rack2)*1&(rack3)*2]" <?><?>
                     <?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?> <<rack1>> <?><?> <<rack2>>
                     <?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <<rack3>>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?> <?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?> Multiple Counts <?> Matching OR
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>.
                     <?><?><?><?><?><?><?><?> AND <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     (<?><?><?><?> <<[quad*2&hemi*1]>>). <?><?><?><?><?><?>
                     Slurm <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> helpers NodeFeatures
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>.
                     Matching OR <?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?> <?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?>.



              <?><?><?><?><?><?><?><?> (Parentheses)
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                     --constraint="[(knl&snc4&flat)*4&haswell*1]" <?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?> <<knl>><?> <<snc4>> <?>
                     <<flat>> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?> <?><?><?><?><?> <<haswell>> <?><?><?><?>
                     <?><?><?><?> <?><?><?>.  <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                     <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?>
                     --constraint="foo&bar|baz" <?><?><?><?><?><?><?><?>
                     <?><?> foo <?> bar<?> <?><?> baz <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                     --constraint="foo|bar&baz" <?><?><?><?><?><?><?><?>
                     <?><?> foo <?> baz<?> <?><?> bar <?> baz <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> (<?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> baz <?><?>
                     <?><?><?><?><?><?><?> AND <?><?>).
                     --constraint="foo&(bar|baz)" <?><?><?><?><?><?><?><?>
                     <?><?> foo <?> <?><?><?><?><?> <?><?><?> <?><?> bar
                     <?><?> baz <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?><?>: <?><?> OR <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> KNL NodeFeatures <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                     helpers NodeFeatures <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.



       --container=<path_to_container>
              <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> OCI (OCI container bundle).



       --container-id=<container_id>
              <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              OCI..IP


       --container-type=<container_type>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?>.



       --contiguous
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?> topology/flat <?><?><?> <?><?><?><?><?>
              <?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?>.



       -S, .IP


       --delay-boot=<minutes>
              <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> (features)
              <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?><?> (reboot)
              <?><?><?><?><?>.  <?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?>.  <?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?>.  <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> delay_boot <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> SchedulerParameters <?><?> <?><?><?><?>
              slurm.conf <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?> (<?><?><?><?> <?><?><?><?><?>).



       -d, --dependency=<dependency_list>
              <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?>
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?>.  <dependency_list> <?><?> <?><?><?>
              <type:job_id[:job_id][,type:job_id[:job_id]]> <?><?>
              <type:job_id[:job_id][?type:job_id[:job_id]]> <?><?><?>.
              <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <<,>>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?>.  <?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?> <<?>> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?>
              <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?>. <?><?><?><?> <?><?><?><?><?>:
              -d afterok:20:21,afterany:23

              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?> <?><?>
              <?><?><?><?><?><?> <?><?> <?> <?><?> <?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?>. <?><?> <?><?><?> <?><?><?>:
              -d afterok:20:21?afterany:23
              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> (afterok:20
              <?><?> afterok:21 <?><?> afterany:23) <?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?> <?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> scontrol <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?>.  <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?> (requeued) <?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>.


              after:job_id[[+time][:jobid[+time]...]]
                     <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?>
                     <?><?><?><?> <?><?><?> <?><?><?><?> 'time' <?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?> 'time'
                     <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>.



              afterany:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.



              afterburstbuffer:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     (burst buffer stage out)<?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?> <?><?><?>.



              aftercorr:job_id[:jobid...]
                     <?><?> <?><?><?> (<?><?><?><?><?>) <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?> (job array)
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?> (<?><?> <?><?>
                     <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?>)<?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?>. <?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> afterok <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              afternotok:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> (<?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?>
                     <?><?><?><?>) <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> MinJobAge
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                     <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> (failed)
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              afterok:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> (<?><?> <?><?> <?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>)<?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> MinJobAge
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                     <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> (failed)
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              singleton
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?> <?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?> <?><?><?>.  <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?> <?><?><?> <?> <?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.  <?><?>
                     <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     singleton <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?> <?><?><?><?><?> <?><?>
                     DependencyParameters=disable_remote_singleton <?><?>
                     slurm.conf <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.



       -m,
       --distribution={*|block|cyclic|arbitrary|plane=<size>}[:{*|block|cyclic|fcyclic}[:{*|block|cyclic|fcyclic}]][,{Pack|NoPack}]

              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> srun
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?>.

              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> (task affinity)
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?>
              <?><?><?><?><?> <?><?><?> (<?><?><?> <?><?> <?><?><?><?><?><?>
              <<:>>) <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?> (<?><?> <?><?>
              <?><?><?><?><?><?> <<:>>) <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> (CPU)
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?>
              <?><?><?><?><?> <?><?><?> (<?><?> <?><?> <?><?><?><?><?> <<:>>)
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> (task affinity) <?><?><?><?>
              <?><?><?><?>.  <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> task/cgroup
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>. <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?> * <?><?><?><?> <?><?><?><?><?><?>.

              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
              select/cons_tres<?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <https://slurm.schedmd.com/mc_support.html> <?><?><?><?><?><?>
              <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?> (<?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>):


              *      <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> (block) <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
                     CR_NO_DIST_TOPO_BLOCK <?><?> SelectTypeParameters
                     <?><?><?><?><?><?> <?><?><?><?>.



              block  <?><?><?> <?><?><?><?><?> <?><?><?><?><?> (block)
                     <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>.
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>. <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?> <?><?> <?><?><?>
                     <?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?> <?><?><?><?> <?> <?><?><?> <?><?><?><?>
                     <?><?><?> <?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.



              cyclic <?><?><?> <?><?><?><?><?> <?><?><?><?><?> (cyclic)
                     <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> (<?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?> round-robin).
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>. <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?> <?> <?><?><?><?>
                     <?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?>
                     <?><?><?> <?><?><?> <?><?><?><?> <?> <?><?><?> <?><?>
                     <?><?><?> <?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?> SelectType
                     <?><?><?><?><?> <?><?> select/cons_tres <?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?>.
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?>.  <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?>.



              plane  <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <size> <?><?><?><?><?>
                     <?><?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> SLURM_DIST_PLANESIZE
                     <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.
                     <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?> (taskid) <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?>
                     plane <?><?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> (<?><?><?><?>
                     <?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?>)<?>
                     <?><?><?><?><?> <?><?>
                     <https://slurm.schedmd.com/mc_support.html> <?>
                     <https://slurm.schedmd.com/dist_plane.html>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              arbitrary
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (arbitrary)
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> SLURM_HOSTFILE
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?>
                     <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>. <?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?> block
                     <?><?><?><?><?><?><?><?><?>.  <?><?><?><?><?><?>
                     <?><?><?><?> hostfile <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?> <?><?><?><?> <?><?> <?><?> <?><?> <?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?>. <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> (-n, --ntasks=<number>)<?>
                     <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?>.
                     <?><?><?><?>: <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> (generic)
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> CR_LLN<?> CR_Pack_Nodes
                     <?><?> pack_serial_at_end <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?> <?><?><?> (job step) <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> srun <?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?>..IP


              <?><?><?> <?><?><?><?><?> <?><?><?> (<?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>):


              *      <?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> (cyclic).



              block  <?><?><?> <?><?><?><?><?> block
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              cyclic <?><?><?> <?><?><?><?><?> cyclic
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?>
                     <?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> (round-robin) <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?>.
                     <?><?><?><?>: <?><?> <?><?><?><?><?><?><?><?> <?><?>
                     hyper-threading <?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?>. <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> --ntasks-per-core=1 <?><?> <?><?><?>
                     <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?>.



              fcyclic
                     <?><?><?> <?><?><?><?><?> fcyclic
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> (round-robin) <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> (cyclic) <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?>.



              <?><?><?> <?><?><?><?><?> <?><?><?> (<?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>):


              *      <?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> (<?><?> <?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?> <?><?><?><?><?> <?><?><?>).



              block  <?><?><?> <?><?><?><?><?> block
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              cyclic <?><?><?> <?><?><?><?><?> cyclic
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?>
                     <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> (round-robin) <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              fcyclic
                     <?><?><?> <?><?><?><?><?> fcyclic
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> (round-robin) <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>.



              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>:


              Pack   <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?> <<block>> <?><?><?><?><?><?><?>
                     <?><?><?> <?><?><?><?>.



              NoPack <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     SelectTypeParameters CR_Pack_Nodes <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?>.



       -e, --error=<filename_pattern>
              <?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> (standard error)
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> (batch script)
              <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <<filename pattern>>
              <?><?><?><?> <?><?><?>.  <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?>.  <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?> (job arrays)<?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> "slurm-%A_%a.out" <?><?><?>
              <?><?> <?><?> <?><?> "%A" <?><?> <?><?><?><?><?><?> <?><?><?>
              (job ID) <?> "%a" <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> "slurm-%j.out" <?><?><?> <?><?> <?><?>
              <?><?> "%j" <?><?> <?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?> filename pattern <?><?> <?><?><?>
              <?><?> <?><?><?><?><?><?>.



       -x, --exclude=<node_name_list>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>.



       --exclusive[={user|mcs|topo}]
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> (<?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> "=topo"<?> <?><?><?>
              <?><?><?><?><?><?><?><?><?><?>) <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> (<?><?>
              <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              "=user" <?><?> <?><?><?><?><?><?> "=mcs") <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?> user/mcs/topo
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> (<?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>)<?>
              <?><?><?><?><?> CPU<?><?> <?> GRES<?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> (gang scheduling) <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              --mem=0 <?><?><?><?><?><?><?> <?><?><?><?>.  <?><?><?><?><?>
              <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?>/<?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?> <?><?><?><?><?><?> OverSubscribe <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?>.  <?><?><?><?>: <?><?>
              <?><?><?><?> <?><?> GRES <?><?><?><?><?><?><?> (MPS)
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
              GRES <?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?> (GPU)
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> GRES<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?> GRES
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> --oversubscribe
              <?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?><?><?><?>)
              <?><?><?>.



       --export={[ALL,]<environment_variables>|ALL|NIL|NONE}
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> (submission environment) <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?>. <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> SLURM_* <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?>.

              --export=ALL
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?> --export <?><?><?><?>
                        <?><?><?><?> <?><?><?><?>. <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> (<?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?> --get-user-env
                        <?><?> <?><?> <?><?><?><?> <?><?><?><?>).



              --export=NIL
                        <?><?><?><?> <?><?><?><?><?><?><?><?> SLURM_* <?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> SPANK
                        <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?>. <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                        "NIL" <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.

                        <?><?><?><?><?><?> NONE<?> <?><?><?><?><?> NIL
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?> --get-user-env
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>.



              --export=NONE
                        <?><?><?><?> <?><?><?><?><?><?><?><?> SLURM_* <?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> SPANK
                        <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?>. <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                        "NONE" <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?> <?><?><?> <?><?><?><?> Slurm <?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> --get-user-env <?><?><?><?>
                        <?><?><?> <?><?><?>.

                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?>
                        <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>).
                        <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        (<?><?><?><?><?> "NONE") <?><?> <?><?><?><?><?> sbatch
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> SLURM_EXPORT_ENV
                        <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?> "ALL" <?><?><?><?><?> <?><?><?>.



              --export=[ALL,]<environment_variables>
                        <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        SLURM_* <?> <?><?><?><?><?><?><?><?><?> SPANK <?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?> <?><?><?><?>.  <?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
                        (<?><?><?><?><?> "--export=EDITOR") <?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?> (<?><?><?><?><?>
                        "--export=EDITOR=/bin/emacs"). <?><?><?> "ALL"
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?>
                        <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.

                   <?><?><?><?>: --export=EDITOR,ARG1=test
                        <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> EDITOR <?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> SLURM_*<?> <?> ARG1=test
                        <?><?><?><?><?> <?><?><?>.



                   <?><?><?><?>: --export=ALL,EDITOR=/bin/emacs
                        <?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> EDITOR <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?><?>. <?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> EDITOR <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> --export <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?>.

              <?><?><?><?>: <?><?><?><?><?><?><?><?> NONE <?>
              [ALL,]<environment_variables> <?><?><?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> --get-user-env <?><?><?><?><?> <?><?><?>
              <?><?><?>. <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?>
              <?><?> <?><?><?><?><?><?>.



              --export-file={<filename>|<fd>}
                        <?><?><?> <?><?><?><?> <?><?><?> 3 <?> OPEN_MAX <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?> (file
                        descriptor) <?><?><?><?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> (STDIN <?> STDOUT
                        <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>).
                        <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?> <filename> <?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?> <fd> <?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> (job)
                        <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                        NAME=value <?><?><?> <?><?> <?><?> <?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?><?> (null) <?><?>
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?>.



              --extra=<string>
                        <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.

                        <?><?><?> SchedulerParameters=extra_constraints
                        <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        Extra <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?>.



              -B, --extra-node-info=<sockets>[:cores[:threads]]
                        <?><?><?><?><?><?> <?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?> <?><?><?><?> <?>/<?><?>
                        <?><?><?><?><?><?><?> (threads) <?><?> <?><?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?>
                        <?><?> <?><?><?><?><?> (*) <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?>:
                            --sockets-per-node=<sockets>
                            --cores-per-socket=<cores>
                            --threads-per-core=<threads>
                        <?><?><?> <?><?><?><?><?><?> task/affinity
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?> thread<?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> -B <?><?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
                        <?><?><?><?> <?><?> cores<?> <?> <?><?> <?><?><?>
                        <?><?><?> <?><?><?><?> <?><?> sockets <?><?><?><?>
                        <?><?><?><?><?><?> <?><?>.  <?><?><?> SelectType
                        <?><?><?> select/cons_tres <?><?><?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?> CR_Core<?>
                        CR_Core_Memory<?> CR_Socket <?><?> CR_Socket_Memory
                        <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.  <?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> scontrol show job <?><?><?><?><?>
                        'ReqS:C:T=*:*:*' <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?>
                        --hint<?> --threads-per-core <?> --ntasks-per-core
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                        (<?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?>).
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?> (<?><?>
                        <?><?><?><?><?> <?><?> -n <?><?><?><?> <?><?><?><?>
                        <?><?><?><?>) <?><?> <?><?><?><?> <?><?> <?><?><?>
                        <?><?> <?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



              --get-user-env
                        <?><?><?> <?><?><?><?><?> <?><?> sbatch
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                        (login environment) <?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> --uid <?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> "su
                        - <username> -c /usr/bin/env" <?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?>
                        <?><?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
                        <?><?><?><?> sbatch <?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> sbatch <?><?><?>
                        <?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> (held).

                        <?><?><?><?>: <?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?> <?><?><?><?> <?><?> --get-user-env <?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?> (namespaces) <?><?><?><?>
                        PID <?> mount <?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?> PID <?> mount
                        <?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> (<?><?><?><?><?>
                        <?><?><?><?> <?><?>
                        /proc/sys/user/max_[pid|mnt]_namespaces
                        <?><?><?><?><?> 0 <?><?><?><?><?>). <?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> --get-user-env <?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> (orphan process)
                        <?><?><?><?> <?><?><?><?><?>.



              --gid=<group>
                        <?><?><?> sbatch <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> (root) <?><?><?><?>
                        <?><?><?> <?> <?><?> <?><?><?><?><?> --gid
                        <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> group <?><?><?><?><?> (submit)
                        <?><?><?><?><?><?>. group <?><?><?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?><?>: <?><?><?><?><?><?><?> --gid
                        <?><?><?><?><?> <?><?><?> <?><?><?> <?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?>.



              --gpu-bind=[verbose,]<type>
                        <?><?><?><?><?> <?><?>
                        --tres-bind=gres/gpu:[verbose,]<type> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?>
                        --tres-bind <?><?> <?><?><?><?><?><?>.



              --gpu-freq=[<type]=value>[,<type=value>][,verbose]
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        GPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> GPU <?> <?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?><?>.  <?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?> GPU<?><?><?>
                        <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?>.  <?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (power
                        caps) <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?>.  <?><?><?><?> type
                        <?><?><?><?><?><?><?><?> "memory" <?><?><?><?>.
                        <?><?><?> type <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> GPU <?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?>
                        value <?><?><?><?><?><?><?><?> "low"<?> "medium"<?>
                        "high"<?> "highm1" <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
                        (MHz) <?><?><?><?>.  <?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?>. <?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                        <?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?> verbose <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?> GPU <?><?><?> (log)
                        <?><?><?>.  <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?>
                        "--gpu-freq=medium,memory=high" <?> "--gpu-freq=450"
                        <?><?><?>.

                        <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        value:

                        low       <?><?><?><?><?><?> <?><?><?><?><?><?>
                                  <?><?><?><?><?>.



                        medium    <?><?><?><?> <?><?><?><?><?><?> <?><?>
                                  <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                                  <?><?><?><?><?><?> <?><?><?><?><?>
                                  <?><?><?><?><?> <?><?><?>.



                        high      <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                                  <?><?><?><?><?>.



                        highm1    (<?><?><?><?> <?><?><?><?><?> <?><?>)
                                  <?><?><?><?><?><?> <?><?><?><?><?>
                                  <?><?><?><?><?> <?><?>
                                  <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                                  <?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                                  <?><?><?><?><?><?>.



              -G, --gpus=[type:]<number>
                        <?><?><?><?><?> <?><?> GPU<?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?>
                        <?><?><?><?> <?><?><?> GPU <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?>.  <?><?><?><?> <?><?><?><?>
                        "--gpus=volta:3".  <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?> --gpus-per-node<?>
                        --gpus-per-socket <?> --gpus-per-task
                        <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?>
                        GPU <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?> <?><?><?> GPU <?><?>
                        <?><?><?><?> <?><?> <?><?><?> <?><?><?><?>. <?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> GPU
                        <?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> (heterogeneous
                        jobs) <?><?><?><?><?><?><?> <?><?><?><?>.



              --gpus-per-node=[type:]<number>
                        <?><?><?><?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?>
                        <?><?><?> GPU <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?>.  <?><?><?><?> <?><?><?><?>
                        "--gpus-per-node=volta:3".  <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?>: "--gpus-per-node=volta:3,kepler:1".
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
                        --gpus<?> --gpus-per-socket <?> --gpus-per-task
                        <?><?><?><?><?><?> <?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?>
                        --gres=gpu <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                        (<?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?>).



              --gpus-per-socket=[type:]<number>
                        <?><?><?><?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?>
                        <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?>
                        <?><?><?> GPU <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?>.  <?><?><?><?> <?><?><?><?>
                        "--gpus-per-socket=volta:3".  <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?>: "--gpus-per-socket=volta:3,kepler:1".
                        <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?> <?><?><?> (--sockets-per-node)
                        <?><?> <?><?><?><?> <?><?><?>.  <?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?><?><?> --gpus<?>
                        --gpus-per-node <?> --gpus-per-task <?><?><?><?><?><?>
                        <?><?><?><?>.



              --gpus-per-task=[type:]<number>
                        <?><?><?><?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?>
                        <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?>
                        <?><?><?> GPU <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?>.  <?><?><?><?> <?><?><?><?>
                        "--gpus-per-task=volta:1". <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?>: "--gpus-per-task=volta:3,kepler:1".
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
                        --gpus<?> --gpus-per-socket <?> --gpus-per-node
                        <?><?><?><?><?><?> <?><?><?><?>.  <?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> -n<?> --ntasks <?><?> "--gpus=X
                        --gpus-per-task=Y"<?> <?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                        -N<?> --nodes.  <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        --tres-bind=gres/gpu:per_task:<gpus_per_task> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>
                        GPU<?> <?><?><?><?><?>
                        --tres-bind=gres/gpu:per_task:<gpus_per_task_type_sum>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
                        --tres-bind=gres/gpu <?><?><?><?><?><?><?><?>
                        <?><?><?>.



              --gres=<list>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> (generic consumable resources)
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?> <?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?>.  <?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                        "name[[:type]:count]" <?><?><?>.  <?><?><?><?><?> name
                        <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
                        (<?><?><?><?><?> gpu).  <?><?><?><?><?> type <?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?> (<?><?><?><?><?>
                        a100).  <?><?><?><?><?> count <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> 1 <?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> "k" <?><?> "K"
                        (<?><?><?><?><?> <?><?> 1024)<?> "m" <?><?> "M"
                        (<?><?><?><?><?> <?><?> 1024 x 1024)<?> "g" <?><?> "G"
                        (<?><?><?><?><?> <?><?> 1024 x 1024 x 1024)<?> "t"
                        <?><?> "T" (<?><?><?><?><?> <?><?> 1024 x 1024 x 1024
                        x 1024)<?> "p" <?><?> "P" (<?><?><?><?><?> <?><?> 1024
                        x 1024 x 1024 x 1024 x 1024) <?><?><?><?><?>
                        <?><?><?><?>.  <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
                        <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?>.  <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?>.  <?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?> "help"
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?><?> <?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> "--gres=gpu:2"<?> "--gres=gpu:kepler:2"
                        <?> "--gres=help" <?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?>
                        --gpus-per-node <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?> (<?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?>)..IP


              --gres-flags=<type>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
                        (GRES) <?><?> <?><?><?><?> <?><?><?><?><?><?>.


                        multiple-tasks-per-sharing
                               <?><?><?><?><?><?> one-task-per-sharing <?><?>
                               <?><?><?><?> (<?><?><?>) <?><?><?><?><?><?>.
                               <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?>
                               SelectTypeParameters <?><?><?><?><?> <?><?><?>
                               <?><?><?><?>.



                        disable-binding
                               <?><?><?><?><?><?> enforce-binding <?><?>
                               <?><?><?><?> (<?><?><?>) <?><?><?><?><?><?>.
                               <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?>
                               SelectTypeParameters <?><?><?><?><?> <?><?><?>
                               <?><?><?><?>.



                        enforce-binding
                               <?><?><?><?> CPU<?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                               <?><?><?> <?><?> <?><?> GRES
                               <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?> (<?><?><?><?> CPU<?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                               gres.conf <?><?> <?><?><?>
                               <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?>). <?><?><?>
                               <?><?><?><?><?> <?><?><?><?> <?><?><?>
                               <?><?><?><?> <?><?><?><?><?> <?><?>
                               <?><?><?><?> <?><?><?> <?><?><?>.  <?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?> <?><?>
                               <?><?><?><?><?><?><?> <?><?> GPU <?> <?><?> CPU
                               <?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                               <?><?> <?><?> GPU <?><?><?> <?><?> <?><?><?><?>
                               <?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?> GPU<?><?><?>
                               <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                               <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                               <?><?> <?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                               <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?>.
                               <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
                               <?><?><?> <?><?> <?><?><?> <?><?> <?><?>
                               <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
                               <?><?><?><?> <?> <?><?><?><?><?><?>
                               <?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                               <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?>.
                               <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?>
                               SelectTypeParameters <?><?><?><?><?> <?><?><?>.
                               <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                               <?><?><?><?> SelectType=cons_tres <?><?><?>.
                               <?><?><?><?>: <?><?> <?><?><?><?> <?><?><?><?>
                               <?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?>
                               <?><?><?><?><?> gres <?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?>.



                        one-task-per-sharing
                               <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?> gres
                               <?><?><?><?><?><?><?> <?><?> <?><?>
                               <?><?><?><?> <?><?><?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                               <?><?><?>.
                               <?><?><?><?>: <?><?><?> <?><?><?><?>
                               <?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                               gres<?><?><?> <?><?><?><?><?><?><?> <?><?>
                               --tres-per-task <?><?><?><?><?><?><?> <?><?><?>
                               <?><?><?><?><?>.
                               <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?>
                               SelectTypeParameters=ONE_TASK_PER_SHARING_GRES
                               <?><?><?><?><?> <?><?><?>.
                               <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                               <?><?><?><?>
                               SelectTypeParameters=MULTIPLE_SHARING_GRES_PJ
                               <?><?><?>.



              -h, --help
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?>
                        <?><?><?><?><?><?>.



              --hint=<type>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        (application hints) <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> --ntasks-per-core<?>
                        --cores-per-socket<?> --sockets-per-node<?>
                        --threads-per-core <?><?> -B <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?> --hint <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?> <?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?> --hint
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?>.

                        compute_bound
                               <?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                               (compute bound) <?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?>: <?><?><?><?><?><?><?>
                               <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                               <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?>
                               <?><?> <?><?><?><?> <?><?> <?><?><?><?>.



                        memory_bound
                               <?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               (memory bound) <?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?>: <?><?><?><?><?><?><?>
                               <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?>
                               <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?>
                               <?><?><?><?> <?><?> <?><?><?><?>.



                        multithread
                               <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?><?><?> (in-core
                               multi-threading) <?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?><?>.  <?><?><?><?> <?><?>
                               <?><?><?><?><?><?><?> task/affinity
                               <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



                        nomultithread
                               <?><?><?> <?><?><?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?><?><?><?>
                               <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?>
                               <?><?> <?><?><?><?> <?><?> <?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?>.
                               <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                               task/affinity <?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?>.



                        help   <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                               <?><?> <?><?><?><?><?> <?><?><?><?><?><?>



              -H, --hold
                        <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?><?> (held <?><?>
                        <?><?><?><?><?><?> <?><?><?>) <?><?><?><?><?>
                        <?><?><?>.  <?><?> <?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> scontrol <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?> (<?><?><?><?><?> <<scontrol
                        release <job_id>>>).



              --ignore-pbs
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <<#PBS>>
                        <?> <<#BSUB>> <?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> (batch
                        script) <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?>.



              -i, --input=<filename_pattern>
                        <?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <<filename pattern>>
                        <?><?><?><?> <?><?><?>.

                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <</dev/null>> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?>
                        <<slurm-%j.out>> <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?> <?><?> <<%j>> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?> filename
                        pattern <?><?><?> <?><?><?><?> <?><?><?> <?><?><?>.



              -J, --job-name=<jobname>
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?> (job ID) <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> sbatch <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <<sbatch>>
                        <?><?><?><?><?> <?><?><?>.



              --kill-on-invalid-dep=<yes|no>
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                        Slurm <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                        <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> JOB_CANCELLED
                        <?><?><?><?><?> <?><?><?>.  <?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
                        <?><?> <?><?><?> DependencyNeverSatisfied <?><?>
                        <?><?><?><?> <?><?><?><?> (pending) <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                        kill_invalid_depend <?><?> slurm.conf <?><?><?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?>.



              -L, --licenses=<license>[@db][:count][,license[@db][:count]...]
                        <?><?><?><?><?> <?><?><?><?><?><?> (<?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>)
                        <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?>).  <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?>. <?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?> (',' <?><?> <?><?><?><?><?> AND)<?>
                        <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <<--licenses=foo:4,bar>>. <?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?> ('|' <?><?>
                        <?><?><?><?><?> OR)<?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <<--licenses=foo:4|bar>>. <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> AND
                        <?> OR <?><?><?><?> <?><?><?><?><?>.  <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?> <?><?><?>
                        (<?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> slurmdbd
                        <?><?><?><?><?> <?><?><?><?><?><?><?>)
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?>
                        <<--license=nastran@slurmdb:12>>. <?><?><?>
                        LicenseParameters=RemoteFuzzyMatch <?><?> slurm.conf
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> (heterogeneous
                        jobs)<?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <<sbatch -L ansys:2 :
                        script.sh>>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?><?> <?><?>
                        AccountingStorageTres <?><?><?><?><?><?> <?><?><?><?>
                        <?> <?><?> OR <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> ReqTRES <?><?><?><?>
                        tres<?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        AllocTRES <?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> OR <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> Slurm <?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?> <?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> backfill <?><?>
                        <?><?><?><?><?> <?><?> SchedulerParameters=bf_licenses
                        <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?> <?><?><?> <?><?><?><?><?><?>.



              --mail-type=<type>
                        <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?> type
                        <?><?><?><?><?><?><?> <?><?>: NONE<?> BEGIN<?> END<?>
                        FAIL<?> REQUEUE<?> ALL (<?><?><?><?><?> BEGIN<?>
                        END<?> FAIL<?> INVALID_DEPEND<?> REQUEUE <?>
                        STAGE_OUT)<?> INVALID_DEPEND (<?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>)<?>
                        STAGE_OUT (<?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?> <?><?><?><?><?><?><?><?> burst
                        buffer <?><?><?><?> <?><?><?>)<?> TIME_LIMIT<?>
                        TIME_LIMIT_90 (<?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>)<?>
                        TIME_LIMIT_80 (<?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>)<?>
                        TIME_LIMIT_50 (<?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>)
                        <?> ARRAY_TASKS (<?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?>).  <?><?><?><?><?> <?><?><?><?><?>
                        type <?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> NONE <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?>.  <?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> --mail-user
                        <?><?><?><?> <?><?><?><?><?><?><?>.

                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                        ARRAY_TASKS <?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> BEGIN<?> END<?> FAIL <?> REQUEUE
                        <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?> (job array) <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?>.



              --mail-user=<user>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> --mail-type <?><?><?><?><?><?>
                        <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?>. <?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> MailDomain <?><?> slurm.conf
                        <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?>..IP


              --mcs-label=<mcs>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?> MCSPlugin
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> (mcs/group) <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                        (mcs/label). <?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?>. <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> MCS <?><?><?><?><?><?>
                        <?><?><?><?>: <https://slurm.schedmd.com/mcs.html>



              --mem=<size>[units]
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                        (node) <?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> (mebibytes) <?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?> [K|M|G|T] <?><?><?><?>
                        <?><?><?>.  <?><?><?><?><?> <?><?><?><?><?><?><?>
                        DefMemPerNode <?> <?><?><?><?><?><?> <?><?><?><?><?>
                        MaxMemPerNode <?><?><?>. <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        scontrol show config <?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> (SelectType=select/linear).
                        <?><?><?><?><?><?> <?><?> --mem-per-cpu <?>
                        --mem-per-gpu <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?><?><?><?> --mem<?> --mem-per-cpu <?>
                        --mem-per-gpu <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?>. <?><?><?> --mem<?> --mem-per-cpu
                        <?><?> --mem-per-gpu <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
                        <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                        <?> <?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
                        <?><?><?><?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?><?> slurmstepd
                        <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?> 20MiB <?><?> 200MiB <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?>
                        <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                        Slurm <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        ConstrainRAMSpace <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> cgroup.conf(5) <?>
                        OverMemoryKill <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> slurm.conf(5) <?><?><?><?><?><?>
                        <?><?><?><?>.



              --mem-bind=[{quiet|verbose},]<type>
                        <?><?><?><?><?> (Bind) <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> task/affinity <?><?><?><?>
                        <?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> NUMA
                        <?><?> <?><?><?><?><?> <?><?><?><?><?>.  <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?>. <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                        <<<?><?><?><?><?><?>>> <?><?><?><?> <?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?>. <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?> <?><?><?> <?><?> "none" <?><?>
                        "local" <?><?><?><?><?> <?><?><?><?><?><?><?>.

                        <?><?><?><?>: <?><?><?><?> <?><?><?><?><?> Slurm
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> SLURM_MEM_BIND <?><?><?> "verbose"<?>
                        <?><?><?><?> <?><?><?><?> (verbose) <?><?>
                        <?><?><?><?> <?><?><?><?>.

                        <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> --mem-bind
                        <?><?><?><?><?> <?><?><?><?><?><?><?>:

                           SLURM_MEM_BIND_LIST
                           SLURM_MEM_BIND_PREFER
                           SLURM_MEM_BIND_TYPE
                           SLURM_MEM_BIND_VERBOSE

                        <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?> <?><?> <?><?><?><?><?><?><?><?> SLURM_MEM_BIND*
                        <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> (ENVIRONMENT VARIABLES)
                        <?><?><?><?><?><?> <?><?><?><?>.

                        <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?>:

                        help   <?><?><?><?><?> <?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?>



                        local  <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?><?><?>



                        map_mem:<list>
                               <?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?> <?><?><?><?><?><?> (<?><?>
                               rank<?><?>) <?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                               <list> <?><?> <?><?><?><?> <?><?><?> <?><?><?>:
                               <numa_id_for_task_0>,<numa_id_for_task_1>,...
                               <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                               <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?>
                               <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                               <?><?><?><?><?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?><?>
                               (<?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?> <?><?> <?><?>
                               <?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?> <?> <?><?><?> <?><?><?>).
                               <?><?><?><?><?><?><?><?><?> NUMA <?><?>
                               <?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?> (decimal) <?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                               <?><?> '0x' <?><?><?><?> <?><?><?><?> <?><?>
                               <?><?> <?><?><?> <?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                               (hexadecimal) <?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?>.  <?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?> (<?><?>
                               rank<?><?>) <?><?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?> <?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?> <?><?><?><?> <?><?><?><?> <?><?>
                               <?><?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?>.  <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                               <?><?> <?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?>
                               <?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?>.  <?><?> <?><?><?><?><?>
                               <?><?><?><?> "map_mem:0x0f*4,0xf0*4".
                               <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
                               <?><?><?> <?><?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.



                        mask_mem:<list>
                               <?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?> <?><?><?><?><?><?> (<?><?>
                               rank<?><?>) <?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                               <list> <?><?> <?><?><?><?> <?><?><?> <?><?><?>:
                               <numa_mask_for_task_0>,<numa_mask_for_task_1>,...
                               <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                               <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?>
                               <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                               <?><?><?><?><?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?><?>
                               (<?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?> <?><?> <?><?>
                               <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?> <?>
                               <?><?><?> <?><?><?>).  <?><?><?><?><?><?><?><?>
                               NUMA <?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?><?>.
                               <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                               [0-9] <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                               <?><?><?><?> <?><?><?><?><?><?> '0x'
                               <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?> <?><?><?><?>.  <?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?><?> (<?><?>
                               rank<?><?>) <?><?><?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?> <?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                               <?><?> <?><?><?><?> <?><?><?><?> <?><?>
                               <?><?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                               <?><?><?><?><?><?> <?><?>.  <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?> <?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?>
                               <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                               <?><?> <?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?><?> <?>
                               <?><?><?><?><?> <?><?><?><?><?>
                               <?><?><?><?><?>.  <?><?> <?><?><?><?><?>
                               <?><?><?><?> "mask_mem:0*4,1*4".  <?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
                               <?><?><?> <?><?><?><?> <?><?> <?><?><?>
                               <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.



                        no[ne] <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                               <?><?> <?><?><?><?><?> (<?><?><?><?><?><?><?>)



                        p[refer]
                               <?><?><?><?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                               <?><?><?> NUMA <?><?><?><?><?><?><?><?><?>
                               <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                               <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                               <?><?><?><?><?><?><?> NUMA <?><?><?><?><?>.



                        q[uiet]
                               <?><?><?><?><?> <?><?> <?><?><?><?>
                               <?><?><?><?><?><?> <?><?><?> <?><?>
                               <?><?><?><?><?> <?><?><?>
                               (<?><?><?><?><?><?><?>)



                        rank   <?><?><?><?><?> <?><?> <?><?><?><?>
                               <?><?><?><?> <?><?><?> (task rank)
                               (<?><?><?><?><?> <?><?><?><?><?><?><?>)



                        v[erbose]
                               <?><?><?><?><?> <?><?><?><?><?> <?><?>
                               <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                               <?><?> <?><?><?><?><?> <?><?><?>



              --mem-per-cpu=<size>[units]
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?> <?><?><?><?>
                        <?><?><?><?><?><?><?>.  <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?>.  <?><?><?><?><?>
                        <?><?><?><?><?><?><?> DefMemPerCPU <?>
                        <?><?><?><?><?><?> <?><?><?><?><?> MaxMemPerCPU
                        <?><?><?> (<?><?><?><?><?><?><?> <?><?><?> <?><?>
                        <?><?><?><?><?><?>). <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        scontrol show config <?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?> --mem-per-cpu <?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?> MaxMemPerCPU
                        <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
                        <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?> --mem-per-cpu <?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?> MaxMemPerCPU
                        <?><?><?><?><?><?> --cpus-per-task <?><?><?><?><?>
                        <?><?><?><?><?><?> <?> <?><?><?><?><?> --cpus-per-task
                        <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
                        --mem-per-cpu <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> --mem-per-cpu <?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?>.  <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> (SelectType=select/cons_tres).  <?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        (core)<?> <?><?><?><?> (socket) <?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?> <?><?><?><?><?> --mem-per-cpu <?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?> <?><?> --mem <?> --mem-per-gpu
                        <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?><?><?><?> --mem<?> --mem-per-cpu <?>
                        --mem-per-gpu <?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
                        <?><?>.  <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?> --mem-per-cpu <?><?> <?><?><?><?><?>
                        --exclusive <?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?>
                        <?><?><?><?><?><?><?><?> --mem-per-cpu <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?> <?><?> <?><?><?><?> (thread) <?><?>
                        <?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?>
                        <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                        --threads-per-core <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                        (<?><?> <?><?> --hint=nomultithread <?><?> <?><?>
                        <?><?><?><?> --threads-per-core=1 <?><?><?>)<?>
                        <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                        <?> <?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?>. <?><?><?> <?><?><?>
                        <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?>
                        <?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?>.

                        <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?>.

                        <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?> --threads-per-core
                        <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?>. <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?>:

                        $ salloc -n3 --mem-per-cpu=100
                        salloc: Granted job allocation 17199
                        $ sacct -j $SLURM_JOB_ID -X -o jobid%7,reqtres%35,alloctres%35
                          JobID                             ReqTRES                           AllocTRES
                        ------- ----------------------------------- -----------------------------------
                          17199     billing=3,cpu=3,mem=300M,node=1     billing=4,cpu=4,mem=400M,node=1

                        <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> --threads-per-core=1<?> <?><?> <?><?>
                        <?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                        <?><?> <?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?>. <?><?> <?><?><?>
                        <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?> <?><?><?><?> <?><?><?>.

                        $ salloc -n3 --mem-per-cpu=100 --threads-per-core=1
                        salloc: Granted job allocation 17200
                        $ sacct -j $SLURM_JOB_ID -X -o jobid%7,reqtres%35,alloctres%35
                          JobID                             ReqTRES                           AllocTRES
                        ------- ----------------------------------- -----------------------------------
                          17200     billing=3,cpu=3,mem=300M,node=1     billing=6,cpu=6,mem=300M,node=1


              --mem-per-gpu=<size>[units]
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> GPU <?><?><?><?><?><?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (mebibytes) <?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> [K|M|G|T] <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?> DefMemPerGPU <?><?><?> <?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> scontrol show config
                        <?> scontrol show partition <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>.
                        <?><?><?><?><?><?> --mem <?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?><?><?> --mem<?> --mem-per-cpu <?> --mem-per-gpu
                        <?><?><?><?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>) <?><?><?><?><?>.



              --mem-update=<margin>@<delay>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> delay
                        <?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> margin
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?> margin <?><?> <?><?><?><?> <?><?><?> (<?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>). <?><?><?><?><?><?><?> delay <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> delay <?><?><?><?> "minutes" <?>"minutes:seconds" <?>
                        "hours:minutes:seconds" <?>"days-hours" <?>"days-hours:minutes" <?>
                        "days-hours:minutes:seconds" <?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?> <?><?><?>
                        <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> RSS (<?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>) <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> swap
                        <?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?> ConstrainSwapSpace <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> swap <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> --mem <?> --mem-per-cpu
                        <?><?><?> <?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?> --mem-per-cpu<?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?> <?><?><?><?> <?><?> <?><?><?> (per-node)<?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>: <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> (requeue)<?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> SlurmctldParameters=enable_stepmgr <?>
                        JobAcctGatherType=jobacct_gather/cgroup <?><?><?>.



              --mincpus=<n>
                        <?><?><?><?><?> <?><?><?><?><?> cpu<?><?>/<?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>.



              --network=<type>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>.
                        <?><?><?><?><?> type <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.

                        <?><?><?><?><?><?> network <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> HPE Slingshot <?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> VNI <?><?><?> (<?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?> <?><?><?>) <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.

                        tcs=<class1>[:<class2>]...
                              <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>.
                              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> DEDICATED_ACCESS <?>LOW_LATENCY <?>BULK_DATA
                              <?> BEST_EFFORT. <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> TC_DEDICATED_ACCESS <?>
                              TC_LOW_LATENCY <?>TC_BULK_DATA <?> TC_BEST_EFFORT <?><?><?> <?><?><?><?> <?><?><?>.



                        no_vni
                              <?><?><?> VNI<?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> (<?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>).



                        job_vni
                              <?><?><?><?><?> <?><?> VNI <?><?><?> <?><?><?><?> <?><?><?> <?><?><?>.



                        single_node_vni
                              <?><?><?><?><?> <?><?> VNI <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>.



                        adjust_limits
                              <?><?> <?><?><?><?> <?><?><?><?><?><?> slurmd <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> (<?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>)
                              <?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> NIC<?> <?><?><?><?> <?><?><?><?><?><?>
                              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.



                        no_adjust_limits
                              <?><?> <?><?><?><?> <?><?><?><?><?><?> slurmd <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                              <?><?> <?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                              <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                              <?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



                        disable_rdzv_get
                              <?><?><?><?><?><?><?> <?><?><?><?> rendezvous get<?><?> <?><?> NIC<?><?><?> Slingshot<?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                              <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.



                        nic_distribution_count=<val>
                              <?><?><?><?><?> NIC<?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> NIC<?><?> <?><?> <?><?> <?><?><?> <?><?><?>.



                        def_<rsrc>=<val>
                              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?><?><?> <?><?><?> <?><?><?><?>.



                        res_<rsrc>=<val>
                              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>.
                              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?> <?><?><?> <?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



                        max_<rsrc>=<val>
                              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>.



                        depth=<depth>
                              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU.
                              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> CPU<?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>.


                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>:

                        txqs  <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (Transmit command queues). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        tgqs  <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> (Target command queues). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        eqs   <?><?><?><?><?><?> <?><?><?><?><?><?> (Event queues). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        cts   <?><?><?><?><?><?><?><?><?><?> (Counters). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        tles  <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (Trigger list entries). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        ptes  <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> (Portable table entries). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        les   <?><?><?><?><?><?><?><?> <?><?><?><?><?> (List entries). <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



                        acs   <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (Addressing contexts). <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.


                        <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> SwitchType=switch/nvidia_imex <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>:

                        unique-channel-per-segment
                               <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
                               <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> topology/block <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.





              --nice[=adjustment]
                        <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> Slurm. <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>. <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> nice <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?>
                        <?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?><?><?> +/- 2147483645 <?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                        -k, --no-kill[=off]
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> (<?><?> <?><?><?> <?><?><?><?><?>)<?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_NO_KILL <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_NO_KILL <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?> srun <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> --no-kill <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.

                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> "off" <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> SBATCH_NO_KILL <?><?><?><?><?><?><?> <?><?><?>.

                        <?><?><?><?><?><?> <?><?><?><?><?><?><?> Slurm <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              --no-requeue
                        <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> (<?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>).
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> (<?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?><?><?>)<?> <?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> (preemption) <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?> --requeue <?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> JobRequeue <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.

                        <?><?><?><?>: <?><?> <?><?><?><?><?> <?><?> ForceRequeueOnFail <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> PrologFlags <?><?> slurm.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?> <?><?><?><?><?><?><?><?> <?><?><?>.



              -F, --nodefile=<node_file>
                        <?><?><?><?><?> <?><?><?><?> <?><?> --nodelist <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> node file <?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> Slurm <?><?><?><?> <?><?><?><?><?><?> <?><?>.



              -w, --nodelist=<node_name_list>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>.

                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> (<?><?><?> <?><?><?><?><?> <?><?> --segment <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>). <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.

                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> (<?><?><?><?><?> node[1-5,7,...])<?> <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> "/" <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> Slurm <?><?><?><?> <?><?><?><?><?><?> <?><?>.



              -N, --nodes=<minnodes>[-maxnodes]|<size_string>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> minnodes <?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?> maxnodes <?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> size_string <?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> size_string <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> "-" <?><?><?><?> <?><?><?>.
                        <?><?><?><?> <?><?><?><?><?> "--nodes=1-15:4" <?><?><?><?><?> "--nodes=1,5,9,13" <?><?><?>.
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> PENDING <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_JOB_NUM_NODES <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> ENVIRONMENT VARIABLES  <?><?> <?><?><?><?><?><?>. <?><?><?> -N <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> -n<?> -c <?> --gpus.
                        <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> "k" (<?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>) <?><?> "m" (<?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>) <?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (arbitrary distribution) <?><?><?><?><?><?><?> <?><?><?>.



              -n, --ntasks=<number>
                        <?><?><?><?><?> sbatch <?><?><?><?><?> (<?><?><?><?><?><?>) <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> number <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --cpus-per-task <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



              --ntasks-per-core=<ntasks>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> ntasks <?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> --ntasks <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?> --ntasks-per-node <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?> srun <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?><?><?><?><?><?> Slurm <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> (cpus) <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> SelectType=select/linear <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> --threads-per-core <?><?><?><?>.



              --ntasks-per-gpu=<ntasks>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> GPU <?><?><?><?><?> ntasks <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?>: <?>) <?><?><?><?><?> <?><?> <?><?><?> --ntasks <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> GPU <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> --ntasks-per-gpu <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?>) GPU<?><?><?> <?><?><?><?> <?><?><?> <?><?> (<?><?><?><?><?> <?><?> <?><?><?><?> --gpus <?><?> --gres) <?><?><?><?> <?><?><?><?> <?><?><?><?> --ntasks <?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?><?> CPU<?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> --tres-bind=gres/gpu:single:<ntasks> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> --tres-bind=gres/gpu <?><?><?> <?> <?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> (<?><?><?><?> -N<minnodes-maxnodes>) <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?> --gpus-per-task<?> --gpus-per-socket<?> <?><?> --ntasks-per-node <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> SelectType=cons_tres <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> (<?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> Cray).



              --ntasks-per-node=<ntasks>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> ntasks <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --ntasks <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> --ntasks <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> --ntasks-per-node <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> --nodes <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?> --cpus-per-task=ncpus <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> cpus <?><?> <?><?> <?><?><?> <?><?><?><?><?>. <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> MPI/OpenMP <?><?> <?><?> <?><?> <?><?><?><?> <?><?> "task/rank" <?><?> MPI <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> OpenMP <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>/<?><?><?><?><?><?><?><?>/<?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>.



              --ntasks-per-socket=<ntasks>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> ntasks <?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> --ntasks <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?> --ntasks-per-node <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> SelectType=select/linear <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              --oom-kill-step[={0|1}]
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> OOM <?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?> "OOMKillStep" <?><?> TaskPluginParam <?><?> slurm.conf <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> slurm.conf <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> "0" <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?> "1" <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?> (external step) <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> "1" (<?><?><?><?>) <?><?><?>.



              --open-mode={append|truncate}
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> (append) <?><?> <?><?><?><?><?><?><?><?> (truncate) <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> JobFileAppend <?><?><?><?> <?><?><?><?><?><?>.



              -o, --output=<filename_pattern>
                        <?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> "filename pattern" <?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> "slurm-%A_%a.out" <?><?><?><?> "%A" <?><?> <?><?><?><?><?> <?><?><?> <?> "%a" <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> "slurm-%j.out" <?><?><?><?> <?><?> <?><?> <?><?> "%j" <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> filename pattern <?><?> <?><?> <?><?><?> <?><?><?><?><?><?>.
                        -O, --overcommit
                        <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> (Overcommit).

                        <?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (<?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>)<?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> (-c<?> --cpus-per-task) <?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.

                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?> (<?><?><?><?><?> srun <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>) <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?><?> srun <?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?> --overcommit<?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>. <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> MAX_TASKS_PER_NODE <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?>. <?><?><?><?>: <?><?><?><?><?> MAX_TASKS_PER_NODE <?><?> <?><?><?><?> slurm.h <?><?><?><?><?> <?><?><?> <?><?><?> <?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?>.



              -s, --oversubscribe
                        <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> (over-subscribe) <?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?>/<?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> (hyperthreads) <?><?><?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?> OverSubscribe <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --oversubscribe <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?> --exclusive <?><?> <?><?><?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> --exclusive <?><?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>.



              --parsable
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>.
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> --quiet <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              -p, --partition=<partition_names>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>).
                        <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



              --prefer=<list>
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> (features) <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> Slurm <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> prefer <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> --constraint <?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> --prefer <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> --constraint <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> --constraint <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>.


              --priority=<value>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.
                        value <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> "TOP" (<?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>) <?><?><?><?>.
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?> <?><?><?><?><?><?> Slurm <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.



              --profile={all|none|<type>[,<type>...]}
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> acct_gather_profile <?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> HDF5 <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> InfluxDB <?><?><?><?><?> <?><?><?><?><?><?><?>.

                        All       <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. (<?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.)



                        None      <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                                  (<?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.)


                        <?><?><?><?><?><?> <?><?><?><?><?> type <?><?><?><?><?><?><?> <?><?>:

                        Energy <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



                        Task   <?><?><?><?><?><?><?><?> <?><?><?> (<?><?><?><?><?>/<?><?><?><?><?><?> <?><?><?><?><?> <?>...) <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



                        Lustre <?><?><?><?><?><?><?><?> Lustre <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



                        Network
                               <?><?><?><?><?><?><?><?> <?><?><?><?> (InfiniBand) <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



              --propagate[=rlimit[,rlimit...]]
                        <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> (<?><?><?> <?><?> soft) <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> (propagate <?><?><?><?>) <?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>. <?><?><?> <?><?><?>
                        rlimit <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?><?> rlimit <?><?><?> <?><?><?><?> Slurm <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>):

                        ALL       <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> (<?><?><?><?><?><?><?>)



                        NONE      <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>



                        AS        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> (<?><?><?><?><?> <?><?><?><?><?>) <?><?><?><?> <?><?> <?><?><?><?><?><?>.



                        CORE      <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> core (<?><?><?><?><?> <?><?><?><?><?>).



                        CPU       <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> (CPU time).



                        DATA      <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?> (data segment) <?><?> <?><?><?><?><?><?>.



                        FSIZE     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> FSIZE <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?>
                                  <?><?> <?><?><?><?><?><?> <?><?><?><?> slurmd.log <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                                  'File size limit exceeded' <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



                        MEMLOCK   <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.



                        NOFILE    <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.



                        NPROC     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>.



                        RSS       <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> (RSS). <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                                  <?><?><?><?> 2.4.30 <?><?> <?><?><?><?><?><?><?><?> <?><?> BSD <?><?><?><?><?> <?><?><?><?>.



                        STACK     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> (stack size).



              -q, --qos=<qos>
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (QOS) <?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> QOS<?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> QOS<?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?> QOS <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?>/<?><?><?><?><?><?>/<?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> qos<?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> Slurm<?> <?><?><?><?> AccountingStorageEnforce<?> <?><?><?><?><?>
                        "qos" <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>..IP


              -Q, --quiet
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> sbatch <?><?><?><?><?> <?><?><?><?><?> <?><?><?> (Job ID). <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>.



              --reboot  <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> (reboot) <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?><?><?> <?><?><?><?> (root)<?> SlurmUser <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.



              --requeue[=expedite]
                        <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> (batch job) <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?> (requeuing) <?><?><?><?>.
                        <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> (preemption) <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?> --no-requeue <?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> JobRequeue <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.

                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> expedite <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> SlurmctldParameters=enable_expedited_requeue <?><?> slurm.conf <?><?><?><?> <?><?><?> <?><?><?><?>.



              --reservation=<reservation_names>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> (reservation) <?><?><?><?><?><?><?><?><?><?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?> <?><?> scontrol/squeue <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                        <?><?> <?><?><?><?><?><?><?><?> (accounting)<?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>.



              --resources=<resource_names>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>).
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> Mode 1 <?> Mode 2 <?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?> Mode 3 <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?> <?><?><?><?><?> "--resources=flat:2,natural:1".

                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> Slurm <?><?> https://slurm.schedmd.com/hres.html <?><?><?><?><?><?> <?><?><?><?>.



              --resv-ports[=count]
                        <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?> MpiParams=ports=12000-12999 <?><?><?><?> <?><?> slurm.conf <?><?><?><?> <?><?><?> <?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> PMI <?><?><?><?> Cray <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> slurmstepd <?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?> --stepmgr <?><?> <?><?><?><?><?><?>.



              --segment=<segment_size>
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (segments) <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> (--nodes) <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> --nodelist=<node_list>:
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> --nodelist <?><?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> --nodelist <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?> slurmctld <?><?><?><?><?> <?><?>.



              --signal=[{R|B}:]<sig_num>[@sig_time]
                        <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> sig_time <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> sig_num <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> Slurm<?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        sig_num <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> (<?><?><?><?><?> "10" <?><?> "USR1").
                        sig_time <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> 0 <?><?> 65535 <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?> sig_num <?><?><?><?> <?><?><?> sig_time <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?> <?><?><?><?><?> "B:" <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> (batch shell) <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>. <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?> <?><?><?><?><?> "R:" <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> MaxStartDelay <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>. <?><?><?> <?><?><?><?><?> "R:" <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> (preemption) <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> send_user_signal <?><?> PreemptParameter <?><?> <?><?><?><?><?><?>.



              --sockets-per-node=<sockets>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>. <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> task/affinity<?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> -B <?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> -n<?> <?><?><?><?><?> <?><?><?><?><?> (tasks) <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.



              --spread-job
                        <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> topology/tree <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.



              --spread-segments
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>.

                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> topology/block <?><?><?> <?><?><?><?><?> <?><?><?>.



              --stepmgr <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> slurmstepd <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> extern slurmstepd <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>. PrologFlags=contain <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>.



              --switches=<count>[@max-time]
                        <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> (leaf switches) <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?> Slurm <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> (pending) <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.
                        <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> "minutes"<?> "minutes:seconds"<?> "hours:minutes:seconds"<?> "days-hours"<?> "days-hours:minutes" <?> "days-hours:minutes:seconds" <?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> SchedulerParameters <?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> max_switch_wait <?><?><?><?><?> <?><?><?>.
                        <?><?> <?><?> <?><?><?><?> dragonfly <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?><?><?> max-time <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> max_switch_wait <?><?> SchedulerParameters <?><?><?>.



              --test-only
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.



              --thread-spec=<num>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --core-spec <?><?><?><?><?><?><?> <?><?><?>.

                        <?><?><?><?>: <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> --exclusive <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>.



              --threads-per-core=<threads>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?>. <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?>: <?><?><?><?> <<<?><?><?><?><?>>> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> task/affinity<?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> -B <?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> -n<?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.



              -t, --time=<time>
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> PENDING <?><?><?><?> <?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>). <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> SIGTERM <?> <?><?><?> SIGKILL <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> Slurm <?><?><?><?> KillWait <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> OverTimeLimit <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> (<?><?> <?><?><?><?><?> <?><?><?><?>) <?><?><?> <?><?><?><?><?><?><?>.

                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> "minutes"<?> "minutes:seconds"<?> "hours:minutes:seconds"<?> "days-hours"<?> "days-hours:minutes" <?> "days-hours:minutes:seconds" <?><?><?><?><?>..IP


              --time-min=<time>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.
                        <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> --time <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                        <?><?> --time-min <?><?><?><?> <?><?><?><?>.
                        <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> (backfill scheduling) <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <<minutes>><?> <<minutes:seconds>><?>
                        <<hours:minutes:seconds>><?> <<days-hours>><?> <<days-hours:minutes>> <?>
                        <<days-hours:minutes:seconds>> <?><?><?><?><?>.



              --tmp=<size>[units]
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> (node).
                        <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (mebibytes) <?><?><?>.
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> [K|M|G|T] <?><?><?><?> <?><?><?>.



              --tres-bind=<tres>:[verbose,]<type>[+<tres>:
                        [verbose,]<type>...]
                        <?><?><?><?><?><?> <?><?> tres <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (task binding) <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?> <?><?><?> <?><?><?><?> gres <?><?><?><?> tres <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>. gres <?><?> <?><?> <?><?><?><?>
                        "gres/<gres_name>" (<?><?><?><?><?> gres/gpu) <?><?><?><?> <?><?><?><?>.

                        <?><?><?><?>: --tres-bind=gres/gpu:verbose,map:0,1,2,3+gres/nic:closest

                        <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> tres<?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>.

                        <?><?><?><?><?><?><?><?><?> <?><?><?> (type) <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> gres:

                        closest   <?><?> <?><?><?><?><?> (task) <?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> gres(<?><?>) <?><?><?><?> <?><?><?><?><?><?>.
                                  <?><?> <?><?> <?><?><?><?> NUMA<?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?> gres <?><?><?><?> <?><?><?> (<?><?><?><?>
                                  <?><?><?><?> gres<?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> NUMA).



                        map:<list>
                                  <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> gres <?><?><?> <?><?><?><?><?> (<?><?> <?><?><?><?><?><?><?>/ranks) <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                                  <?><?><?><?><?><?><?><?><?><?> <list> <?><?> <?><?><?><?> <gres_id_for_task_0>,<gres_id_for_task_1>,... <?><?><?>. <?><?><?><?><?><?><?><?><?> gres
                                  <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> (decimal) <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?> (<?><?> <?><?><?><?><?><?><?>) <?><?> <?><?><?><?><?>
                                  <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                                  <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                                  <?><?> <?><?> map <?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> "map:0*4,1*4".
                                  <?><?><?> <?><?> <?><?><?><?><?><?> task/cgroup <?><?><?><?><?><?><?> <?><?><?> <?> ConstrainDevices <?><?> cgroup.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                                  <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> (zero-based) <?><?><?><?> <?><?> gres<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                                  <?><?><?><?><?> (<?><?><?><?> <?><?><?><?> <?><?><?><?><?> gres <?><?><?><?><?> <?><?> 0 <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> 3 <?><?><?><?>). <?><?> <?><?><?>
                                  <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                                  <?><?><?><?> gres<?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.



                        mask:<list>
                                  <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> gres <?><?><?> <?><?><?><?><?> (<?><?> <?><?><?><?><?><?><?>) <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?>
                                  <list> <?><?><?><?><?> <?><?> <gres_mask_for_task_0>,<gres_mask_for_task_1>,... <?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                                  <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                                  <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?>). <?><?><?><?><?><?><?><?> gres <?><?><?><?><?>
                                  <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?><?> (hexadecimal) <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> '0x' <?><?><?><?><?><?><?> <?><?>
                                  <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?> mask
                                  <?><?> <?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> "mask:0x0f*4,0xf0*4".
                                  <?><?><?> <?><?> <?><?><?><?><?><?> task/cgroup <?><?><?><?><?><?><?> <?><?><?> <?> ConstrainDevices <?><?> cgroup.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                                  <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> gres<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> (<?><?><?><?> <?><?><?><?>
                                  <?><?><?><?><?> gres <?><?><?><?><?> <?><?> 0 <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> 3 <?><?><?><?>). <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                                  gres <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> gres<?><?><?> <?><?><?> <?><?>
                                  <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.



                        none      <?><?><?><?><?> <?><?> <?><?><?> gres <?><?><?><?> <?><?><?><?><?> (<?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> --tres-per-task <?>
                                  --gpus-per-task <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>).



                        per_task:<gres_per_task>
                                  <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> gres <?><?><?><?><?><?><?><?> <?><?> <gres_per_task> <?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                                  gres<?><?><?><?> <?><?> <?><?><?><?><?><?><?> (affinity) <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (<?><?><?><?><?> closest)<?>
                                  <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> gres <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                                  <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> x <?><?> <?><?> <?><?><?><?><?> gres<?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?><?> <?><?><?>.
                                  gres <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.



                        single:<tasks_per_gres>
                                  <?><?><?><?><?> closest <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> gres <?><?><?><?> <?><?><?><?> <?><?><?><?>
                                  <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?> gres <?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>. gres <?><?><?><?> <?><?><?> <?><?><?><?>
                                  <?><?><?><?><?> <?><?><?><?> <tasks_per_gres> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                                  <tasks_per_gres> <?><?> <?><?><?><?><?> gres <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                                  <tasks_per_gres> <?><?> <?><?><?><?><?> gres <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?><?> <?><?><?>.
                                  <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> gres<?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?> gres<?><?><?> <?><?><?><?><?> <?><?><?><?>
                                  <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?><?><?> <?><?><?><?><?> gres <?><?><?> <?><?><?><?><?><?><?> Cores <?><?> gres.conf <?><?><?><?><?> <?><?><?><?><?><?><?>.


                                  <?><?><?><?>: <?><?><?><?><?> gres <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> per_task <?><?> none <?><?><?><?><?> <?><?><?>.



              --tres-per-task=<list>
                        <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> "trestype[/tresname]=count" <?><?><?>.
                        <?><?><?><?><?> trestype <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> (<?><?><?><?><?> cpu<?> gres<?> license <?> <?><?><?><?>).
                        <?><?><?><?><?> tresname <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> sacctmgr show tres <?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> tres <?><?><?><?><?> gres<?> license <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                        (<?><?><?><?><?> gpu<?> gpu:a100).
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> (license) <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>(<?><?>) <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        AccountingStorageTRES <?><?><?><?> slurm.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?>.
                        <?><?><?><?><?> count <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>:
                        "k" <?><?> "K" (<?><?><?><?> <?><?><?><?>)<?>
                        "m" <?><?> "M" (<?><?><?><?> <?><?><?><?> x <?><?><?><?>)<?>
                        "g" <?><?> "G" (<?><?><?><?> <?><?><?><?> x <?><?><?><?> x <?><?><?><?>)<?>
                        "t" <?><?> "T" (<?><?><?><?> <?><?><?><?> x <?><?><?><?> x <?><?><?><?> x <?><?><?><?>)<?>
                        "p" <?><?> "P" (<?><?><?><?> <?><?><?><?> x <?><?><?><?> x <?><?><?><?> x <?><?><?><?> x <?><?><?><?>).
                        <?><?><?><?><?><?><?>:
                        --tres-per-task=cpu=4
                        --tres-per-task=cpu=8,license/ansys=1
                        --tres-per-task=gres/gpu=1
                        --tres-per-task=gres/gpu:a100=2
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
                        <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?>.
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?>.
                        <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> gres/gpu <?><?> gres/shard <?><?>
                        <?><?><?> <?><?><?><?>
                        --tres-bind=gres/[gpu|shard]:per_task:<tres_per_task>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                        <?><?><?> <?><?><?> <?><?><?> gpu <?><?><?><?>
                        <?><?><?> <?><?><?><?><?>
                        --tres-bind=gres/gpu:per_task:<gpus_per_task_type_sum>
                        <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
                        <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
                        --tres-bind <?><?><?> <?><?><?>.
                        <?><?><?><?>: <?><?><?><?><?> TRES
                        <?><?><?><?><?><?><?> <?><?><?><?> --tres-per-task
                        <?><?><?><?> bb<?> billing<?> energy<?> fs<?> mem<?>
                        node<?> pages <?> vmem <?><?><?><?><?>.



              --uid=<user>
                        <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?>/<?><?>
                        <?><?><?><?><?> <?><?> <?><?><?> <?><?>
                        <?><?><?><?><?> user <?><?> <?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>.
                        <?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?>. <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        root <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?> RootOnly <?><?><?><?><?><?><?>
                        <?><?><?>. <?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?> root<?> <?><?><?><?><?> sbatch <?><?>
                        <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?>
                        uid <?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?>.  user <?><?><?><?> <?><?><?>
                        <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        <?><?><?><?>: <?><?><?><?><?><?><?> --uid
                        <?><?><?><?><?> <?><?><?> <?><?><?> <?> <?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?>.



              --usage   <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?> <?><?><?><?>.



              --use-min-nodes
                        <?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                        <?><?><?>.



              -v, --verbose
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        sbatch. <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                        -v <?><?><?><?><?> <?><?><?><?><?><?> sbatch <?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?> <?><?>.



              -V, --version
                        <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?>
                        <?><?><?><?>.



              -W, --wait
                        <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?>.  <?><?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> sbatch <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?> <?><?>
                        <?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?> <?><?>
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> 1
                        <?><?><?><?><?> <?><?><?><?><?> <?><?>.  <?><?>
                        <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> (job
                        array)<?> <?><?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                        <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?> <?><?><?><?><?> <?><?><?>.
                        --wait-all-nodes=<value> <?><?><?><?> <?><?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?>.  <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?> <?><?><?>.

                        0    <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?> <?><?> <?><?><?><?> <?><?>.
                             <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?>
                             <?><?> <?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                             (<?><?><?><?> <?><?><?> <?><?><?>
                             <?><?><?><?><?>) <?><?><?><?><?> <?><?><?><?>.



                        1    <?><?> <?><?><?><?><?> <?><?> <?><?><?>
                             <?><?><?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                             <?><?><?><?> <?><?> <?><?><?><?> <?><?><?>.



              --wckey=<wckey>
                        <?><?><?><?><?> wckey <?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                        <?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?>
                        slurm.conf <?><?><?><?><?> TrackWCKey=no
                        (<?><?><?><?><?><?><?>) <?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?>.



              --wrap=<command_string>
                        <?><?><?><?><?> sbatch <?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <<sh>>
                        <?><?><?><?> <?><?><?><?><?><?> (wrap
                        <?><?><?><?><?><?>) <?> <?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> slurm
                        <?><?><?><?><?> <?><?><?><?><?><?><?><?>.
                        <?><?><?><?><?><?> <?><?> <?><?> --wrap
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?>
                        <?><?><?><?><?><?><?> <?>
                        <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?>
                        <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?><?> <?><?><?><?> sbatch
                        <?><?><?><?><?><?><?> <?><?><?><?><?><?>.



<?><?><?><?><?> <?><?><?> <?><?><?><?> (FILENAME PATTERN)
       <?><?><?><?><?> sbatch <?><?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?>
       <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
       <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <<%>> <?><?>
       <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> (<?><?><?><?><?> %j).


       \\     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?>.



       %%     <?><?><?><?><?> <<%>>.



       %A     <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> (Job array).



       %a     <?><?><?><?><?> (<?><?><?><?>) <?><?><?><?><?> <?><?><?><?><?>.



       %b     <?><?><?><?><?> (<?><?><?><?>) <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?> (modulo 10).



       %J     <?><?><?><?><?> jobid.stepid <?><?><?> <?><?> <?><?><?>
              <?><?><?><?> (<?><?><?><?><?> <<128.0>>). <?><?><?><?><?> stepid
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <<batch>>
              <?><?> <<extern>>.



       %j     <?><?><?><?><?> jobid <?><?><?> <?><?> <?><?><?> <?><?><?><?>.



       %N     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (short hostname).
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?> IO <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.



       %n     <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?> (<?><?><?><?> <?><?><?><?><?> <<0>> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?><?>). <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?> <?><?><?><?> IO <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.



       %r     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?> (restart) <?><?><?> <?><?> <?><?><?> <?><?><?><?>.



       %S     <?><?><?><?><?> SLUID <?><?><?> <?><?> <?><?><?> <?><?><?><?>.



       %s     <?><?><?><?><?> stepid <?><?><?> <?><?> <?><?><?> <?><?><?><?>.



       %t     <?><?><?><?><?> <?><?><?>/<?><?><?><?><?> (<?><?><?><?> <?><?>
              rank) <?><?><?><?> <?><?> <?><?><?> <?><?><?><?>. <?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> IO <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.



       %u     <?><?><?> <?><?><?><?><?>.



       %x     <?><?><?> <?><?><?>.



       <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?>
       <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> (zero-pad) <?><?>
       <?><?><?> <?><?><?><?> IO <?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
       <?><?><?>. <?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
       <?><?><?><?> (<?><?><?><?> <?><?><?><?><?> %N)<?> <?><?><?> <?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
       <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
       <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
       <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>.  <?><?>
       <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
       <?><?> <?><?><?> <?><?><?><?> <?><?> <?> <?><?><?><?><?> (task)<?>
       <?><?><?><?><?> <?><?><?> (JobID) <?><?><?><?><?> <?><?><?> <?>
       <?><?><?><?><?> <?><?><?> (step id) <?><?><?><?><?> <?> <?><?><?><?><?>
       <?><?><?> <?><?><?>:


       job%J.out      job128.0.out



       job%4j.out     job0128.out



       job%2j-%2t.out job128-00.out, job128-01.out, ...

       <?><?><?><?><?> sbatch <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?> <?><?><?> <?><?><?> (RPC) <?><?> slurmctld <?><?><?><?><?>
       <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
       <?><?><?> sbatch <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?> Slurm <?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?> slurmctld
       <?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
       <?><?><?><?><?><?> <?><?><?><?> slurmctld <?> <?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> (denial of
       service) <?><?><?>.

       <?><?><?><?><?> sbatch <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?> Slurm <?><?> <?><?>
       <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
       <?><?><?> <?><?> slurmctld <?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.
       <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> sbatch
       <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
       <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.


<?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (INPUT ENVIRONMENT
       VARIABLES)
       <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> sbatch
       <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
       <?><?><?><?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
       <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
       <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
       <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?> <?><?><?><?><?> (<?><?><?><?> <?><?><?><?> <?><?> NULL)<?>
       <?><?><?><?> 'yes' <?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
       <?><?><?><?> <?><?><?>.  <?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>.
       <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
       <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
       <?><?><?> <?><?><?><?><?><?><?>.
       <?><?><?><?>: <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
       batch <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?> (<?><?> <?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?>)<?> <?> <?><?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?>.


       SBATCH_ACCOUNT        <?><?><?><?><?> -A, --account



       SBATCH_ACCTG_FREQ     <?><?><?><?><?> --acctg-freq



       SBATCH_ARRAY_INX      <?><?><?><?><?> -a, --array



       SBATCH_BATCH          <?><?><?><?><?> --batch



       SBATCH_CLUSTERS <?><?> SLURM_CLUSTERS
                             <?><?><?><?><?> --clusters



       SBATCH_CONSTRAINT     <?><?><?><?><?> -C, --constraint



       SBATCH_CONTAINER      <?><?><?><?><?> --container.



       SBATCH_CONTAINER_ID   <?><?><?><?><?> --container-id.



       SBATCH_CONTAINER_TYPE <?><?><?><?><?> --container-type.



       SBATCH_CORE_SPEC      <?><?><?><?><?> --core-spec



       SBATCH_CPUS_PER_GPU   <?><?><?><?><?> --cpus-per-gpu



       SBATCH_DEBUG          <?><?><?><?><?> -v, --verbose <?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
                             <?><?><?> <?> <?><?><?><?><?> -vv <?><?><?><?><?>
                             <?><?><?><?> <?> <?><?><?><?>.



       SBATCH_DELAY_BOOT     <?><?><?><?><?> --delay-boot



       SBATCH_DISTRIBUTION   <?><?><?><?><?> -m, --distribution



       SBATCH_ERROR          <?><?><?><?><?> -e, --error



       SBATCH_EXCLUSIVE      <?><?><?><?><?> --exclusive



       SBATCH_EXPORT         <?><?><?><?><?> --export



       SBATCH_GET_USER_ENV   <?><?><?><?><?> --get-user-env



       SBATCH_GPU_BIND       <?><?><?><?><?> --gpu-bind



       SBATCH_GPU_FREQ       <?><?><?><?><?> --gpu-freq



       SBATCH_GPUS           <?><?><?><?><?> -G, --gpus



       SBATCH_GPUS_PER_NODE  <?><?><?><?><?> --gpus-per-node



       SBATCH_GPUS_PER_TASK  <?><?><?><?><?> --gpus-per-task



       SBATCH_GRES           <?><?><?><?><?> --gres



       SBATCH_GRES_FLAGS     <?><?><?><?><?> --gres-flags



       SBATCH_HINT <?><?> SLURM_HINT
                             <?><?><?><?><?> --hint



       SBATCH_IGNORE_PBS     <?><?><?><?><?> --ignore-pbs



       SBATCH_INPUT          <?><?><?><?><?> -i, --input



       SBATCH_JOB_NAME       <?><?><?><?><?> -J, --job-name



       SBATCH_MEM_BIND       <?><?><?><?><?> --mem-bind



       SBATCH_MEM_PER_CPU    <?><?><?><?><?> --mem-per-cpu



       SBATCH_MEM_PER_GPU    <?><?><?><?><?> --mem-per-gpu



       SBATCH_MEM_PER_NODE   <?><?><?><?><?> --mem



       SBATCH_NETWORK        <?><?><?><?><?> --network



       SBATCH_NO_KILL        <?><?><?><?><?> -k, --no-kill.IP


       SBATCH_NO_REQUEUE     <?><?><?><?><?><?> --no-requeue



       SBATCH_OPEN_MODE      <?><?><?><?><?><?> --open-mode



       SBATCH_OUTPUT         <?><?><?><?><?><?> -o, --output



       SBATCH_OVERCOMMIT     <?><?><?><?><?><?> -O, --overcommit



       SBATCH_PARTITION      <?><?><?><?><?><?> -p, --partition



       SBATCH_POWER          <?><?><?><?><?><?> --power



       SBATCH_PROFILE        <?><?><?><?><?><?> --profile



       SBATCH_QOS            <?><?><?><?><?><?> --qos



       SBATCH_REQ_SWITCH     <?><?><?><?><?><?> <?><?> <?><?>
                             <?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?>)
                             <?><?><?><?><?> <?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                             <?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?>
                             <?><?><?><?> <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                             <?><?><?><?><?> <?><?><?><?><?> <?><?>
                             <?><?><?><?> <?><?><?><?><?><?>. <?><?>
                             --switches <?><?><?><?><?><?> <?><?><?><?>.



       SBATCH_REQUEUE        <?><?><?><?><?><?> --requeue



       SBATCH_RESERVATION    <?><?><?><?><?><?> --reservation



       SBATCH_SEGMENT_SIZE   <?><?><?><?><?><?> --segment



       SBATCH_SIGNAL         <?><?><?><?><?><?> --signal



       SBATCH_SPREAD_JOB     <?><?><?><?><?><?> --spread-job



       SBATCH_THREAD_SPEC    <?><?><?><?><?><?> --thread-spec



       SBATCH_THREADS_PER_CORE
                             <?><?><?><?><?><?> --threads-per-core



       SBATCH_TIMELIMIT      <?><?><?><?><?><?> -t, --time



       SBATCH_TRES_BIND      <?><?><?><?><?><?> --tres-bind



       SBATCH_TRES_PER_TASK  <?><?><?><?><?><?> --tres-per-task



       SBATCH_USE_MIN_NODES  <?><?><?><?><?><?> --use-min-nodes



       SBATCH_WAIT           <?><?><?><?><?><?> -W<?> --wait



       SBATCH_WAIT_ALL_NODES <?><?><?><?><?><?> --wait-all-nodes. <?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                             <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                             <?><?><?> 0 <?><?> 1 <?><?><?><?><?> <?><?><?>.



       SBATCH_WAIT4SWITCH    <?><?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?>. <?><?> --switches
                             <?><?><?><?><?><?> <?><?><?><?>.



       SBATCH_WCKEY          <?><?><?><?><?><?> --wckey



       SLURM_CONF            <?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?><?> Slurm.



       SLURM_DEBUG_FLAGS     <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?><?> sbatch <?><?>
                             <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?> DebugFlags <?><?>
                             <?><?><?><?><?> <?><?><?><?><?><?><?>
                             slurm.conf(5) <?><?><?><?><?><?> <?><?><?><?>.
                             <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                             slurm.conf <?><?><?><?><?><?> <?><?><?><?>.



       SLURM_EXIT_ERROR      <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?> <?><?><?><?> Slurm
                             (<?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?>) <?><?> <?><?><?><?>
                             <?><?><?><?><?><?>.
                             <?><?><?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                             <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                             <?><?><?> <?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?>
                             <?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?> Slurm <?><?><?><?><?><?><?>
                             <?><?><?><?>.



       SLURM_STEP_KILLED_MSG_NODE_ID=ID
                             <?><?> <?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?><?> <?><?><?> (node)
                             <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?>
                             <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_UMASK           <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                             Slurm <?><?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?>/<?><?><?><?> <?><?><?><?> <?><?>
                             umask <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.

       <?><?><?><?><?><?><?><?><?><?><?> Slurm <?><?><?><?><?><?><?><?>
       <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> (batch script) <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?>.


       SBATCH_MEM_BIND
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              --mem-bind <?><?><?><?><?> <?><?><?><?><?><?>.



       SBATCH_MEM_BIND_LIST
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> (memory binding) <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SBATCH_MEM_BIND_PREFER
              <?><?><?> <?><?><?><?><?> --mem-bind <?><?><?><?>
              <?><?><?><?><?> prefer <?><?><?><?><?> <?><?><?><?><?> <?><?>
              "prefer" <?><?><?><?><?> <?><?><?><?><?><?>.



       SBATCH_MEM_BIND_TYPE
              <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> --mem-bind <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              "none"<?><?> "rank"<?><?> "map_mem:"<?><?> "mask_mem:" <?>
              "local".



       SBATCH_MEM_BIND_VERBOSE
              <?><?><?> <?><?><?><?><?> --mem-bind <?><?><?><?>
              <?><?><?><?><?> verbose <?><?><?><?><?> <?><?><?><?><?> <?><?>
              "verbose" <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?> <?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> "quiet"
              <?><?><?><?><?> <?><?><?><?><?><?><?>.



       SLURM_*_HET_GROUP_#
              <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              (heterogeneous job allocation)<?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



       SLURM_ARRAY_JOB_ID
              <?><?><?><?><?> <?><?><?> <?><?><?><?> (master job ID)
              <?><?><?><?><?> <?><?><?> (job array).



       SLURM_ARRAY_TASK_COUNT
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?>.



       SLURM_ARRAY_TASK_ID
              <?><?><?><?><?> <?><?><?><?><?> (<?><?><?><?><?>)
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_ARRAY_TASK_MAX
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              (<?><?><?><?><?>) <?><?><?><?><?> <?><?><?>.



       SLURM_ARRAY_TASK_MIN
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              (<?><?><?><?><?>) <?><?><?><?><?> <?><?><?>.



       SLURM_ARRAY_TASK_STEP
              <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?>.



       SLURM_CLUSTER_NAME
              <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
              <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>.



       SLURM_CPUS_ON_NODE
              <?><?><?><?><?> CPU<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?>.  <?><?><?><?>: <?><?><?><?><?><?>
              select/linear <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?> CPU<?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?>.  <?><?><?><?>
              <?><?><?><?><?><?> cons/tres<?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> CPU<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
              <?><?><?> <?><?><?> <?><?><?> <?><?><?>.



       SLURM_CPUS_PER_GPU
              <?><?><?><?><?> CPU<?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> GPU <?><?><?><?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> --cpus-per-gpu
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_CPUS_PER_TASK
              <?><?><?><?><?> CPU<?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> --cpus-per-task <?><?> <?><?><?><?><?>
              --tres-per-task=cpu=# <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_CONTAINER
              <?><?><?><?> OCI (OCI Bundle) <?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> --container <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_CONTAINER_ID
              <?><?><?><?><?> OCI <?><?><?><?> <?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              --container-id <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_CONTAINER_TYPE
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> --container-type <?><?><?><?>
              <?><?><?> <?><?><?><?>.



       SLURM_DIST_PLANESIZE
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (plane
              distribution size). <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?> -m, --distribution
              <?><?><?><?><?><?> <?><?><?><?>.



       SLURM_DISTRIBUTION
              <?><?><?><?><?> -m, --distribution.



       SLURM_EXPORT_ENV
              <?><?><?><?><?> --export.



       SLURM_GPU_BIND
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> GPU.  <?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              --gpu-bind <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPU_FREQ
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> GPU.  <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> --gpu-freq <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPUS
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> -G, --gpus
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPUS_ON_NODE
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?><?>.



       SLURM_GPUS_PER_NODE
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> --gpus-per-node
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPUS_PER_SOCKET
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> --gpus-per-socket <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_GTIDS
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              (global task IDs) <?><?> <?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?>. <?><?><?><?> <?><?> <?><?><?> <?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?>.  <?><?><?> Slurm <?><?>
              <?><?><?><?><?><?><?><?> <?><?> pmi <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> pmi <?><?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?> (<?><?><?><?> <?><?><?> <?><?><?> <?><?> Abaqus <?>
              Ansys <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> - <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?>).



       SLURM_HET_SIZE
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_JOB_ACCOUNT
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?> (account)
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_CPUS_PER_NODE
              <?><?><?><?><?> CPU<?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?>
              CPU_count[(xnumber_of_nodes)][,CPU_count [(xnumber_of_nodes)]
              ...].  <?><?><?><?> <?><?><?><?>:
              SLURM_JOB_CPUS_PER_NODE='72(x2),36' <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?>
              <?><?><?> (<?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              SLURM_JOB_NODELIST <?><?><?><?><?> <?><?><?> <?><?><?>)
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
              <?><?><?><?>: <?><?><?><?><?><?> select/linear <?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              CPU<?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?>
              select/cons_tres <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              CPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?>.



       SLURM_JOB_DEPENDENCY
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              --dependency <?><?><?><?><?> <?><?><?><?><?><?>..IP


       SLURM_JOB_END_TIME
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (UNIX
              timestamp) <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_GPUS
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> GPU<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?><?><?> GPU <?><?><?><?> <?><?> <?><?><?>
              cgroup <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?> task/cgroup <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?>. <?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> (batch) <?> <?><?><?><?><?><?>
              (interactive) <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_JOB_ID
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_LICENSES
              <?><?><?> <?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_JOB_NAME
              <?><?><?> <?><?><?>.



       SLURM_JOB_NODELIST
              <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>.



       SLURM_JOB_NUM_NODES
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_PARTITION
              <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>.



       SLURM_JOB_QOS
              <?><?><?><?><?> <?><?><?><?><?> (QOS) <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_RESERVATION
              <?><?><?><?> <?><?><?><?><?><?><?> (Advanced reservation)
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?>.



       SLURM_JOB_SEGMENT_SIZE
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (segments) <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              --segment <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_JOB_START_TIME
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (UNIX
              timestamp) <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.



       SLURM_JOBID
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. SLURM_JOB_ID
              <?><?> <?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_LOCALID
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?> (Node local task ID) <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?>.



       SLURM_MEM_PER_CPU
              <?><?><?><?><?> --mem-per-cpu



       SLURM_MEM_PER_GPU
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> GPU <?><?><?><?><?><?><?><?><?><?><?>.  <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --mem-per-gpu <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_MEM_PER_NODE
              <?><?><?><?><?> --mem



       SLURM_NETWORK
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --network <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_NNODES
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?>. SLURM_JOB_NUM_NODES <?><?>
              <?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?>.



       SLURM_NODEID
              <?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?>.



       SLURM_NODELIST
              <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>.
              SLURM_JOB_NODELIST <?><?> <?><?><?><?><?><?>. <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_NPROCS
              <?><?><?><?><?> SLURM_NTASKS. <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_NTASKS
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --ntasks <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?> --ntasks-per-*
              <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> srun
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> (batch)
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              --ntasks <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> srun
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_NTASKS_PER_CORE
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --ntasks-per-core <?><?><?><?> <?><?><?>
              <?><?><?><?>.




       SLURM_NTASKS_PER_GPU
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> GPU.  <?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              --ntasks-per-gpu <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_NTASKS_PER_NODE
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --ntasks-per-node <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_NTASKS_PER_SOCKET
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --ntasks-per-socket <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_OOMKILLSTEP
              <?><?><?><?><?> --oom-kill-step



       SLURM_OVERCOMMIT
              <?><?> <?><?><?><?><?> <?><?> --overcommit <?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?> 1 <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_PRIO_PROCESS
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> (<?><?><?><?><?>
              nice) <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_PROCID
              <?><?><?><?><?> MPI (<?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?>) <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?>.



       SLURM_PROFILE
              <?><?><?><?><?> --profile



       SLURM_RESTART_COUNT
              <?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> (requeued)<?>
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_SHARDS_ON_NODE
              <?><?><?><?><?> GPU Shard<?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?>.



       SLURM_SUBMIT_DIR
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> sbatch <?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_SUBMIT_HOST
              <?><?><?> <?><?><?><?><?><?> (hostname)
              <?><?><?><?><?><?><?><?><?> <?><?> sbatch <?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?>..IP


       SLURM_TASK_PID
              <?><?><?><?><?> <?><?><?><?><?><?> (PID) <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_TASKS_PER_NODE
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?>
              <?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?>
              SLURM_JOB_NODELIST <?><?><?><?><?>.  <?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?> <<(x#)>> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?> <<#>> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?>. <?><?><?><?> <?><?><?><?><?>
              <<SLURM_TASKS_PER_NODE=2(x3),1>> <?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?>
              <?><?><?> <?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?>.



       SLURM_THREADS_PER_CORE
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> --threads-per-core
              <?><?> SBATCH_THREADS_PER_CORE <?><?><?><?> <?><?><?>
              <?><?><?><?><?>. <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>
              --threads-per-core <?><?> SBATCH_THREADS_PER_CORE
              <?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              srun <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_TOPOLOGY_ADDR
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> topology/tree
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?> (leaf) <?> <?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?>. <?><?> <?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_TOPOLOGY_ADDR_PATTERN
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> topology/tree
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?> SLURM_TOPOLOGY_ADDR
              <?><?><?><?><?> <?><?><?>. <?><?> <?><?><?> <?><?>
              <?><?><?><?><?> <<switch>> <?><?> <<node>> <?><?><?><?>
              <?><?><?><?><?><?>. <?><?> <?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_TRES_PER_TASK
              <?><?><?> <?><?><?><?><?> --tres-per-task <?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?> --cpus-per-task <?><?>
              --gpus-per-task <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              SLURM_TRES_PER_TASK <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?> --tres-per-task
              <?><?><?><?> <?><?><?> <?><?><?>.



       SLURMD_NODENAME
              <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>.



<?><?><?><?><?><?><?> (EXAMPLES)
       <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
       <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?>
       <?><?> <?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?>
       <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?>.

              $ cat myscript
              #!/bin/sh
              #SBATCH --time=1
              srun hostname |sort

              $ sbatch -N4 myscript
              salloc: Granted job allocation 65537

              $ cat slurm-65537.out
              host1
              host2
              host3
              host4


       <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
       <?><?> sbatch <?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?>:

              $ sbatch -N4 <<EOF
              > #!/bin/sh
              > srun hostname |sort
              > EOF
              sbatch: Submitted batch job 65541

              $ cat slurm-65541.out
              host1
              host2
              host3
              host4


       <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
       <?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>
       <?><?> <?><?><?><?><?> <?><?><?><?>:

              $ sbatch -w node[2-3] : -w node4 : -w node[5-7] work.bash
              Submitted batch job 34987


<?><?><?><?><?><?><?><?> <?> <?><?><?><?><?> (COPYING)
       Copyright (C) 2006-2007 The Regents of the University of California.
       <?><?><?><?><?> <?><?><?> <?><?> Lawrence Livermore National Laboratory
       (<?>.<?>. DISCLAIMER).
       Copyright (C) 2008-2010 Lawrence Livermore National Security.
       Copyright (C) 2010-2022 SchedMD LLC.

       <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> Slurm<?> <?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
       <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
       <https://slurm.schedmd.com> <?><?> <?><?><?><?><?><?>.

       <?><?><?><?><?><?><?><?><?> Slurm <?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
       <?><?> <?><?><?> <?><?><?><?><?> <<GNU General Public License>>
       <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?> <?><?><?><?> <?><?>
       (<?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>) <?><?> <?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?><?>.

       <?><?><?><?><?><?><?><?><?> Slurm <?><?> <?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>
       <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?> <?><?><?> <?><?><?>. <?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?> GNU General Public License <?><?>
       <?><?><?><?><?><?>..SH "<?><?><?><?><?><?> <?><?><?><?><?><?> (SEE
       ALSO)"

       sinfo(1), sattach(1), salloc(1), squeue(1), scancel(1), scontrol(1),
       slurm.conf(5), sched_setaffinity (2), numa (3)

Slurm 26.05                     Slurm Commands                       sbatch(1)