salloc(1)                       Slurm Commands                       salloc(1)



<?><?><?> (NAME)
       salloc - <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
       <?><?><?><?><?> (<?><?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?>)<?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?>
       <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?>.


<?><?><?><?><?> <?><?><?><?><?> (SYNOPSIS)
       salloc [OPTIONS(0)...] [ : [OPTIONS(N)...]] [command(0) [args(0)...]]

       <?><?><?><?><?>(<?><?>) <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?>
       <?><?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> (heterogeneous
       jobs)<?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>:
       https://slurm.schedmd.com/heterogeneous_jobs.html


<?><?><?><?><?><?><?> (DESCRIPTION)
       <?><?><?><?><?> salloc <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?> Slurm <?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> (<?><?><?><?><?><?>)
       <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?>
       (<?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
       <?><?> <?><?><?><?> <?><?> <?><?><?>). <?><?><?><?><?><?> <?><?> salloc
       <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
       <?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?><?><?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
       salloc <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?><?>.

       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?>. <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> xterm<?> <?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
       srun<?> <?> <?><?><?> srun (<?><?><?> <<<?><?><?><?><?><?><?>>> <?><?>
       <?><?><?><?><?><?>). <?><?><?> <?><?><?> <?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> salloc
       <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?><?>.

       <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?>
       <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>:
       https://slurm.schedmd.com/cpu_management.html

       <?><?><?><?>: <?><?><?><?><?><?><?> salloc <?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?>
       <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?> <?><?><?> <?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?> (foreground) <?><?><?><?><?> <?><?><?>
       <?><?><?>. <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> salloc <?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>: "salloc
       -n16 a.out </dev/null &"


<?><?><?><?><?> <?><?><?><?><?><?><?> (RETURN VALUE)
       <?><?><?> salloc <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> 1 <?><?>
       <?><?><?><?><?><?><?><?><?><?><?> <?> <?><?><?><?><?> <?><?> <?><?>
       stderr <?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?> <?><?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
       <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> HUP<?> INT<?> KILL <?><?>
       QUIT <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> 0 <?><?>
       <?><?><?><?><?><?><?><?><?><?><?>.


<?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> (COMMAND PATH RESOLUTION)
       <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>:

       1. <?><?><?> <?><?><?><?><?> <?><?> "." <?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?>: <?><?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?><?><?> / <?><?><?><?><?>
       2. <?><?><?> <?><?><?><?><?> <?><?> "/" <?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?>.
       3. <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> PATH <?><?><?><?>
       <?><?><?><?><?> <?><?><?><?>. path_resolution(7) <?><?>
       <?><?><?><?><?><?>.
       4. <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?><?>.

       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?> --chdir <?><?><?><?><?> <?><?><?> <?><?> <?><?>
       <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?>.


<?><?><?><?><?><?><?><?> (OPTIONS)
       -A, --account=<account>
              <?><?><?><?><?><?> <?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              (account).  <?><?><?><?><?> account <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> scontrol
              <?><?><?><?><?> <?><?><?>.



       --acctg-freq=<datatype>=<interval>[,<datatype>=<interval>...]
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?> <?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?>.  <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> JobAcctGatherFrequency <?><?> <?><?><?><?>
              slurm.conf <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?>
              <datatype>=<interval> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?> jobacct_gather <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> acct_gather_profile <?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?>
              <datatype>=<interval> <?><?> <?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> datatype
              <?><?><?><?><?><?><?> <?><?>:

              task        <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                          jobacct_gather <?> <?><?><?><?>
                          <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?> acct_gather_profile.
                          <?><?><?><?>: <?><?><?> <?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                          <?><?><?><?><?> <?><?><?><?><?><?><?>
                          <?><?><?><?><?><?>. <?><?> <?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                          <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                          <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                          <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                          <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
                          <?><?><?><?><?><?> <?><?><?> <?><?> <?><?>
                          <?><?><?><?> slurm.conf <?><?><?><?><?><?><?><?>
                          <?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?><?>
                          <?><?> <?><?><?><?><?><?><?><?>
                          <?><?><?><?><?><?><?> <?><?><?>.



              energy      <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?> acct_gather_energy.



              network     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          infiniband <?><?> <?><?><?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?> acct_gather_interconnect.



              filesystem  <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                          <?><?><?><?><?><?><?><?><?><?> <?><?>
                          <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                          acct_gather_filesystem.



              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> 0 <?><?><?>.  <?><?><?><?><?> 0
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?> 0 <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> (<?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> Slurm <?><?> <?><?><?> <?><?><?><?><?><?>).
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?> <?><?><?>)
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?>,<?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?>.


       --bb=<spec>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> (burst
              buffer). <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?><?> (login node) <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> salloc <?><?>
              <?><?> <?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?>.  <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> --bb <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> Slurm <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> burst buffer
              <?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> burst buffer
              <?><?> Slurm <?><?> <?><?><?><?><?><?>:
              https://slurm.schedmd.com/burst_buffer.html



       --bbf=<file_name>
              <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> (burst buffer).  <?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?><?> <?><?><?><?><?>
              --bb <?><?> <?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?>
              (login node) <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              salloc <?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> burst buffer
              <?><?> Slurm <?><?> <?><?><?><?><?><?>:
              https://slurm.schedmd.com/burst_buffer.html



       --begin=<time>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>.

              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> HH:MM:SS
              <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> (<?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?>).  (<?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.)
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> midnight
              (<?><?><?><?><?><?><?>)<?> noon (<?><?><?>)<?> elevenses
              (<?><?><?><?> <?><?> <?><?><?>)<?> fika (<?><?><?><?> <?>
              <?><?><?><?><?><?><?><?>) <?><?> teatime (<?><?><?><?> <?>
              <?><?><?><?><?><?><?><?>) <?><?> <?><?><?><?> <?><?><?><?> <?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> AM <?><?> PM <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?>.  <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?> MMDDYY <?><?> MM/DD/YY <?><?> YYYY-MM-DD <?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?> <?> <?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              YYYY-MM-DD[THH:MM[:SS]] <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> now + count
              time-units <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
              <?><?> time-units <?><?><?><?><?><?><?><?> seconds
              (<?><?><?><?><?><?><?>)<?> minutes<?> hours<?> days<?> <?><?>
              weeks <?><?><?><?>.  <?><?><?><?><?><?><?><?><?><?><?><?> today
              (<?><?><?><?><?>) <?> tomorrow (<?><?><?><?>) <?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> scontrol <?><?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?>:
                 --begin=16:00
                 --begin=now+1hour
                 --begin=now+60           (seconds by default)
                 --begin=2010-01-20T12:34:00


              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?>/<?><?><?><?>:
               - <?><?><?><?><?> <?><?><?> 'seconds' <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> HH:MM:SS <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> (poll time) <?><?><?><?><?><?><?><?> Slurm
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> Slurm <?><?><?><?><?>
              <?><?><?><?> (<?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              sched/builtin <?><?><?><?><?><?><?>).
               - <?><?><?> <?><?><?> <?><?><?><?><?> (HH:MM:SS) <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (00:00:00)
              <?><?><?>.
               - <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?> (<?><?><?><?><?> MM/DD)<?> <?><?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              MM/DD <?> HH:MM:SS <?><?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.  --bell <?><?><?><?><?> salloc <?><?>
              <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              (<?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> stdout <?><?>
              tty <?><?><?><?>). <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              salloc <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?>
              <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              (<?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> stdout <?><?>
              tty <?><?><?><?>). <?><?><?><?><?><?> <?><?><?><?><?><?>
              --no-bell <?><?> <?><?><?><?><?><?>.



              -D, --chdir=<path>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> path
                     <?><?><?> <?><?> <?><?><?><?> <?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?>.



              --cluster-constraint=<list>
                     <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     (sibling job) <?><?> <?><?> <?><?><?><?><?> <?><?><?>.
                     Slurm <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?>.



              -M, --clusters=<string>
                     <?><?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?>. <?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?><?>.  <?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?>. <?><?><?><?><?> 'all' <?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.  <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?> slurmdbd
                     <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?> FederationParameters=fed_display
                     <?><?><?><?> <?><?><?>.



              --comment=<string>
                     <?><?> <?><?><?><?><?><?><?> (comment)
                     <?><?><?><?><?><?>.



              --consolidate-segments
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?><?><?> (segments)
                     <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>.

                     NOTE: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?> topology/block <?><?><?>
                     <?><?><?><?><?> <?><?><?>.



              -C, --constraint=<list>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> features
                     (<?><?><?><?><?><?><?><?><?><?>) <?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> Slurm
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?>.  <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?> constraint <?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?> features <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?>. <?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <<<?><?><?>>>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> --prefer <?><?>
                     <?><?><?><?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> AND<?> OR<?> matching OR<?>
                     <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?>
                     <?><?><?><?> <?><?><?> (<?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?>).

                     NOTE: <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> (Changeable features)<?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?> NodeFeatures
                     <?><?><?><?><?> <?><?><?><?><?><?><?>.

                     <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     --constraint <?><?><?><?><?><?><?> <?><?>:


                     Single Name
                            <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?> <?><?>.  <?><?><?><?>
                            <?><?><?><?><?><?> --constraint="intel"



                     Node Count
                            <?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                            <?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?>
                            <?><?> <?><?><?> <?><?><?><?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                            <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                            <?><?><?><?> <?><?><?><?><?><?> --nodes=16
                            --constraint="graphics*4" <?><?><?><?>
                            <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?>
                            <?><?><?> <?><?><?><?> <?><?><?><?> <?>
                            <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                            <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?> "graphics" <?><?><?><?><?>.
                            <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?> <?> <?><?>
                            <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?>
                            (<?><?><?><?><?><?><?><?>) <?><?><?><?>
                            <?><?><?><?>.

                            NOTE: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?> NodeFeatures <?><?> <?><?><?>
                            helpers <?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?>.  <?><?> <?><?><?>
                            <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                            <?><?><?><?><?><?> (Heterogeneous jobs)
                            <?><?><?><?><?><?><?> <?><?><?>.



                     AND    <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?> <?><?>.  <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?> (&) <?><?><?><?>
                            <?><?><?><?><?> AND <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?>.  <?><?><?><?>
                            <?><?><?><?><?><?> --constraint="intel&gpu"



                     OR     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?> <?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?> <?><?>.  <?><?> <?><?>
                            <?><?><?><?><?> (|) <?><?><?><?> <?><?><?><?><?>
                            OR <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                            <?><?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                            <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?>
                            <?><?><?><?><?><?> salloc -N2
                            --constraint="intel|amd" <?><?><?><?><?><?><?><?>
                            <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
                            <?><?><?> <?><?> <?><?> <?><?> <?><?> <?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?> intel <?>
                            <?><?><?> <?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?> amd <?><?><?><?>.  <?><?>
                            <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
                            <?><?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?><?> OR
                            <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?> Matching OR <?><?> <?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                            <?><?> <?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?>
                            salloc -N2 --constraint="foo|bar&baz" <?><?>
                            <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                            <?><?> <?><?><?> foo<?> <?><?> bar <?> baz <?><?>
                            <?><?><?><?><?> (<?><?> <?><?> <?><?> <?><?>
                            <?><?><?> <?><?><?><?><?><?><?><?><?> foo<?> bar
                            <?> baz <?><?> <?><?><?><?><?> <?><?><?><?><?>).
                            <?><?><?><?><?><?> NodeFeatures <?><?> <?><?><?>
                            helpers <?><?><?><?><?><?> <?><?><?><?><?><?>
                            <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
                            <?><?> <?><?> <?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?>
                            <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                            <?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?>
                            RebootProgram (<?><?><?><?> <?><?><?><?> <?><?>
                            slurm.conf(5)) <?> <?><?><?><?><?><?><?>
                            <?><?><?><?> (<?><?><?><?> <?><?><?><?> <?><?>
                            helpers.conf(5)) <?><?><?><?><?>
                            <?><?><?><?><?><?><?>. <?><?> <?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?><?> helpers <?><?>
                            <?><?><?><?><?> <?><?><?><?> <?><?><?> "foo"
                            <?><?> "bar,baz" <?><?> <?><?> <?><?> <?><?><?>
                            <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?><?><?>.



                     Matching OR
                            <?><?><?> <?><?><?><?> <?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?> <?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                            <?><?><?><?><?> OR <?><?><?><?><?><?><?>
                            <?><?><?><?> <?> <?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?>
                            --constraint="[rack1|rack2|rack3|rack4]"
                            <?><?><?><?> <?><?><?> <?><?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                            <?><?> (rack) <?><?><?><?> <?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                            <?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?>.



                     Multiple Counts
                            <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                            <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> AND
                            <?> <?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
                            <?><?><?><?> <?><?><?><?><?><?>
                            --constraint="[rack1*2&rack2*4]" <?><?><?><?>
                            <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
                            <?><?> <?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?> "rack1" <?> <?><?><?><?> <?><?><?>
                            <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                            <?><?> <?><?><?><?><?> "rack2" <?><?><?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?>.

                            NOTE: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?> NodeFeatures <?><?> <?><?><?>
                            helpers <?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?>.

                            NOTE: <?><?><?><?><?><?> Multiple Counts
                            <?><?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?> <?><?><?>.



                     Brackets
                            <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?> <?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?>
                            <?><?><?><?><?><?>
                            --constraint="[(rack1|rack2)*1&(rack3)*2]" <?><?>
                            <?><?><?> <?><?> <?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?><?> "rack1" <?><?> "rack2"
                            <?> <?><?> <?><?><?> <?><?> <?><?><?><?><?>
                            "rack3" <?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?>.  <?><?><?> <?><?><?>
                            <?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?> <?> <?><?>
                            <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?>.

                            NOTE: <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                            Multiple Counts <?> Matching OR <?><?><?><?>
                            <?><?><?><?><?><?><?>.  <?><?><?><?><?><?><?><?>
                            AND <?><?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?> (<?><?><?><?><?>
                            "[quad*2&hemi*1]"). Slurm <?><?><?><?> <?><?>
                            <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>
                            <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                            <?><?><?><?> <?><?><?><?> <?><?>
                            <?><?><?><?><?><?>.

                            NOTE: <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?> NodeFeatures <?><?> <?><?><?>
                            helpers <?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?>.  Matching OR <?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?> <?> <?><?>
                            <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                            <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?>.



                     Parentheses
                            <?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                            <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?>
                            <?><?><?><?><?><?>
                            --constraint="[(knl&snc4&flat)*4&haswell*1]"
                            <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?>
                            <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                            <?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?>
                            <?><?><?><?><?><?><?><?><?> "knl"<?> "snc4" <?>
                            "flat" <?><?> <?><?><?><?><?> <?><?> <?><?><?>
                            <?><?> <?><?><?><?><?> "haswell" <?><?><?><?>
                            <?><?><?><?> <?><?><?><?><?>.  <?><?><?><?><?><?>
                            <?><?> <?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?>
                            <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?>
                            <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                            <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?>
                            <?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?><?><?>.  <?><?><?><?>
                            <?><?><?><?><?><?> --constraint="foo&bar|baz"
                            <?><?><?><?><?><?><?><?> <?><?> foo <?> bar<?>
                            <?><?> baz <?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?>.  --constraint="foo|bar&baz"
                            <?><?><?><?><?><?><?><?> <?><?> foo <?> baz<?>
                            <?><?> bar <?> baz <?><?> <?><?><?><?><?><?><?>
                            <?><?><?><?><?><?> (<?><?><?><?> <?><?><?><?><?>
                            <?><?><?><?><?> <?><?> <?><?><?><?><?> baz <?><?>
                            <?><?><?> <?><?><?> AND <?><?><?> <?><?><?>).
                            --constraint="foo&(bar|baz)"
                            <?><?><?><?><?><?><?><?> <?><?> foo <?>
                            <?><?><?><?><?><?> <?><?><?> <?><?> bar <?><?> baz
                            <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                            NOTE: <?><?><?><?><?> OR <?><?><?><?>
                            <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
                            <?><?><?><?><?><?> NodeFeatures <?><?> <?><?><?>
                            KNL <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                            <?><?><?><?> <?><?><?><?><?><?> NodeFeatures
                            <?><?> <?><?><?> helpers <?><?><?><?><?><?><?><?>
                            <?><?><?><?><?><?>.



              --container=<path_to_container>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> OCI (bundle).



              --container-id=<container_id>
                     <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     OCI..IP


              --container-type=<container_type>
                     <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.



              --contiguous
                     <?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.

                     <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> topology/flat <?><?><?>
                     <?><?><?><?><?> <?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?> <?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.



              -S, --core-spec=<num>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> (Specialized Cores) <?><?> <?><?>
                     <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>.
                     <?><?><?> AllowSpecResourcesUsage <?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> CoreSpecCount <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?>.
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?>.  <?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> (--exclusive) <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> (<?> <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?>) <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?>.  <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> --thread-spec <?><?><?><?><?><?><?>
                     <?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                     --exclusive <?><?> <?><?><?><?> <?><?><?><?><?><?>.



              --cores-per-socket=<cores>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>. <?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> task/affinity<?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> -B <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> (task<?><?>) <?><?> (<?><?>
                     <?><?><?><?><?> <?><?> -n <?><?><?><?> <?><?><?><?>
                     <?><?><?><?>) <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> (thread) <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.



              --cpu-freq=<p1>[-p2][:p3]

                     <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> srun <?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?> <?><?> <?><?><?>(<?><?><?>)
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>.

                     p1 <?><?><?><?><?><?><?><?> [#### | low | medium | high |
                     highm1] <?><?><?><?> <?><?> scaling_speed <?><?><?><?><?>
                     <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?> scaling_governor
                     <?><?><?><?><?> <?><?> <?><?><?> UserSpace <?><?><?><?>
                     <?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.

                     p1 <?><?><?><?><?><?><?><?> [Conservative | OnDemand |
                     Performance | PowerSave] <?><?><?><?> <?><?>
                     scaling_governor <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?>. <?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> CpuFreqGovernors <?><?> slurm.conf
                     <?><?><?><?><?> <?><?><?> <?><?><?>.

                     <?><?><?><?><?><?> <?><?> p2 <?><?><?><?> <?><?><?>
                     <?><?><?><?><?> p1 <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?> p2
                     <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?>. <?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> p3 <?><?> CpuFreqDef
                     <?><?><?><?><?><?><?><?><?> UserSpace <?><?><?><?>
                     <?><?><?><?> <?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.

                     p2 <?><?><?><?><?><?><?><?> [#### | medium | high |
                     highm1] <?><?><?><?>. <?><?><?><?><?> p2 <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> p1 <?><?><?><?> <?> <?><?>
                     <?><?><?><?><?><?> UserSpace <?><?><?><?><?><?><?><?>
                     <?><?><?>.

                     p3 <?><?><?><?><?><?><?><?> [Conservative | OnDemand |
                     Performance | PowerSave | SchedUtil | UserSpace]
                     <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.

                     <?><?><?> p3 <?><?><?><?><?> <?><?> UserSpace
                     <?><?><?><?><?> <?><?><?><?><?><?> scaling_speed<?>
                     scaling_max_freq <?> scaling_min_freq <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     p1 <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.

                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?>. <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?>.

                     <?><?> <?><?><?><?> <?><?><?> <?><?><?><?> p3<?>
                     <?><?><?><?><?><?><?> CpuFreqDef <?><?> slurm.conf
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?>
                     CpuFreqDef <?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> CpuFreqDef <?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?>.

                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>:

                     ####          <?><?><?><?><?> <?><?><?><?><?>
                                   <?><?><?><?><?><?><?><?>



                     Low           <?><?><?><?><?><?><?><?><?><?>
                                   <?><?><?><?><?> <?><?><?><?><?><?><?>



                     High          <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                                   <?><?><?><?><?><?><?>



                     HighM1        (<?><?><?><?><?><?> <?><?><?><?><?> <?><?>)
                                   <?><?><?><?><?> <?><?><?><?><?>
                                   <?><?><?><?><?> <?><?><?><?><?><?><?>
                                   <?><?> <?><?><?><?><?><?>
                                   <?><?><?><?><?><?>



                     Medium        <?><?><?><?> <?><?><?><?><?><?>
                                   <?><?><?><?><?><?> <?><?>
                                   <?><?><?><?><?><?> <?><?><?><?><?>
                                   <?><?><?><?><?><?><?> <?><?><?><?><?>
                                   <?><?><?>



                     Conservative  <?><?><?><?> <?><?><?><?><?><?> <?><?>
                                   <?><?><?><?><?><?>
                                   <?><?><?><?><?><?><?><?><?> Conservative
                                   <?><?><?><?><?><?><?> <?><?><?>



                     OnDemand      <?><?><?><?> <?><?><?><?><?><?> <?><?>
                                   <?><?><?><?><?><?>
                                   <?><?><?><?><?><?><?><?><?> OnDemand
                                   <?><?><?><?><?><?><?> <?><?><?>
                                   (<?><?><?><?><?> <?><?><?><?><?><?><?>)



                     Performance   <?><?><?><?> <?><?><?><?><?><?> <?><?>
                                   <?><?><?><?><?><?>
                                   <?><?><?><?><?><?><?><?><?> Performance
                                   <?><?><?><?><?><?><?> <?><?><?>



                     PowerSave     <?><?><?><?> <?><?><?><?><?><?> <?><?>
                                   <?><?><?><?><?><?>
                                   <?><?><?><?><?><?><?><?><?> PowerSave
                                   <?><?><?><?><?><?><?> <?><?><?>



                     UserSpace     <?><?><?><?> <?><?><?><?><?><?> <?><?>
                                   <?><?><?><?><?><?>
                                   <?><?><?><?><?><?><?><?><?> UserSpace
                                   <?><?><?><?><?><?><?> <?><?><?>


                     <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     --cpu-freq <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?>.
                             SLURM_CPU_FREQ_REQ

                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     'srun' <?><?><?><?><?> <?><?><?> <?><?><?><?>.
                     <?><?><?><?><?><?> --cpu-freq <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>. <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?>.  <?><?><?><?> <?><?><?> <?><?><?><?><?>
                     SLURM_CPU_FREQ_REQ <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> (ENVIRONMENT
                     VARIABLES) <?><?><?><?><?><?> <?><?><?><?>.

                     <?><?><?><?>: <?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?>.  <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     (confined) <?><?><?> <?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     (<?><?><?><?> TaskPlugin <?><?> <?><?><?> task/affinity
                     <?><?><?><?> <?><?><?><?><?><?> <?><?> TaskPlugin <?><?>
                     <?><?><?> task/cgroup <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> "ConstrainCores=yes" <?><?> cgroup.conf
                     <?><?><?><?> <?><?><?><?> <?><?><?><?>)<?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.

                     <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> --cpu-freq <?><?> <?><?><?><?><?>
                     <?><?> linuxproc <?><?><?><?><?><?><?><?> ProctrackType
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> Accounting
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?>.
                     <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?>.



       --cpus-per-gpu=<ncpus>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> GPU <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              ncpus <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> --exact <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?>.  <?><?> <?><?><?><?><?><?>
              --cpus-per-task <?><?><?><?><?><?> <?><?><?><?>.



       -c, --cpus-per-task=<ncpus>
              <?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> ncpus
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> (task) <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> Slurm
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.

              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?>
              <?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?><?> <?><?> <?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>. <?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?><?><?><?>
              (quad-processors) <?><?><?><?> <?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?> <?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?>. <?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              --cpus-per-task=3<?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?> <?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?> <?><?> <?><?> <?> <?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>..TP
              --deadline=<OPT> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> (start >
              (deadline - time[-min]))<?> <?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?> DefaultTime <?><?> MaxTime <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              (--time[-min]) <?><?> <?><?><?><?> <?><?><?>.

              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?>:
              HH:MM[:SS] [AM|PM]
              MMDD[YY] <?><?> MM/DD[/YY] <?><?> MM.DD[.YY]
              MM/DD[/YY]-HH:MM[:SS]
              YYYY-MM-DD[THH:MM[:SS]]
              now[+count[seconds(default)|minutes|hours|days|weeks]]
              midnight<?> elevenses (<?><?><?><?> <?><?> <?><?><?>)<?> noon<?>
              fika (<?><?><?><?> <?> <?><?><?><?><?><?><?><?>)<?> teatime
              (<?><?><?><?> <?> <?><?><?><?><?><?><?><?>)<?> <?><?> tomorrow

              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> (<?><?><?><?>
              <?><?><?><?><?> 'tomorrow18:00'). <?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



       --delay-boot=<minutes>
              <?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> (feature specification) <?><?><?>
              <?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> (reboot)
              <?><?><?><?><?>.  <?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?>.  <?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?>.  <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> delay_boot <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> SchedulerParameters <?><?> <?><?><?><?>
              slurm.conf <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
              <?><?><?> (<?><?><?><?> <?><?><?><?><?>).



       -d, --dependency=<dependency_list>
              <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>. <?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?>.  <dependency_list> <?><?>
              <?><?><?> <type:job_id[:job_id][,type:job_id[:job_id]]> <?><?>
              <type:job_id[:job_id][?type:job_id[:job_id]]> <?><?><?>.  <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <<,>><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?>.  <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <<?>><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?>.  <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?> <?><?><?><?>:
              -d afterok:20:21,afterany:23
              <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?> <?><?>
              <?><?><?><?><?><?> <?><?> <?> <?><?> <?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?>. <?><?> <?><?><?> <?><?><?>:
              -d afterok:20:21?afterany:23
              <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?>
              <?><?><?><?><?> (afterok:20 <?><?> afterok:21 <?><?>
              afterany:23) <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              scontrol <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.


              after:job_id[[+time][:jobid[+time]...]]
                     <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?>
                     <?><?><?><?> <?><?><?> <?><?><?><?> 'time' <?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?> 'time'
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.



              afterany:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?>.  <?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.



              afterburstbuffer:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> (burst buffer stage out)
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?>.



              aftercorr:job_id[:jobid...]
                     <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?><?><?><?> (<?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?>)
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                     afterok <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              afternotok:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?> (<?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?>)
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
                     <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> MinJobAge
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
                     <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>.
                     <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.



              afterok:job_id[:jobid...]
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (<?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
                     <?><?><?>) <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                     <?><?><?>.  <?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?> MinJobAge <?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?>.  <?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.



              singleton
                     <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?>.  <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?>
                     <?><?><?> <?> <?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.  <?><?>
                     <?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> singleton <?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?> DependencyParameters=disable_remote_singleton
                     <?><?> slurm.conf <?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?>.



       -m,
       --distribution={*|block|cyclic|arbitrary|plane=<size>}[:{*|block|cyclic|fcyclic}[:{*|block|cyclic|fcyclic}]][,{Pack|NoPack}]

              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> srun
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?>.

              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              (<?><?><?><?><?><?><?> <?><?><?> <?><?> task affinity)
              <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
              <?><?><?> (<?><?><?> <?><?> <?><?><?><?><?><?> <<:>>)
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?>
              <?><?><?><?><?> <?><?><?> (<?><?> <?><?> <?><?><?><?><?><?>
              <<:>>) <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?> (<?><?> <?><?>
              <?><?><?><?><?> <<:>>) <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?><?><?> <?><?><?> <?> <?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> task affinity
              <?><?><?><?><?> <?><?><?><?><?><?><?>.  <?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> task/cgroup <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?>. <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> *
              <?><?><?><?> <?><?><?><?><?><?>.

              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?>
              select/cons_tres<?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?>
              <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?>
              https://slurm.schedmd.com/mc_support.html <?><?><?><?><?><?>
              <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>):


              *      <?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> (block).
                     <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> (topology
                     plugin) <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
                     <?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> CR_NO_DIST_TOPO_BLOCK <?><?> <?><?>
                     SelectTypeParameters <?><?><?><?><?><?>.



              block  <?><?><?> <?><?><?><?><?> block <?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?>. <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
                     <?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
                     <?><?> <?><?><?> <?><?><?> <?><?><?> <?> <?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?>. <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.  cyclic <?><?><?>
                     <?><?><?><?><?> cyclic <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?> (<?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?>
                     round-robin) <?><?><?><?><?> <?><?><?><?>. <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> cpu
                     <?><?><?><?><?>. <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> (cyclic) <?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?> <?><?><?><?> <?><?><?>
                     <?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?> <?><?><?><?> <?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>.
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?> SelectType <?><?><?><?><?> <?><?>
                     select/cons_tres <?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?> CPU<?><?>
                     <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?>. <?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                     (round-robin) <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> CPU<?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?>.  <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> cyclic <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



              plane  <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <size> <?><?><?><?><?>
                     <?><?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?> SLURM_DIST_PLANESIZE
                     <?><?><?><?><?> <?><?><?> <?><?><?><?>. <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> cyclic <?><?><?><?> <?><?><?>
                     taskid<?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?>
                     plane <?><?><?><?><?> <?><?><?><?><?>. <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> (<?><?><?><?>
                     <?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?>)<?>
                     <?><?><?><?><?> <?><?><?><?><?><?>:
                     https://slurm.schedmd.com/mc_support.html <?>
                     https://slurm.schedmd.com/dist_plane.html



              arbitrary
                     <?><?><?> <?><?><?><?><?> arbitrary
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     SLURM_HOSTFILE <?><?><?><?> <?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?>. <?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> block <?><?><?><?><?> <?><?><?>.
                     <?><?><?><?><?><?> hostfile <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?> <?><?>
                     <?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?>
                     <?><?> <?><?><?> <?><?><?> <?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     (-n<?> --ntasks=<number>)<?> <?><?><?><?><?><?><?>
                     <?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?>.
                     <?><?><?><?>: <?><?><?><?><?><?> <?><?><?><?><?>
                     arbitrary <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> (generic) <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?> <?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     topology<?> CR_LLN<?> CR_Pack_Nodes <?><?>
                     pack_serial_at_end <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?>. <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?> (job step) <?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> srun <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?>.



              <?><?><?> <?><?><?> <?><?><?><?><?> (<?><?><?><?><?> CPU<?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?>):


              *      <?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     CPU<?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     (cyclic).



              block  <?><?><?> <?><?><?><?><?> block<?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> CPU<?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              cyclic <?><?><?> <?><?><?><?><?> cyclic<?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> (CPU)
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                     (round-robin) <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?>.
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
                     <?><?> CPU <?><?><?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                     CPU<?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?>.
                     <?><?><?><?>: <?><?> <?><?><?><?><?><?><?><?> <?><?>
                     hyper-threading <?><?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?>. <?><?> <?><?><?><?>
                     <?><?><?><?> --ntasks-per-core=1 <?><?><?><?><?><?><?>
                     <?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.



              fcyclic
                     <?><?><?> <?><?><?><?><?> fcyclic<?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> (CPU)
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                     (round-robin) <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
                     <?><?> CPU <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
                     <?><?> CPU<?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     (cyclic) <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?>.



              <?><?><?> <?><?><?> <?><?><?><?><?> (<?><?><?><?><?> CPU<?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?>):


              *      <?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                     CPU<?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     (<?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?> <?><?><?><?><?>).



              block  <?><?><?> <?><?><?><?><?> block<?> <?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> CPU<?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              cyclic <?><?><?> <?><?><?><?><?> cyclic<?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> (CPU)
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                     (round-robin) <?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?>.



              fcyclic
                     <?><?><?> <?><?><?><?><?> fcyclic<?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> (CPU)
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
                     <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
                     (round-robin) <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?>.



              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>:


              Pack   <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>.
                     <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> <?><?><?> "block" <?><?><?><?><?><?><?>
                     <?><?><?>.



              NoPack <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?>
                     <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> SelectTypeParameters
                     CR_Pack_Nodes <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?>.



       -x, --exclude=<node_name_list>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?>.



       --exclusive[={user|mcs|topo}]
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> (<?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> "=topo"<?> <?><?><?>
              <?><?><?><?><?><?><?><?>) <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> (<?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              "=user" <?><?> <?><?><?><?><?><?> "=mcs"<?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?>) <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?> user/mcs/topo <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> (<?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>)<?>
              <?><?><?><?> CPU<?><?> <?> GRES<?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> (gang
              scheduling) <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?><?> <?><?> --mem=0
              <?><?><?><?><?><?><?> <?><?><?><?>.  <?><?><?><?><?>
              <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?>/<?><?><?><?><?><?><?> (shared/exclusive)
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?> <?><?><?><?><?><?> OverSubscribe
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?>.  <?><?><?><?>: <?><?>
              <?><?><?><?> <?><?> GRES <?><?><?><?><?><?><?> (MPS) <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> GRES
              <?><?><?><?><?><?><?><?><?><?><?> (GPU) <?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
              GRES<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?> GRES
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> --oversubscribe
              <?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?><?><?><?>)
              <?><?><?>.



       --extra=<string>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?>.

              <?><?><?> SchedulerParameters=extra_constraints <?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?> Extra <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.



       -B, --extra-node-info=<sockets>[:cores[:threads]]
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?>/<?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?>.  <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?> (*) <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?>. <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?>:.nf
                  --sockets-per-node=<sockets>
                  --cores-per-socket=<cores>
                  --threads-per-core=<threads>
              <?><?><?> <?><?><?><?><?><?> task/affinity <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> (tasks) <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> -B
              <?><?><?><?><?> thread <?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?> thread<?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?> core <?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
              cores<?> <?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?>
              sockets <?><?><?><?> <?><?><?><?><?><?> <?><?>.  <?><?><?>
              SelectType <?><?><?> select/cons_tres <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?><?> CR_Core<?>
              CR_Core_Memory<?> CR_Socket<?> <?><?> CR_Socket_Memory
              <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?>.  <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> scontrol show job <?><?><?><?><?>
              'ReqS:C:T=*:*:*' <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> --hint<?>
              --threads-per-core <?> --ntasks-per-core
              <?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?><?><?><?>)
              <?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?> (<?><?><?> -n <?><?><?><?> <?><?><?><?> <?><?><?><?>)
              <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?> (thread) <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?>.



       --gpu-bind=[verbose,]<type>
              <?><?><?><?><?> <?><?> --tres-bind=gres/gpu:[verbose,]<type>
              <?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?> <?><?><?><?><?><?><?><?>
              --tres-bind <?><?> <?><?><?><?><?><?>.



       --gpu-freq=[<type]=value>[,<type=value>][,verbose]
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> GPU<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?>.  <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> GPU <?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?>.  <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              GPU<?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?>.  <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (power caps)
              <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?>.  <?><?><?><?> type <?><?><?><?><?><?><?><?>
              "memory" <?><?><?><?>.  <?><?><?> type <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> GPU <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?> value
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>
              "low"<?> "medium"<?> "high"<?> "highm1" <?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?> (MHz) <?><?><?><?>.  <?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?><?><?><?> verbose <?><?><?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?> GPU <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?>
              "--gpu-freq=medium,memory=high" <?> "--gpu-freq=450" <?><?><?>.

              <?><?><?><?><?><?> <?><?><?><?><?><?> (value)
              <?><?><?><?><?><?><?><?><?><?><?><?>:

              low       <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?>.



              medium    <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



              high      <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?>.



              highm1    (<?><?> <?><?><?> <?><?><?><?> <?><?>
                        <?><?><?><?><?><?> / high minus one)
                        <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                        <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                        <?><?><?><?><?><?>.



       -G, --gpus=[type:]<number>
              <?><?><?><?><?> <?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> GPU <?><?><?><?>
              <?><?><?><?>.  <?><?><?><?> <?><?><?><?><?> "--gpus=volta:3".
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              --gpus-per-node<?> --gpus-per-socket <?> --gpus-per-task <?><?>
              <?><?><?><?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> GPU <?><?> <?><?>
              <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?> GPU
              <?><?> <?><?> <?><?><?> <?><?><?><?>. <?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> GPU <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
              (heterogeneous jobs) <?><?><?><?><?><?><?> <?><?><?><?>.



       --gpus-per-node=[type:]<number>
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> GPU <?><?><?><?>
              <?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
              "--gpus-per-node=volta:3".  <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>:
              "--gpus-per-node=volta:3,kepler:1".  <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> --gpus<?> --gpus-per-socket <?>
              --gpus-per-task <?><?> <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> --gres=gpu
              <?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?><?><?><?>)
              <?><?><?>.



       --gpus-per-socket=[type:]<number>
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> GPU <?><?><?><?>
              <?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
              "--gpus-per-socket=volta:3".  <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>:
              "--gpus-per-socket=volta:3,kepler:1".  <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?> (--sockets-per-node).
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> --gpus<?>
              --gpus-per-node <?> --gpus-per-task <?><?> <?><?><?><?><?><?>.



       --gpus-per-task=[type:]<number>
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> (task) <?><?>
              <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?>.  <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> GPU <?><?><?><?>
              <?><?><?><?>.  <?><?><?><?> <?><?><?><?><?>
              "--gpus-per-task=volta:1". <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>:
              "--gpus-per-task=volta:3,kepler:1". <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> --gpus<?> --gpus-per-socket <?>
              --gpus-per-node <?><?> <?><?><?><?><?><?>.  <?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> -N<?> --nodes<?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> -n<?> --ntasks
              <?><?> "--gpus=X --gpus-per-task=Y".  <?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
              --tres-bind=gres/gpu:per_task:<gpus_per_task><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?> gpu<?> <?><?><?><?><?>
              --tres-bind=gres/gpu:per_task:<gpus_per_task_type_sum> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?> --tres-bind=gres/gpu <?><?> <?><?>
              <?><?><?> (override) <?><?><?>.



       --gres=<list>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> (generic consumable resources)
              <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              "name[[:type]:count]" <?><?><?>.  <?><?><?><?><?> name <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?>
              (<?><?><?><?><?> gpu).  <?><?><?><?><?> type <?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?> (<?><?><?><?><?> a100).  <?><?><?><?><?>
              count <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?>
              <?><?><?><?><?><?><?>.  <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> "k" <?><?> "K" (<?><?><?><?>
              <?><?><?><?>)<?> "m" <?><?> "M" (<?><?><?><?> <?><?><?><?> x
              <?><?><?><?>)<?> "g" <?><?> "G" (<?><?><?><?> <?><?><?><?> x
              <?><?><?><?> x <?><?><?><?>)<?> "t" <?><?> "T" (<?><?><?><?>
              <?><?><?><?> x <?><?><?><?> x <?><?><?><?> x <?><?><?><?>)<?>
              "p" <?><?> "P" (<?><?><?><?> <?><?><?><?> x <?><?><?><?> x
              <?><?><?><?> x <?><?><?><?> x <?><?><?><?>) <?><?><?><?><?>
              <?><?><?><?>.  <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?>.  <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.  <?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?> "help" <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>
              <?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              "--gres=gpu:2"<?> "--gres=gpu:kepler:2" <?> "--gres=help"
              <?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> --gpus-per-node
              <?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?><?><?><?><?>)
              <?><?><?>.



       --gres-flags=<type>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> (generic
              resource task binding) <?><?> <?><?><?><?> <?><?><?><?><?><?>.


              multiple-tasks-per-sharing
                     <?><?><?><?><?><?> one-task-per-sharing <?><?> <?><?><?>
                     (<?><?><?><?><?><?>) <?><?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                     SelectTypeParameters <?><?><?><?><?> <?><?><?>
                     <?><?><?><?>.



              disable-binding
                     <?><?><?><?><?><?> enforce-binding <?><?> <?><?><?>
                     (<?><?><?><?><?><?>) <?><?><?><?><?><?>. <?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                     SelectTypeParameters <?><?><?><?><?> <?><?><?>
                     <?><?><?><?>.



              enforce-binding
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?>
                     (CPUs) <?><?> <?><?> <?><?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?> GRES
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> (<?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     gres.conf <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?>). <?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?> <?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?> GPU <?> <?><?> CPU
                     <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
                     <?><?> GPU<?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?> <?><?> GPU <?><?><?> <?><?>
                     <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?>.  <?><?><?><?><?><?><?> <?><?><?> <?><?><?>
                     <?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
                     <?><?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?> SelectTypeParameters
                     <?><?><?><?><?> <?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     SelectType=cons_tres <?><?><?>.
                     <?><?><?><?>: <?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?> gres <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>..IP


              one-task-per-sharing
                     <?><?><?><?><?> <?><?><?><?><?> gres
                     <?><?><?><?><?><?><?> <?><?> <?><?> gres
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
                     gres <?><?><?><?><?><?><?> <?><?> --tres-per-task
                     <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?>
                     SelectTypeParameters=ONE_TASK_PER_SHARING_GRES
                     <?><?><?><?><?> <?><?><?>.
                     <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?>
                     SelectTypeParameters=MULTIPLE_SHARING_GRES_PJ <?><?><?>.



       -h, --help
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?>
              <?><?><?><?>.



       --hint=<type>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?><?> (hints) <?><?><?><?><?><?>
              <?><?><?><?><?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> --ntasks-per-core<?>
              --cores-per-socket<?> --sockets-per-node<?> --threads-per-core
              <?><?> -B <?><?><?><?><?><?>.  <?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?> --hint <?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?> --hint <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?>.

              compute_bound
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?><?> (compute bound):
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> (thread) <?><?> <?><?><?><?> <?><?>
                     <?><?><?><?>.



              memory_bound
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?> (memory bound): <?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?> <?><?><?><?>.



              multithread
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?> (in-core
                     multi-threading) <?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?>.  <?><?><?><?> <?><?> <?><?><?><?><?><?>
                     task/affinity <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.



              nomultithread
                     <?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?>
                     <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?>.  <?><?><?><?> <?><?>
                     <?><?><?><?><?><?> task/affinity <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>.



              help   <?><?><?><?><?> <?><?><?> <?><?><?><?>
                     <?><?><?><?><?><?>.



       -H, --hold
              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> (held state <?><?>
              <?><?><?><?><?><?> <?><?><?>) <?><?><?><?><?> <?><?><?>.  <?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> scontrol <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> (<?><?><?><?><?> "scontrol release <job_id>").



       -I, --immediate[=<seconds>]
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?>)<?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?><?>
              defer <?><?> SchedulerParameters <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?> seconds=1 <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> defer
              <?><?><?><?><?> <?><?><?><?><?> <?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.  <?><?>
              <?><?><?> <?><?><?><?><?><?><?><?> --immediate
              <?><?><?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (block)
              <?><?><?><?><?> <?><?>. <?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> "-I60" <?> <?><?> "-I 60".



       -J, --job-name=<jobname>
              <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              (job id) <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>.
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>
              "<?><?><?><?><?>" <?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?>.



       -K, --kill-command[=signal]
              <?><?><?><?><?> salloc <?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?>. salloc <?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> --kill-command <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>
              Slurm <?><?> salloc <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> salloc
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?> <?><?><?>: <?><?><?><?> <?><?> scancel <?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?>. <?><?><?> <?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?>
              Slurm <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> SIGHUP
              <?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> SIGTERM <?><?><?>. <?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> "-K1" <?>
              <?><?> "-K 1".



       -L, --licenses=<license>[@db][:count][,license[@db][:count]...]
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> (<?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>) <?><?>
              <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?>.  <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
              <?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              (<?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>).
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?> <?><?><?><?>
              (',' <?><?> <?><?><?><?> AND) <?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> "--licenses=foo:4,bar". <?><?><?>
              <?><?> <?><?> <?><?> <?><?><?><?><?> ('|' <?><?> <?><?><?><?>
              OR) <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              "--licenses=foo:4|bar". <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> AND <?> OR <?><?><?><?>
              <?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> (<?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              slurmdbd <?><?><?><?><?> <?><?><?><?><?><?><?>)<?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> "--license=nastran@slurmdb:12".
              <?><?><?> LicenseParameters=RemoteFuzzyMatch <?><?> slurm.conf
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?>.

              <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?> (heterogeneous)<?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?> "salloc -L ansys:2 :".

              <?><?><?><?>: <?><?><?> <?><?><?><?><?><?> <?><?>
              AccountingStorageTres <?><?><?><?><?><?> <?><?><?><?> <?> <?><?>
              OR <?><?><?><?><?><?><?> <?><?><?><?> ReqTRES <?><?><?><?>
              tres<?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?>. AllocTRES
              <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?> OR <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> Slurm <?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> SchedulerParameters=bf_licenses
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> backfill
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



       --mail-type=<type>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?> type <?><?><?><?><?><?><?>
              <?><?> NONE<?> BEGIN<?> END<?> FAIL<?> REQUEUE<?> ALL
              (<?><?><?><?><?> BEGIN<?> END<?> FAIL<?> INVALID_DEPEND<?>
              REQUEUE <?> STAGE_OUT)<?> INVALID_DEPEND (<?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>)<?> STAGE_OUT
              (<?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> burst
              buffer <?> <?><?><?><?><?><?><?>)<?> TIME_LIMIT<?> TIME_LIMIT_90
              (<?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?>)<?> TIME_LIMIT_80
              (<?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?>)<?> <?> TIME_LIMIT_50
              (<?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?>).  <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> type <?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?>.  <?><?><?><?><?> NONE <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?>.  <?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?>.  <?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
              --mail-user <?><?><?><?><?> <?><?><?><?><?><?>.



       --mail-user=<user>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?> --mail-type <?><?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?>. <?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              MailDomain <?><?> slurm.conf <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?>.  <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>.



       --mcs-label=<mcs>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> MCSPlugin <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?> <?><?><?><?> (mcs/group) <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (mcs/label).
              <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>.
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> MCS <?><?><?><?><?><?> <?><?><?><?>:
              <https://slurm.schedmd.com/mcs.html>



       --mem=<size>[units]
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?>.  <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> [K|M|G|T] <?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> DefMemPerNode <?>
              <?><?><?><?><?><?> <?><?><?><?><?> MaxMemPerNode <?><?><?>.
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> scontrol show
              config <?><?><?><?><?><?> <?><?><?>.  <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              (SelectType=select/linear).  <?><?><?><?><?><?> --mem-per-cpu
              <?> --mem-per-gpu <?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?><?><?> --mem<?> --mem-per-cpu <?>
              --mem-per-gpu <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>.
              <?><?><?> --mem<?> --mem-per-cpu <?><?> --mem-per-gpu <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?>.

              <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?> <?> <?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?><?> slurmstepd <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> 20MiB <?><?> 200MiB <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?>
              <?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?>.

              <?><?><?><?>: <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> Slurm
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>. <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?> ConstrainRAMSpace
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?> cgroup.conf(5) <?>
              OverMemoryKill <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              slurm.conf(5) <?><?><?><?><?><?> <?><?><?><?>..IP


       --mem-bind=[{quiet|verbose},]<type>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              (bind) <?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> task/affinity <?><?><?><?> <?><?><?><?> <?>
              <?><?><?><?><?> <?><?><?><?><?><?> NUMA <?><?> <?><?><?><?><?>
              <?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?>
              (resolution) <?><?><?><?><?><?><?><?> CPU <?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> CPU
              <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <<<?><?><?><?><?><?>>> <?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?>.  <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> CPU <?><?><?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> CPU
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?><?>. <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?> <?><?> "none" <?><?> "local" <?><?><?><?><?>
              <?><?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?><?> <?><?><?><?><?> Slurm
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_MEM_BIND
              <?><?><?> "verbose" <?><?><?><?> <?><?><?><?>.

              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> --mem-bind
              <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?>:

                   SLURM_MEM_BIND_LIST
                   SLURM_MEM_BIND_PREFER
                   SLURM_MEM_BIND_TYPE
                   SLURM_MEM_BIND_VERBOSE

              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?><?> *SLURM_MEM_BIND <?><?><?> ENVIRONMENT
              VARIABLES <?><?> <?><?><?><?><?><?> <?><?><?><?>.

              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?>:

              help   <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>



              local  <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?>



              map_mem:<list>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> (<?><?> rank<?><?>)
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?> <list> <?><?><?><?><?> <?><?><?> <?><?>
                     <numa_id_for_task_0>,<numa_id_for_task_1>,...
                     <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     (<?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?>).
                     <?><?><?><?><?><?><?><?><?> NUMA <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> (<?><?> rank<?><?>) <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?>.  <?><?><?><?> <?><?><?><?>
                     "map_mem:0x0f*4,0xf0*4".  <?><?><?><?>
                     <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     CPU<?><?><?> <?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?>.



              mask_mem:<list>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?> <?><?><?><?><?><?> (<?><?> rank<?><?>)
                     <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
                     <?><?> <?><?> <list> <?><?><?><?><?> <?><?><?> <?><?>
                     <numa_mask_for_task_0>,<numa_mask_for_task_1>,...
                     <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?>
                     <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
                     (<?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                     <?> <?><?><?><?>).  <?><?><?><?><?><?><?><?> NUMA
                     <?><?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>.  <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                     <?><?><?><?><?><?><?> <?><?> [0-9] <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?> <?><?> '0x' <?><?><?><?> <?><?><?><?>
                     <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?>.  <?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?> (<?><?> rank<?><?>) <?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                     <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
                     <?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                     <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?>
                     <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?>
                     <?><?><?><?><?>.  <?><?><?><?> <?><?><?><?>
                     "mask_mem:0*4,1*4".  <?><?><?><?> <?><?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
                     <?><?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                     CPU<?><?><?> <?><?> <?><?><?> <?><?> <?><?><?>
                     <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                     <?><?><?><?> <?><?><?><?>.



              no[ne] <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                     <?><?> <?><?><?><?><?> (<?><?><?><?><?><?><?>)



              p[refer]
                     <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?> NUMA
                     <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                     <?><?><?><?><?><?><?> NUMA <?><?><?><?><?>.



              q[uiet]
                     <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>
                     <?><?> <?><?><?><?><?> <?><?><?> (<?><?><?><?><?><?><?>)



              rank   <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> rank
                     <?><?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?>)



              v[erbose]
                     <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?>
                     <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?>
                     <?><?><?><?><?> <?><?><?>



       --mem-per-cpu=<size>[units]
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?> <?><?> CPU
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?>.  <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> (mebibytes) <?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> [K|M|G|T] <?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> DefMemPerCPU <?>
              <?><?><?><?><?><?> <?><?><?><?><?> MaxMemPerCPU <?><?><?>
              (<?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?>).
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> scontrol show
              config <?><?><?><?><?><?> <?><?><?>.  <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
              --mem-per-cpu <?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?><?> MaxMemPerCPU
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              --mem-per-cpu <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?> MaxMemPerCPU <?><?><?><?> <?><?><?><?><?><?><?><?>
              --cpus-per-task <?><?><?><?><?> <?><?><?> <?> <?><?><?><?>
              <?><?><?> <?><?><?><?><?> --cpus-per-task <?><?> <?><?><?><?><?>
              <?><?><?><?> --mem-per-cpu <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> --mem-per-cpu
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?>.  <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              (SelectType=select/cons_tres).  <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?> CPU<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?>
              --mem-per-cpu <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?>.  <?><?><?><?><?><?> --mem <?>
              --mem-per-gpu <?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?><?><?> --mem<?> --mem-per-cpu <?>
              --mem-per-gpu <?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?>.
              <?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?> <?><?> --mem-per-cpu <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --exclusive <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?>
              <?><?><?><?> <?><?><?> --mem-per-cpu <?><?> <?><?><?><?><?>
              CPU<?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
              CPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?>.  <?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
              <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.  <?><?><?>
              <?><?><?><?> --threads-per-core <?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> (<?><?> --hint=nomultithread
              <?><?> <?><?> <?><?><?><?><?> --threads-per-core=1 <?><?><?>)<?>
              <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?> <?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?>.  <?><?><?> <?><?><?> <?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?><?><?>
              <?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.

              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?>.

              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
              --threads-per-core <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>:

              $ salloc -n3 --mem-per-cpu=100
              salloc: Granted job allocation 17199
              $ sacct -j $SLURM_JOB_ID -X -o jobid%7,reqtres%35,alloctres%35
                JobID                             ReqTRES                           AllocTRES
              ------- ----------------------------------- -----------------------------------
                17199     billing=3,cpu=3,mem=300M,node=1     billing=4,cpu=4,mem=400M,node=1

              <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> --threads-per-core=1<?> <?><?>
              <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>. CPU<?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?>.
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?>.

              $ salloc -n3 --mem-per-cpu=100 --threads-per-core=1
              salloc: Granted job allocation 17200
              $ sacct -j $SLURM_JOB_ID -X -o jobid%7,reqtres%35,alloctres%35
                JobID                             ReqTRES                           AllocTRES
              ------- ----------------------------------- -----------------------------------
                17200     billing=3,cpu=3,mem=300M,node=1     billing=6,cpu=6,mem=300M,node=1


       --mem-per-gpu=<size>[units]
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> GPU <?><?><?><?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> [K|M|G|T] <?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> DefMemPerGPU <?><?><?> <?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> scontrol show config <?> scontrol show partition <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?> --mem <?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?><?><?> --mem<?> --mem-per-cpu <?> --mem-per-gpu <?><?><?><?><?><?><?><?><?><?><?> (<?><?><?><?><?><?><?> <?><?><?>) <?><?><?><?><?>.



       --mem-update=<margin>@<delay>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> delay <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> margin <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?> margin <?><?> <?><?><?><?> <?><?><?> (<?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>). <?><?><?><?><?> delay <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> delay <?><?><?><?><?><?><?> <?><?> "minutes"<?> "minutes:seconds"<?> "hours:minutes:seconds"<?> "days-hours"<?> "days-hours:minutes" <?> "days-hours:minutes:seconds".
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> RSS (<?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>) <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> swap <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?> ConstrainSwapSpace <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> swap <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?> <?><?><?> --mem <?> --mem-per-cpu <?><?><?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?> --mem-per-cpu<?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> (per-node) <?><?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> (one-shot) <?><?><?>: <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?> (requeue)<?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> SlurmctldParameters=enable_stepmgr <?> JobAcctGatherType=jobacct_gather/cgroup <?><?><?>.



       --mincpus=<n>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?>/CPU<?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?>.



       --network=<type>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>.
              <?><?><?><?><?> type <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>.

              <?><?><?><?><?> network <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> HPE Slingshot <?><?> <?><?><?><?><?> <?><?><?>. <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> VNI <?><?><?> (<?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?>) <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.

              tcs=<class1>[:<class2>]...
                    <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?>.
                    <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> DEDICATED_ACCESS<?> LOW_LATENCY<?> BULK_DATA <?> BEST_EFFORT. <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> TC_DEDICATED_ACCESS<?> TC_LOW_LATENCY<?> TC_BULK_DATA <?> TC_BEST_EFFORT <?><?><?> <?><?><?><?> <?><?><?>.



              no_vni
                    <?><?><?> VNI<?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> (<?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>).



              job_vni
                    <?><?><?><?><?> <?><?> VNI <?><?><?> <?><?><?><?> <?><?><?> <?><?><?>.



              single_node_vni
                    <?><?><?><?><?> <?><?> VNI <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?>.



              adjust_limits
                    <?><?> <?><?><?><?> <?><?><?><?><?><?> slurmd <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> (NIC) <?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> (<?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>) <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.



              no_adjust_limits
                    <?><?> <?><?><?><?> <?><?><?><?><?><?> slurmd <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> (tasks) <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>. <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



              disable_rdzv_get
                    <?><?><?><?><?><?><?> <?><?><?><?> rendezvous get<?><?> <?><?> NIC<?><?><?> Slingshot<?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



              nic_distribution_count=<val>
                    <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> (NIC) <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
                    <?><?><?><?><?><?><?><?> <?><?><?><?><?> NIC<?><?> <?><?> <?><?> <?><?><?> <?><?><?>.



              def_<rsrc>=<val>
                    <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?><?><?> <?><?><?> <?><?><?><?>.



              res_<rsrc>=<val>
                    <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>.
                    <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?> <?><?><?> <?><?><?><?><?><?>.



              max_<rsrc>=<val>
                    <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?>.



              depth=<depth>
                    <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU.
                    <?><?><?><?><?><?><?><?> <?><?><?><?><?> CPU<?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?>.


              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?>:

              txqs  <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (Transmit command queues). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              tgqs  <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> (Target command queues). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              eqs   <?><?><?><?><?><?> <?><?><?><?><?><?> (Event queues). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              cts   <?><?><?><?><?><?><?><?><?><?> (Counters). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              tles  <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> (Trigger list entries). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              ptes  <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> (Portable table entries). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              les   <?><?><?><?><?><?><?><?> <?><?><?><?><?> (List entries). <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.



              acs   <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (Addressing contexts). <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?> CPU<?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?>.


              <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> SwitchType=switch/nvidia_imex<?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>:
              unique-channel-per-segment
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> (segment) <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> topology/block <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.





       --nice[=adjustment]
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> Slurm. <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?><?> nice <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?> +/- 2147483645 <?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?>) <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



       --no-bell
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> salloc <?><?> <?><?><?> <?><?><?><?><?><?><?> (terminal bell). <?><?><?><?><?><?> <?><?><?><?><?> --bell <?><?> <?><?><?><?><?><?>.



       -k, --no-kill[=off]
              <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> (fault-tolerance) <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_NO_KILL <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_NO_KILL <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?> srun <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> --no-kill <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.

              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> SALLOC_NO_KILL<?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> "off" <?><?> <?><?><?><?> <?><?><?><?>.

              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> Slurm <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



       --no-shell
              <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?>. <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> Slurm <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?> <?><?><?><?><?> <?><?><?> Slurm <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> (task) <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>. <?><?><?> <?><?><?><?><?> --jobid= <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?> Slurm <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> srun <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>. (<?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> scancel <?><?><?> <?><?><?><?>.)



       -F, --nodefile=<node_file>
              <?><?><?><?><?> <?><?><?><?> <?><?> --nodelist<?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> node file <?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> Slurm <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>.



       -w, --nodelist=<node_name_list>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>.

              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?> <?><?><?><?><?> --segment <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>). <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.

              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> (<?><?><?><?><?> node[1-5,7,...])<?> <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> "/" <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> Slurm <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



       -N, --nodes=<minnodes>[-maxnodes]|<size_string>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> minnodes <?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?> maxnodes <?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> size_string <?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?><?><?> size_string <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> "-" <?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?> "--nodes=1-15:4" <?><?><?><?><?> <?><?> "--nodes=1,5,9,13" <?><?><?>.
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> PENDING (<?><?><?><?>) <?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> SLURM_JOB_NUM_NODES <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> ENVIRONMENT VARIABLES <?><?> <?><?><?><?><?><?>. <?><?><?> -N <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> per-job<?> <?><?><?><?><?> -n<?> -c <?> --gpus <?><?><?><?><?> <?><?><?><?>.
              <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> "k" (<?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>) <?><?> "m" (<?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?>) <?><?><?><?>.

              NOTE: <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (arbitrary distribution) <?><?><?><?><?><?><?> <?><?><?>.



       -n, --ntasks=<number>
              <?><?><?><?><?> salloc <?><?><?><?><?> (tasks) <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> number <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --cpus-per-task <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       --ntasks-per-core=<ntasks>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> ntasks <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> (core).
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> --ntasks <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?> --ntasks-per-node<?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?> srun <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?>.
              <?><?><?><?> <?><?><?> Slurm <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> (cpus) <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>.
              NOTE: <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> SelectType=select/linear <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> --threads-per-core <?><?><?><?>.



       --ntasks-per-gpu=<ntasks>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> GPU<?> <?><?><?><?><?> ntasks <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?>: <?>) <?><?><?><?><?> <?><?> <?><?><?><?> --ntasks <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> GPU <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> --ntasks-per-gpu <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?>) GPU<?><?><?> <?><?><?><?> <?><?><?> <?><?> (<?><?><?><?><?> <?><?> <?><?><?><?> --gpus <?><?> --gres) <?><?><?><?> <?><?><?><?><?> --ntasks <?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>.
              <?><?><?><?><?> CPU<?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> --tres-bind=gres/gpu:single:<ntasks> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> --tres-bind=gres/gpu <?><?><?><?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> (<?><?><?><?> -N<minnodes-maxnodes>) <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> --gpus-per-task<?> --gpus-per-socket <?><?> --ntasks-per-node <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> SelectType=cons_tres <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> (<?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> Cray).



       --ntasks-per-node=<ntasks>
              <?><?><?><?><?><?><?> <?><?><?><?><?> ntasks <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> --ntasks <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> --ntasks <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?> --ntasks-per-node <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> --nodes <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> --cpus-per-task=ncpus <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> cpus <?><?><?> <?><?> <?><?><?> <?><?><?><?><?>. <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> MPI/OpenMP <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?> <?><?> <<<?><?><?><?><?>/<?><?><?><?>>> (task/rank) <?><?> MPI <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?> <?><?><?> OpenMP <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>/<?><?><?><?><?><?><?><?>/<?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>..IP


       --ntasks-per-socket=<ntasks>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> ntasks <?><?><?><?><?> (<?><?><?>) <?><?><?> <?><?> <?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --ntasks <?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?> --ntasks-per-node<?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> SelectType=select/linear <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



       --oom-kill-step[={0|1}]
              <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> OOM (<?><?><?><?><?> <?><?><?><?><?>) <?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> (step)<?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?> (kill) <?><?><?> <?><?> <?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <<OOMKillStep>> <?><?> TaskPluginParam <?><?> <?><?><?><?> slurm.conf <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> slurm.conf <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <<0>> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?> <<1>> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <<1>> (<?><?><?><?>) <?><?><?>.



       -O, --overcommit
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> (overcommit) <?><?><?><?><?>.

              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> (job allocation) <?><?><?><?><?> <?><?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>)<?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> (-c<?> --cpus-per-task) <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>. <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.

              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> (<?><?><?><?><?> srun <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>)<?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?><?><?><?><?><?> <?><?><?>.
              <?><?> <?><?><?> <?><?><?><?><?><?> srun <?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?> <?><?><?><?> <?><?><?><?> --overcommit <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> CPU <?><?> <?><?><?><?><?><?><?>. <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> MAX_TASKS_PER_NODE <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?>. <?><?><?><?>: <?><?><?><?><?> MAX_TASKS_PER_NODE <?><?> <?><?><?><?> slurm.h <?><?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> (build) <?><?><?><?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?>.



       -s, --oversubscribe
              <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> (over-subscribe) <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?>/<?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> (hyperthreads) <?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?> OverSubscribe <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> --oversubscribe <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?><?> --exclusive <?><?> <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --exclusive <?><?><?><?><?><?><?><?><?><?> <?><?><?>.



       -p, --partition=<partition_names>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>. <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>).
              <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.



       --prefer=<list>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> (features) <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> Slurm <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> features <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?> --constraint <?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> --prefer <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> --constraint <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> --constraint <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.


       --priority=<value>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.
              value <?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> "TOP" (<?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>).
              <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?> <?><?><?><?><?><?> Slurm <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?>.



       --profile={all|none|<type>[,<type>...]}
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> acct_gather_profile.
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> HDF5 <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> InfluxDB <?><?><?><?><?> <?><?><?><?><?><?><?>.

              All       <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. (<?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.)



              None      <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
                         (<?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>.)


              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> type <?><?><?><?><?><?><?> <?><?>:

              Energy <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              Task   <?><?><?><?><?><?><?><?> <?><?><?><?><?> (<?><?><?><?><?>/<?><?><?><?><?><?> <?><?><?><?><?> <?>...) <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              Lustre <?><?><?><?><?><?><?><?> Lustre <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



              Network
                     <?><?><?><?><?><?><?><?> <?><?><?><?> (InfiniBand) <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>.



       -q, --qos=<qos>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> (QOS) <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> QOS<?><?>.
              <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> QOS <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?>.
              <?><?><?><?><?><?> QOS <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>/<?><?><?><?><?><?>/<?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?><?> Slurm <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> Slurm <?><?><?><?> AccountingStorageEnforce <?><?><?><?><?> <<qos>> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> qos<?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.



       -Q, --quiet
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> salloc. <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?>.



       --reboot
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?><?><?> root<?> SlurmUser <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>.



       --reservation=<reservation_names>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> scontrol/squeue <?><?><?><?><?> <?><?><?><?><?><?> <?><?>.
              <?><?> <?><?><?> <?><?><?><?><?><?><?><?> (accounting)<?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>.



       --resources=<resource_names>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?>).
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> Mode 1 <?> Mode 2 <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> Mode 3 <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?>: "--resources=flat:2,natural:1".

              <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?> Slurm<?> <?><?>
              https://slurm.schedmd.com/hres.html
              <?><?><?><?><?><?> <?><?><?><?>.
              --resv-ports[=count]
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?> MpiParams=ports=12000-12999
              <?><?><?><?> <?><?> slurm.conf <?><?><?><?> <?><?><?> <?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?> <?><?><?><?> PMI <?><?><?><?> Cray <?><?><?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> slurmstepd <?><?><?><?> <?><?><?><?>.
              --stepmgr <?><?> <?><?><?><?><?><?>.



       --segment=<segment_size>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> (block or ring) <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (segments)
              <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (--nodes) <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>.

              <?><?><?><?>: <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> --nodelist=<node_list>:
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> --nodelist <?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> --nodelist <?><?><?><?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?> slurmctld <?><?><?><?><?> <?><?>.



       --signal=[R:]<sig_num>[@sig_time]
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> sig_time <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> sig_num <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> Slurm<?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.
              sig_num <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> (<?><?><?><?><?> "10" <?><?> "USR1").
              sig_time <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> 0 <?><?> 65535 <?><?><?><?><?> <?><?><?><?>.
              <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?> <?><?> sig_num <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> sig_time <?><?><?><?> <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?> <?><?><?><?><?> "R:" <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> MaxStartDelay <?><?><?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?> <?><?> <?><?><?><?><?> "R:" <?><?><?><?><?><?><?> <?><?><?><?> preemption <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?> <?><?> <?><?><?><?> <?><?><?><?><?> preemption <?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> (requeued)<?>
              <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>.
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> preemption<?> <?><?><?><?><?><?><?> send_user_signal
              <?><?> PreemptParameter <?><?> <?><?><?><?><?><?>.



       --sockets-per-node=<sockets>
              <?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> task/affinity <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> -B <?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> (<?><?><?> -n
              <?><?><?><?> <?><?><?><?> <?><?><?><?>) <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> (thread) <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       --spread-job
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> topology/tree <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.



       --spread-segments
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> topology/block <?><?><?> <?><?><?><?><?> <?><?><?>.



       --stepmgr
              <?><?><?><?><?><?> <?><?><?> slurmstepd <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> slurmstepd <?><?><?><?><?> (extern) <?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>. PrologFlags=contain <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>.



       --switches=<count>[@max-time]
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?> (leaf switches)
              <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> Slurm <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> (pending) <?><?><?><?> <?><?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> "minutes"<?> "minutes:seconds"<?>
              "hours:minutes:seconds"<?> "days-hours"<?> "days-hours:minutes" <?>
              "days-hours:minutes:seconds".
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> SchedulerParameters <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              max_switch_wait <?><?><?><?><?> <?><?><?> <?><?><?><?>.
              <?><?> <?><?> <?><?><?><?> dragonfly <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?> <?><?> <?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?> max-time <?><?><?><?><?> <?><?> <?><?><?><?><?> max_switch_wait <?><?> SchedulerParameters <?><?><?>.



       --thread-spec=<num>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> (specialized threads) <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?>
              <?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> --core-spec <?><?><?><?><?><?><?> <?><?><?>.

              <?><?><?><?>: <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?>
              <?><?><?><?><?> --exclusive <?><?> <?><?> <?><?><?><?> <?><?><?><?> <?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>.



       --threads-per-core=<threads>
              <?><?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> (task layout)<?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?>: <<<?><?><?><?><?><?><?>>> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>.
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> task/affinity <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> -B
              <?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> (<?><?><?> -n
              <?><?><?><?> <?><?><?><?> <?><?><?><?>) <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       -t, --time=<time>
              <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> PENDING
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?> (<?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>). <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> SIGTERM <?> <?><?><?> SIGKILL <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> Slurm <?><?> <?><?><?><?><?>
              KillWait <?><?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> OverTimeLimit <?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> (<?><?><?><?><?> <?><?><?><?>) <?><?><?> <?><?><?><?><?><?><?>.

              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> "minutes"<?> "minutes:seconds"<?> "hours:minutes:seconds"<?>
              "days-hours"<?> "days-hours:minutes" <?> "days-hours:minutes:seconds".



       --time-min=<time>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> --time <?><?><?> <?><?> <?><?><?><?><?><?>
              <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> --time-min <?><?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> backfill <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?>
              <?><?> <?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?> "minutes"<?> "minutes:seconds"<?>
              "hours:minutes:seconds"<?> "days-hours"<?> "days-hours:minutes" <?>
              "days-hours:minutes:seconds".



       --tmp=<size>[units]
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> (mebibytes) <?><?><?><?><?>.
              <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> [K|M|G|T] <?><?><?><?> <?><?><?>.



       --tres-bind=<tres>:[verbose,]<type>[+<tres>:
              [verbose,]<type>...]
              <?><?><?><?><?><?> <?><?> tres <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (task binding) <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?> <?><?><?><?> gres <?><?><?><?>
              tres <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?>. gres <?><?> <?><?> <?><?><?><?> "gres/<gres_name>"
              <?><?><?><?> <?><?><?><?> (<?><?><?><?><?> gres/gpu)

              <?><?><?><?>: --tres-bind=gres/gpu:verbose,map:0,1,2,3+gres/nic:closest

              <?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> tres<?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>

              <?><?><?><?><?><?><?><?><?> <?><?><?> (type) <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> gres:

              closest   <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?><?><?><?> gres(<?><?>) <?><?><?><?><?> <?><?><?><?><?><?>.
                        <?><?> <?><?> <?><?><?><?> NUMA<?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?> gres <?><?><?><?><?> <?><?><?><?> <?><?><?> (<?><?><?><?>
                        <?><?><?><?> gres<?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?> NUMA)..IP


              map:<list>
                        <?><?><?><?><?> (Bind) <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> gres <?><?><?> <?><?><?><?><?> (<?><?> rank<?><?>) <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <list> <?><?> <?><?><?><?>
                        <gres_id_for_task_0>,<gres_id_for_task_1>,... <?><?><?><?>. <?><?><?><?><?><?><?><?><?> gres <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> (decimal) <?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?> (<?><?> rank<?><?>) <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?>. <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> "map:0*4,1*4".
                        <?><?><?> <?><?><?><?><?><?> task/cgroup <?><?><?><?><?><?><?> <?><?><?> <?> ConstrainDevices <?><?> cgroup.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> gres<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?> (<?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> gres <?><?><?><?><?> <?><?> <?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?> <?><?><?><?>). <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?> gres<?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.



              mask:<list>
                        <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> gres <?><?><?> <?><?><?><?><?> (<?><?> rank<?><?>) <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <list> <?><?> <?><?><?><?>
                        <gres_mask_for_task_0>,<gres_mask_for_task_1>,... <?><?><?><?>. <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (<?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?><?> <?><?><?>). <?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?> '0x' <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>. <?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> "mask:0x0f*4,0xf0*4".
                        <?><?><?> <?><?><?><?><?><?> task/cgroup <?><?><?><?><?><?><?> <?><?><?> <?> ConstrainDevices <?><?> cgroup.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> gres <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?> (<?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> gres <?><?><?><?><?> <?><?> <?> <?><?><?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?> <?><?><?><?>). <?><?> <?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> gres <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?> gres<?><?><?> <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>.



              none      <?><?><?><?><?> <?><?> <?><?> <?><?><?> gres <?><?><?><?> <?><?><?> (<?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
                        --tres-per-task <?> --gpus-per-task <?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>).



              per_task:<gres_per_task>
                        <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> gres <?><?><?><?><?><?><?><?> <?><?>
                        <gres_per_task> <?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> gres<?><?><?><?> <?><?> <?><?><?><?><?><?><?> (affinity) <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> closest<?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?> gres <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> x <?><?> gres<?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?> gres <?><?><?><?><?><?><?> (Shared gres)<?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?>.



              single:<tasks_per_gres>
                        <?><?><?><?><?> closest<?> <?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> gres <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?> gres <?><?> <?><?> <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?>.
                        gres <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <tasks_per_gres> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?> <tasks_per_gres> <?><?><?><?><?> <?><?> <?><?><?><?><?> gres <?><?> <?><?><?><?><?><?> <?><?><?><?><?> <tasks_per_gres> <?><?><?><?><?> <?><?> <?><?><?><?><?> gres <?><?> <?><?><?><?><?> <?> <?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>.
                        <?><?><?> <?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> gres<?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?> <?><?> <?><?> gres<?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?> <?><?><?><?><?><?><?> <?><?><?><?><?> gres <?><?><?> <?><?><?><?><?><?><?> Cores <?><?> gres.conf <?><?><?><?><?> <?><?><?><?><?><?><?>.


                        NOTE: <?><?><?><?><?> gres <?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?><?> per_task <?><?> none <?><?><?><?><?> <?><?><?>.



       --tres-per-task=<list>
              <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?> "trestype[/tresname]=count" <?><?><?>.
              <?><?><?><?> trestype <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?> (<?><?><?><?><?> cpu<?> gres<?> license <?> <?><?><?><?>).
              <?><?><?><?> tresname <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?>
              sacctmgr show tres <?><?><?><?> <?><?><?><?><?><?> <?><?><?>. <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?> tres <?><?><?><?><?> gres<?> license <?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?><?> (<?><?><?><?><?> gpu<?> gpu:a100).
              <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> (license) <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?>(<?><?>) <?><?><?><?> <?><?> <?><?><?><?><?><?><?> AccountingStorageTRES <?><?> slurm.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?>.
              <?><?><?><?> count <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>:
              "k" <?><?> "K" (<?><?><?><?> <?><?><?><?>)<?>
              "m" <?><?> "M" (<?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>)<?>
              "g" <?><?> "G" (<?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?>)<?>
              "t" <?><?> "T" (<?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?>)<?>
              "p" <?><?> "P" (<?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?>).
              <?><?><?><?><?><?><?>:
              --tres-per-task=cpu=4
              --tres-per-task=cpu=8,license/ansys=1
              --tres-per-task=gres/gpu=1
              --tres-per-task=gres/gpu:a100=2
              <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?>.  <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>.
              NOTE: <?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?> gres/gpu
              <?><?> gres/shard <?><?> <?><?><?><?> <?><?><?><?>
              --tres-bind=gres/[gpu|shard]:per_task:<tres_per_task><?> <?><?>
              <?><?><?> <?><?><?> <?><?><?> gpu <?><?><?><?> <?><?><?>
              <?><?><?><?>
              --tres-bind=gres/gpu:per_task:<gpus_per_task_type_sum> <?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?> --tres-bind <?><?><?> <?><?><?>.
              NOTE: <?><?><?><?><?> TRES <?><?><?><?><?><?><?> <?><?><?><?>
              --tres-per-task <?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?>: bb,billing,energy,fs,mem,node,pages,vmem.



       --usage
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?> <?><?><?><?>.



       --use-min-nodes
              <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?>.



       -v, --verbose
              <?><?><?><?><?><?> <?><?><?><?><?><?> (verbosity)
              <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> salloc.
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> -v
              <?><?><?><?><?><?> salloc <?><?> <?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?>. <?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?> <?><?><?><?><?><?> <?><?>.



       -V, --version
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?>
              <?><?><?><?>.



       --wait-all-nodes=<value>
              <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?> (<?><?><?><?> <?><?><?> <?><?><?>)
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?> <?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> salloc <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> salloc_wait_nodes <?><?> <?><?><?><?><?><?><?>
              SchedulerParameters <?><?> <?><?><?><?> slurm.conf
              <?><?><?><?><?> <?><?><?><?>.

              0    <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
                   <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
                   <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.
                   <?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?>
                   <?><?><?><?> <?><?><?><?><?><?> (<?><?><?><?> <?><?><?>
                   <?><?><?>) <?><?><?><?><?> <?><?><?><?><?><?><?><?>.



              1    <?><?> <?><?><?><?><?> <?><?> <?><?><?><?>
                   <?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?>
                   <?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
                   <?><?><?>.



       --wckey=<wckey>
              <?><?><?><?><?> wckey <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?>. <?><?><?> TrackWCKey=no (<?><?><?><?><?><?><?>)
              <?><?> slurm.conf <?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.



       --x11[={all|first|last}]
              <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?>
              X11 <?><?><?> <<all>> (<?><?><?>)<?> <<first>> (<?><?><?><?><?>)
              <?><?> <<last>> (<?><?><?><?><?>) <?><?><?>(<?><?><?>)
              <?><?><?><?><?>.  <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?> <?><?><?> <?><?> Slurm <?><?>
              <?><?><?><?><?><?><?><?> <?><?> X11 <?><?><?><?><?><?><?>
              <?><?><?> <?><?><?><?> <?> PrologFlags=x11 <?><?> slurm.conf
              <?><?><?><?><?> <?><?><?> <?><?><?><?>. <?><?><?><?><?>
              <?><?><?><?><?><?><?> "all" <?><?><?>.

              NOTE: <?><?> <?><?><?><?><?> <?><?> --clusters <?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>.  <?><?><?><?>
              <?><?><?><?><?><?><?> (<?><?><?><?><?> <?><?> <?><?>
              <?><?><?><?><?>) <?><?><?><?><?><?><?> <?><?><?><?><?><?>
              <?><?><?> <?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?> X11 <?><?><?><?><?>
              <?><?><?><?><?><?><?>.

       <?><?><?><?><?> salloc <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?>
       <?><?> <?><?><?> <?><?><?> (RPC) <?><?> slurmctld <?><?><?><?><?>
       <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?><?> salloc <?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?> Slurm <?><?>
       <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
       <?><?><?> <?><?> <?><?><?><?> slurmctld <?><?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
       <?><?><?><?><?><?> <?><?><?><?> slurmctld <?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?> (DoS)
       <?><?><?>.

       <?><?><?><?><?> salloc <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?> Slurm <?><?> <?><?>
       <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?>
       <?><?><?> <?><?> slurmctld <?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?>
       <?><?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?><?>. <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
       salloc <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?> <?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?>.


<?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> (INPUT ENVIRONMENT
       VARIABLES)
       <?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?> salloc
       <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?>
       <?><?><?><?><?><?> <?> <?><?><?><?><?><?> <?><?><?><?><?><?>.
       <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>. <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?><?> (flag) <?><?> <?><?><?><?>
       <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
       (<?><?><?><?> <?><?><?><?> <?><?> NULL)<?> <?><?><?><?> 'yes'<?> <?><?>
       <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?> <?><?><?>. <?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?>. <?><?><?> <?><?><?><?><?><?>
       <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?> <?><?><?> <?><?><?> <?><?><?><?><?><?><?>.
       <?><?><?><?>: <?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
       <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
       <?><?><?><?><?>.


       SALLOC_ACCOUNT        <?><?><?><?><?> -A, --account



       SALLOC_ACCTG_FREQ     <?><?><?><?><?> --acctg-freq



       SALLOC_BELL           <?><?><?><?><?> --bell



       SALLOC_BURST_BUFFER   <?><?><?><?><?> --bb



       SALLOC_CLUSTERS <?><?> SLURM_CLUSTERS
                             <?><?><?><?><?> --clusters



       SALLOC_CONSTRAINT     <?><?><?><?><?> -C<?> --constraint



       SALLOC_CONTAINER      <?><?><?><?><?> --container.



       SALLOC_CONTAINER_ID   <?><?><?><?><?> --container-id.



       SALLOC_CONTAINER_TYPE <?><?><?><?><?> --container-type.



       SALLOC_CORE_SPEC      <?><?><?><?><?> --core-spec



       SALLOC_CPUS_PER_GPU   <?><?><?><?><?> --cpus-per-gpu



       SALLOC_DEBUG          <?><?><?><?><?> -v, --verbose<?>
                             <?><?><?><?><?><?> <?><?> <?><?><?> <?>
                             <?><?><?><?><?> <?><?><?> <?><?><?><?><?> -v<?>
                             <?><?><?><?><?><?> <?><?> <?><?><?> <?>
                             <?><?><?><?><?> <?><?><?> -vv<?> <?> <?><?>
                             <?><?><?><?> <?><?><?><?><?>.



       SALLOC_DELAY_BOOT     <?><?><?><?><?> --delay-boot



       SALLOC_EXCLUSIVE      <?><?><?><?><?> --exclusive



       SALLOC_GPU_BIND       <?><?><?><?><?> --gpu-bind



       SALLOC_GPU_FREQ       <?><?><?><?><?> --gpu-freq



       SALLOC_GPUS           <?><?><?><?><?> -G, --gpus



       SALLOC_GPUS_PER_NODE  <?><?><?><?><?> --gpus-per-node



       SALLOC_GPUS_PER_TASK  <?><?><?><?><?> --gpus-per-task



       SALLOC_GRES           <?><?><?><?><?> --gres



       SALLOC_GRES_FLAGS     <?><?><?><?><?> --gres-flags



       SALLOC_HINT <?><?> SLURM_HINT
                             <?><?><?><?><?> --hint



       SALLOC_IMMEDIATE      <?><?><?><?><?> -I, --immediate



       SALLOC_KILL_CMD       <?><?><?><?><?> -K<?> --kill-command



       SALLOC_MEM_BIND       <?><?><?><?><?> --mem-bind



       SALLOC_MEM_PER_CPU    <?><?><?><?><?> --mem-per-cpu



       SALLOC_MEM_PER_GPU    <?><?><?><?><?> --mem-per-gpu



       SALLOC_MEM_PER_NODE   <?><?><?><?><?> --mem



       SALLOC_NETWORK        <?><?><?><?><?> --network



       SALLOC_NO_BELL        <?><?><?><?><?> --no-bell



       SALLOC_NO_KILL        <?><?><?><?><?> -k<?> --no-kill SALLOC_OVERCOMMIT
                             <?><?><?><?><?> -O, --overcommit



       SALLOC_PARTITION      <?><?><?><?><?> -p, --partition



       SALLOC_POWER          <?><?><?><?><?> --power



       SALLOC_PROFILE        <?><?><?><?><?> --profile



       SALLOC_QOS            <?><?><?><?><?> --qos



       SALLOC_REQ_SWITCH     <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                             <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?><?><?><?><?><?>
                             <?><?><?><?> <?><?><?> <?><?><?><?>
                             <?><?><?><?><?> <?><?><?> <?> <?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?>
                             <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?>
                             <?><?><?><?> <?><?><?><?><?><?>. --switches
                             <?><?> <?><?><?><?><?><?>.



       SALLOC_RESERVATION    <?><?><?><?><?> --reservation



       SALLOC_SEGMENT_SIZE   <?><?><?><?><?> --segment



       SALLOC_SIGNAL         <?><?><?><?><?> --signal



       SALLOC_SPREAD_JOB     <?><?><?><?><?> --spread-job



       SALLOC_THREAD_SPEC    <?><?><?><?><?> --thread-spec



       SALLOC_THREADS_PER_CORE
                             <?><?><?><?><?> --threads-per-core



       SALLOC_TIMELIMIT      <?><?><?><?><?> -t, --time



       SALLOC_TRES_BIND      <?><?><?><?><?> --tres-bind



       SALLOC_TRES_PER_TASK  <?><?><?><?><?> --tres-per-task



       SALLOC_USE_MIN_NODES  <?><?><?><?><?> --use-min-nodes



       SALLOC_WAIT_ALL_NODES <?><?><?><?><?> --wait-all-nodes. <?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?> <?><?><?><?>
                             <?><?><?><?> <?><?><?> <?><?><?><?><?>
                             <?><?><?><?> <?><?><?> 0 <?><?> 1 <?><?><?><?><?>
                             <?><?><?>.



       SALLOC_WAIT4SWITCH    <?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?>. --switches <?><?>
                             <?><?><?><?><?><?>.



       SALLOC_WCKEY          <?><?><?><?><?> --wckey



       SLURM_CONF            <?><?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                             Slurm.



       SLURM_DEBUG_FLAGS     <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?><?><?> salloc <?><?>
                             <?><?><?><?> <?><?><?><?><?><?>. <?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?>
                             <?><?><?><?><?><?><?><?> DebugFlags <?><?> <?><?>
                             <?><?><?><?> <?><?><?><?><?><?><?> slurm.conf(5)
                             <?><?><?><?><?><?>. <?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?> <?><?> <?><?><?><?><?><?><?>
                             <?><?><?><?><?> <?><?> slurm.conf
                             <?><?><?><?><?><?> <?><?><?><?>.



       SLURM_EXIT_ERROR      <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?><?> <?><?>
                             <?><?><?><?> Slurm (<?><?><?><?><?>
                             <?><?><?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?>) <?><?> <?><?><?><?>
                             <?><?><?><?><?><?>.  <?><?> <?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                             <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                             <?><?><?><?> <?><?><?><?><?> Slurm
                             <?><?><?><?><?><?><?> <?><?><?>.
                             <?><?><?><?><?><?> SLURM_EXIT_IMMEDIATE <?><?>
                             <?><?><?><?><?><?>.



       SLURM_EXIT_IMMEDIATE  <?><?> <?><?><?><?> <?><?><?><?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?>
                             <?><?><?><?><?> --immediate <?><?>
                             <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
                             <?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?>
                             <?><?><?><?><?><?> <?><?> <?><?><?><?>
                             <?><?><?><?><?><?>.  <?><?> <?><?><?><?><?><?><?>
                             <?><?><?><?><?><?><?><?> <?><?> <?><?><?>
                             <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
                             <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
                             <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?>
                             <?><?><?><?> <?><?><?><?><?> Slurm
                             <?><?><?><?><?><?><?> <?><?><?>.
                             <?><?><?><?><?><?> SLURM_EXIT_ERROR <?><?>
                             <?><?><?><?><?><?>.

       <?><?><?><?><?> salloc <?><?><?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?> <?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?><?>:

       SLURM_*_HET_GROUP_#
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?>
              (heterogeneous)<?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>.



       SLURM_CLUSTER_NAME
              <?><?><?> <?><?><?><?><?><?><?> (cluster) <?><?> <?><?><?>
              <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>.



       SLURM_CONTAINER
              <?><?><?><?> OCI (OCI Bundle) <?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> --container <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_CONTAINER_ID
              <?><?><?><?><?> OCI <?><?><?><?> <?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              --container-id <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_CONTAINER_TYPE
              <?><?><?> <?><?><?> (container) <?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              --container-type <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_CPUS_PER_GPU
              <?><?><?><?><?> CPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?> GPU
              <?><?><?><?><?><?><?><?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --cpus-per-gpu <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_CPUS_PER_TASK
              <?><?><?><?><?> CPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> (task).  <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --cpus-per-task <?><?> <?><?><?><?><?><?>
              --tres-per-task=cpu=# <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_DIST_PLANESIZE
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?> (plane
              distribution). <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?> -m, --distribution
              <?><?><?><?><?><?> <?><?><?><?>.



       SLURM_DISTRIBUTION
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> -m, --distribution
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPU_BIND
              <?><?><?><?><?> (binding) <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?> GPU.  <?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
              --gpu-bind <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPU_FREQ
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?> GPU.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> --gpu-freq
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPUS
              <?><?><?><?><?> GPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> -G, --gpus
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPUS_PER_NODE
              <?><?><?><?><?> GPU <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> <?><?><?> (node) <?><?><?><?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> --gpus-per-node
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_GPUS_PER_SOCKET
              <?><?><?><?><?> GPU <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> <?><?><?><?> (socket) <?><?><?><?><?><?><?><?><?><?><?>.
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> --gpus-per-socket
              <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_HET_SIZE
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_JOB_ACCOUNT
              <?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_CPUS_PER_NODE
              <?><?><?><?><?> CPU<?><?><?> <?><?> <?><?><?><?><?> <?><?><?>
              <?><?> <?><?><?> <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> CPU_count[(xnumber_of_nodes)][,CPU_count
              [(xnumber_of_nodes)] ...].  <?><?><?><?><?><?><?><?>
              <?><?><?><?>: <?><?><?><?><?>
              SLURM_JOB_CPUS_PER_NODE='72(x2),36' <?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?> <?> <?><?><?> (<?><?><?><?><?><?><?><?> <?><?>
              <?><?><?><?> SLURM_JOB_NODELIST <?><?><?><?><?> <?><?><?>
              <?><?><?>) <?><?><?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?>
              <?><?><?> <?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?>.  <?><?><?><?>: <?><?><?><?><?><?> select/linear
              <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?> <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?> <?><?>
              CPU<?><?> <?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?>. <?><?><?><?><?><?>
              select/cons_tres <?><?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?> <?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?>
              <?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              CPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?>.



       SLURM_JOB_END_TIME
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (UNIX
              timestamp) <?><?><?><?> <?><?><?><?> <?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_GPUS
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?><?> (global)
              <?><?><?><?> GPU<?><?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?> <?><?><?> <?><?><?>. <?><?><?><?><?><?><?><?><?> GPU
              <?><?><?><?><?><?> <?><?> cgroup <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?> task/cgroup <?><?><?><?><?>
              <?><?><?> <?><?><?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?><?> <?><?><?><?><?><?><?> (batch) <?>
              <?><?><?><?><?><?> (interactive) <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_JOB_ID
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_LICENSES
              <?><?><?> <?> <?><?><?><?><?> <?><?><?><?>(<?><?><?>)
              <?><?><?><?><?><?><?><?><?><?><?>.



       SLURM_JOB_NODELIST
              <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>.



       SLURM_JOB_NUM_NODES
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?>.



       SLURM_JOB_PARTITION
              <?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?> <?><?>
              <?><?> <?><?> <?><?><?> <?><?><?><?> <?><?><?>.



       SLURM_JOB_QOS
              <?><?><?><?><?> <?><?><?><?><?> <?><?> QOS (<?><?><?><?> Quality
              Of Service) <?><?><?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_JOB_RESERVATION
              <?><?><?><?> <?><?><?><?><?><?><?><?><?><?> (advanced
              reservation) <?><?> <?><?><?><?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?>.



       SLURM_JOB_SEGMENT_SIZE
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?><?> (segments) <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.  <?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              --segment <?><?><?><?> <?><?><?> <?><?><?><?>.



       SLURM_JOB_START_TIME
              <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> (UNIX
              timestamp) <?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?>.



       SLURM_JOBID
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?>. <?><?>
              SLURM_JOB_ID <?><?><?><?><?><?> <?><?><?><?>. <?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_MEM_BIND
              <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              --mem-bind <?><?><?><?><?> <?><?><?><?><?><?>.
              SLURM_MEM_BIND_LIST <?><?><?> <?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?><?> (memory binding)
              <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_MEM_BIND_PREFER
              <?><?><?> <?><?><?><?><?><?> --mem-bind <?><?><?><?>
              <?><?><?><?><?><?> prefer <?><?><?><?><?> <?><?><?> "prefer"
              <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_MEM_BIND_TYPE
              <?><?><?> <?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?> <?><?> <?><?><?><?><?><?> --mem-bind <?><?><?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> <?><?>
              "none"<?> "rank"<?> "map_mem:"<?> "mask_mem:" <?> "local".



       SLURM_MEM_BIND_VERBOSE
              <?><?><?> <?><?><?><?><?><?> --mem-bind <?><?><?><?>
              <?><?><?><?><?><?> verbose <?><?><?><?><?> <?><?><?> "verbose"
              <?><?><?><?><?> <?><?><?><?><?><?>.  <?><?> <?><?><?> <?><?><?>
              <?><?><?><?> <?><?><?> "quiet" <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_MEM_PER_CPU
              <?><?><?><?><?><?> --mem-per-cpu



       SLURM_MEM_PER_GPU
              <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?> GPU <?><?><?><?><?><?><?><?><?><?><?>.  <?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?><?> --mem-per-gpu <?><?><?><?> <?><?><?>
              <?><?><?><?>.



       SLURM_MEM_PER_NODE
              <?><?><?><?><?><?> --mem



       SLURM_NETWORK
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --network <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_NNODES
              <?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?>. SLURM_JOB_NUM_NODES <?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_NODELIST
              <?><?><?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?>.
              SLURM_JOB_NODELIST <?><?> <?><?><?><?><?><?>. <?><?><?>
              <?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_NPROCS
              <?><?><?><?><?><?> SLURM_NTASKS. <?><?><?> <?><?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_NTASKS
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --ntasks <?><?><?><?><?> <?><?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?>
              <?><?><?><?><?><?><?><?><?> --ntasks-per-* <?><?><?><?>
              <?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?> (tasks) <?><?><?><?><?> <?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?><?><?><?>.

              <?><?><?><?>: <?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> srun
              <?><?><?><?> <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> salloc<?>
              <?><?><?><?><?> <?><?><?><?><?><?> --ntasks <?><?> <?><?><?><?>
              srun <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.



       SLURM_NTASKS_PER_CORE
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --ntasks-per-core <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_NTASKS_PER_GPU
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --ntasks-per-gpu <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_NTASKS_PER_NODE
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --ntasks-per-node <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_NTASKS_PER_SOCKET
              <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> --ntasks-per-socket <?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_OOMKILLSTEP
              <?><?><?><?><?><?> --oom-kill-step



       SLURM_OVERCOMMIT
              <?><?><?><?><?><?> --overcommit <?><?><?><?> <?><?><?>
              <?><?><?><?><?> <?><?><?> 1 <?><?><?><?><?> <?><?><?><?><?><?>.



       SLURM_PROFILE
              <?><?><?><?><?><?> --profile



       SLURM_SHARDS_ON_NODE
              <?><?><?><?><?> <?><?><?><?><?> GPU (GPU Shards) <?><?>
              <?><?><?><?><?> <?><?><?> <?><?> <?><?><?> <?><?><?> <?><?><?>.



       SLURM_SUBMIT_DIR
              <?><?><?><?><?><?><?> <?><?> salloc <?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?> <?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> -D,
              --chdir.



       SLURM_SUBMIT_HOST
              <?><?><?> <?><?><?><?><?><?> (hostname)
              <?><?><?><?><?><?><?><?><?> <?><?> salloc <?><?> <?><?>
              <?><?><?><?><?><?><?><?> <?><?><?> <?><?><?>.



       SLURM_TASKS_PER_NODE
              <?><?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?>
              <?><?> <?><?><?> <?><?><?><?> <?><?><?><?>. <?><?><?><?><?><?>
              <?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?> <?><?><?> <?>
              <?><?> <?><?><?><?> <?><?><?><?><?> SLURM_JOB_NODELIST
              <?><?><?><?><?>.  <?><?><?> <?><?> <?><?> <?><?><?> <?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?><?>
              <?><?><?><?><?> <?><?> "(x#)" <?><?><?><?><?> <?><?><?><?><?><?>
              <?><?> "#" <?><?><?><?><?> <?><?><?><?><?> <?><?><?>.
              <?><?><?><?> <?><?><?><?><?> "SLURM_TASKS_PER_NODE=2(x3),1"
              <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?>
              <?><?><?><?> <?><?> <?><?><?><?> <?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?> <?><?><?><?><?><?><?> <?> <?><?><?> <?><?><?><?><?>
              <?><?> <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?>
              <?><?><?>.



       SLURM_THREADS_PER_CORE
              <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> --threads-per-core <?><?>
              SALLOC_THREADS_PER_CORE <?><?><?><?> <?><?><?> <?><?><?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?><?><?>
              <?><?><?><?><?><?><?><?><?> <?><?><?><?> --threads-per-core
              <?><?> SALLOC_THREADS_PER_CORE <?><?><?><?><?> <?><?><?>.
              <?><?><?> <?><?><?><?><?> <?><?><?><?>
              <?><?><?><?><?><?><?><?><?><?><?><?> <?><?><?><?> srun <?><?>
              <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?><?><?><?>
              <?><?><?><?><?><?>.



       SLURM_TRES_PER_TASK
              <?><?><?> <?><?><?><?><?> --tres-per-task <?><?><?><?><?>
              <?><?><?><?><?><?>. <?><?><?> --cpus-per-task <?><?>
              --gpus-per-task <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?>
              <?><?><?><?><?><?><?> <?><?> SLURM_TRES_PER_TASK <?><?><?><?><?>
              <?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?> --tres-per-task
              <?><?><?><?> <?><?><?> <?><?><?>.

       <?><?> <?><?><?><?> <?><?> salloc <?><?> <?><?><?><?><?><?> <?><?>
       <?><?><?><?><?> <?><?><?> PENDING <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?><?> salloc
       <?><?><?><?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?> <?>
       <?><?><?><?> <?><?><?>.

       <?><?> <?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?> <?><?><?><?>
       <?><?><?> <?><?><?><?> <?> salloc <?><?> <?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?>.  salloc <?><?>
       <?><?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?> <?>
       <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?><?>.  <?><?>
       <?><?><?><?><?><?><?> <?><?><?><?> <?><?><?><?> SIGHUP <?><?><?>.
       <?><?><?><?><?><?> SIGHUP <?><?><?><?> <?><?><?><?><?><?> salloc
       <?><?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?> <?> <?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?>.
       <?><?><?><?><?><?><?> <?><?><?><?> SIGTERM <?><?><?> <?><?> <?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?><?> (forward)
       <?><?><?><?><?> <?><?>.


<?><?><?><?><?><?><?> (EXAMPLES)
       <?><?><?><?> <?><?><?><?><?><?> <?><?> <?><?><?><?><?><?> <?> <?><?><?>
       <?><?><?><?> <?><?> xterm <?><?><?><?> <?><?> <?><?><?><?><?><?><?>
       srun <?><?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?><?> <?><?><?><?>:


              $ salloc -N16 xterm
              salloc: Granted job allocation 65537
              # (at this point the xterm appears, and salloc waits for xterm to exit)
              salloc: Relinquishing job allocation 65537


       <?><?><?><?> <?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?> <?>
       <?><?><?><?><?><?><?><?><?><?> <?><?> <?><?><?><?><?><?>
       <?><?><?><?><?> <?><?> <?><?> <?><?> <?><?><?><?><?>:


              $ salloc -N5 srun -n10 myprogram


       <?><?><?><?> <?><?><?><?><?> <?><?> <?><?><?> <?><?><?><?><?><?> <?><?>
       <?> <?><?><?><?><?><?> <?><?> <?><?> <?><?><?><?>
       <?><?><?><?><?><?><?><?><?> <?><?><?><?> <?><?> <?><?><?><?><?><?>
       <?><?> <?><?><?><?><?> <?><?><?><?><?><?><?>:

              $ salloc -w node[2-3] : -w node4 : -w node[5-7] bash
              salloc: job 32294 queued and waiting for resources
              salloc: job 32294 has been allocated resources
              salloc: Granted job allocation 32294


<?><?><?><?><?><?><?><?> <?> <?><?><?><?><?> (COPYING)
       Copyright (C) 2006-2007 The Regents of the University of California.
       <?><?><?><?><?> <?><?><?> <?><?> Lawrence Livermore National Laboratory
       (<?><?><?> DISCLAIMER).
       Copyright (C) 2008-2010 Lawrence Livermore National Security.
       Copyright (C) 2010-2022 SchedMD LLC.

       <?><?><?> <?><?><?><?> <?><?><?><?> <?><?> Slurm<?> <?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?> <?><?><?>.
       <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?><?>
       <https://slurm.schedmd.com> <?><?> <?><?><?><?><?><?>.

       <?><?><?><?><?><?><?><?><?> Slurm <?><?> <?><?><?><?><?><?><?><?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?> <?><?><?><?><?><?><?><?><?> <?><?>
       <?><?> <?><?><?> <?><?><?><?><?> <<<?><?><?><?><?><?> <?><?><?><?><?>
       <?><?><?><?><?><?> <?><?><?>>> <?><?><?><?><?><?><?><?> <?><?>
       <?><?><?><?> <<<?><?><?><?><?> <?><?><?><?><?><?><?><?><?><?><?><?>
       <?><?><?><?>>> <?><?><?><?><?> <?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?> <?> <?><?><?><?><?><?> <?> <?><?> (<?><?>
       <?><?><?><?><?><?> <?><?><?><?><?><?>) <?><?> <?><?><?><?><?>
       <?><?><?><?><?> <?><?><?><?><?><?><?><?> <?><?><?><?> <?>/<?><?>
       <?><?><?><?><?> <?><?><?><?>.

       <?><?><?><?><?><?><?><?><?> Slurm <?><?> <?><?><?> <?><?><?><?> <?><?>
       <?><?><?><?> <?><?><?><?> <?><?><?><?><?> <?><?><?> <?><?><?><?>
       <?><?><?> <?><?><?><?> <?><?> <?><?><?><?> <?><?><?><?><?><?> <?><?><?>
       <?><?><?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?><?><?>
       <?><?><?><?> <?><?> <?><?><?><?><?> <?><?><?><?> <?><?><?><?> <?><?>
       <?><?><?> <?><?><?>. <?><?><?><?> <?><?><?><?><?><?> <?><?><?><?><?>
       <?><?> <<<?><?><?><?><?><?> <?><?><?><?><?> <?><?><?><?><?><?>
       <?><?><?>>> <?><?><?><?><?><?> <?><?><?><?>.


<?><?><?><?><?><?> <?><?><?><?><?><?> (SEE ALSO)
       sinfo(1), sattach(1), sbatch(1), squeue(1), scancel(1), scontrol(1),
       slurm.conf(5), sched_setaffinity (2), numa (3)

Slurm 26.05                     Slurm Commands                       salloc(1)