1. Tupã¶
2. Monitoramento do jobs utilizando o xpbs¶
O xpbs é um utilitário gráfico que permite monitorar jobs submetidos aos nós computacionais do Tupã. Ele oferece as mesmas funcionalidades do comando qstat, mas de forma simples, direta e centralizada. Para mais informações, digite "man xpbs" no terminal. Para abrir o xpbs, digite apenas "xpbs" no terminal:
$ xpbs &
Depois de executar o comando "xpbs", será aberta a seguinte janela:
Figura 1 - Janela principal do xpbs
Para que o xpbs funcione de forma adequada, deve-se indicar qual servidor do Tupã deverá ser monitorado. Para isso, clique em "Preferences...". A seguinte janela será aberta:
Figura 2 - Janela de preferências do xpbs
Nesta janela, altere o valor padrão do campo "Server hosts" para eslogin13. Outros valores possíveis são: aux20-eth4 e eslogin13:
Figura 3 - Alterando o valor da variável "Server hosts"
Feito isto, basta clicar em "Ok" e a janela de preferências será fechada. Na janela principal do xpbs, clique em "Auto update..." e na janela que abrir, selecione um tempo de atualização das informações mostradas. O tempo mínimo é de 1 minuto:
Figura 4 - Janela do auto update
Depois de selecionado o tempo desejado, clique em "Start updating", na janela seguinte clique em "Ok" e novamente na janela do auto update, clique em "close window".
Figura 5 - Janela de confirmação do auto update
No passo seguinte, na janela principal do xpbs, podemos clicar em "Manual Update" (senão teremos que aguardar a quantidade de tempo determinada para ao auto update para que as informações sejam atualizadas) para atualizar as informações. Feito isto, no painel "Hosts", clicamos na linha apresentada (neste caso, onde está escrito eslogin13) para obtermos informações sobre este servidor:
Figura 6 - Janela principal do xpbs atualizada após clicar no botão "Manual Update"
Figura 7 - Janela de informações sobre o servidor escolhido (eslogin13)
O mesmo procedimento pode ser feito quando clicamos nos itens disponíveis no painel "Jobs":
Figura 8 - Painel "Jobs" da janela principal do xpbs
Figura 9 - Detalhes do job (neste caso, 566897.eslogin13) selecionado
Fazendo-se o mesmo procedimento no painel "Queues", clicando-se em apenas um "queue" (um fila) ou em clicando-se no botão "Select All" e logo em seguida no botão "details", obtém-se uma visão geral da situação das filas disponíveis no Tupã:
Figura 10 - Detalhes das filas no Tupã
Com o xpbs é possível também criar uma lista de monitoramento de jobs executados. Para isso, na janela principal do xpbs, clique no botão "Track job..." e na janela que se abrir, digite o nome do usuário do qual deseja monitor os jobs. É possível acrescentar vários usuários, mas serão monitorados os jobs apenas no(s) servidore(s) previamente especificados:
Figura 11 - Acrescentando usuários que terão os jobs monitorados
Figura 12 - Acrescentando mais usuários
Para iniciar o monitoramento, clique no botão "start/reset tracking" e depois em "close window" se desejar.
Com isto, quando algum job for terminado ou abortado, o botão "Track job..." na janela principal do xpbs ficará vermelho:
Figura 13 - Botão "Track job..." fica vermelho quando algum job muda de estado
Para verificar os detalhes da ocorrência, basta clicar no botão "Track job..." novamente e na janela que abrir, no(s) nome(s) do(s) job(s) que estiverem na lista "Jobs Found Completed". Para cada jobs que for clicado, aparecerá uma nova janela com os arquivos de log e erro do jobs. Caso nenhum erro tenha ocorrido, o painel de erros estará vazio:
Figura 14 - Painel de out e erro do job selecionado
Vale lembrar que na janela principal do xpbs, no painel inferior "INFO" são mostrado os comandos utilizados para a recuperação das informações mostradas dentro das janelas. Por exemplo, quando clicamos nos itens do painel "Jobs" e clicamos no botão "detail", é executado o comando (por exemplo):
$ qstat -f 566594.eslogin13@eslogin13
Cuja saída é exatamente a mesma informação mostrada pela janela de informações do job:
Job Id: 566594.eslogin13 Job_Name = mod299 Job_Owner = carlos.bastarz@eslogin05-eth0 resources_used.cpupercent = 0 resources_used.cput = 00:00:00 resources_used.mem = 5304kb resources_used.ncpus = 1 resources_used.vmem = 41436kb resources_used.walltime = 00:08:30 job_state = R queue = pesq.micro_high server = eslogin13 Account_Name = CPTEC Checkpoint = u ctime = Fri Jun 8 13:44:51 2012 Error_Path = eslogin05-eth0:/scratchin/grupos/assim_dados/home/carlos.basta rz/G3DVAR/datainout/agcm/model/exec_NMC/mod299.e566594 exec_host = login5/10 exec_vnode = (login5:ncpus=1) Hold_Types = n Join_Path = oe Keep_Files = n Mail_Points = a mtime = Fri Jun 8 13:45:07 2012 Output_Path = eslogin05-eth0:/scratchin/grupos/assim_dados/home/carlos.bast arz/G3DVAR/datainout/agcm/model/exec_NMC/setout/Out.model.NMC.201101011 2.1339163091.%s.MPI480.T299L64.out Priority = 0 qtime = Fri Jun 8 13:44:51 2012 Rerunable = True Resource_List.mpparch = XT Resource_List.mppdepth = 1 Resource_List.mppnppn = 24 Resource_List.mppwidth = 480 Resource_List.ncpus = 1 Resource_List.nodect = 1 Resource_List.place = pack Resource_List.select = 1:ncpus=1 Resource_List.walltime = 01:00:00 stime = Fri Jun 8 13:45:07 2012 session_id = 31237 Shell_Path_List = /bin/bash jobdir = /stornext/home/carlos.bastarz substate = 42 Variable_List = work_grh_agcm_dataout=/scratchout/grupos/assim_dados/home/c arlos.bastarz/G3DVAR/datainout/agcm/grh/dataout, work_pre_agcm_run=/scratchout/grupos/assim_dados/home/carlos.bastarz/G 3DVAR/datainout/agcm/pre/exec,dirgrads=/opt/grads/2.0.a9/bin, SmoothTopo=F,JM=450, dirdata=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/datai nout/agcm,PBS_O_LANG=en_US.UTF-8,XCURSOR_THEME=DMZ, INFOPATH=/usr/local/info:/usr/share/info:/usr/info,modelpos=_NMC, aspa=\', TVMEMDEBUG_POST_LINK_OPTS= -L/opt/toolworks/totalview.8.9.2/linux-x86- 64/lib -ltvheap_cnl_static, XDG_DATA_DIRS=/usr/share:/etc/opt/kde3/share:/opt/kde3/share, GetOzone=T,KMIN=28,HISTSIZE=1000, CRAY_MPICH2_BASEDIR=/opt/cray/mpt/5.4.3/xt/gemini, ATP_HOME=/opt/cray/atp/1.4.2, MANPATH=/opt/cray/mpt/5.4.3/xt/gemini/man/mpich2:/opt/xt-libsci/11.0.0 5/man:/opt/cray/xt-asyncpe/5.07/man:/opt/cray/atp/1.4.2/man:/opt/pgi/12 .2.0/linux86-64/12.2/man:/opt/toolworks/totalview.8.9.2/man:/opt/cray/l lm/default/man:/opt/pbs/10.4.0.101257/man:/opt/modules/3.2.6.6/man:/usr /local/man:/usr/share/man:/opt/cray/share/man,PROFILEREAD=true, subt_obs_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/ datarun/obs, home_model_agcm_source=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm /model/source,di=01,df=01,KMOUT=64,LABELW=2011010121,LABELI=2011010112, FROM_HEADER=, public_bkg=/scratchin/grupos/assim_dados/home/gdad/public/GSI/BKG, subt_model_agcm_datain=/scratchin/grupos/assim_dados/home/carlos.basta rz/G3DVAR/datainout/agcm/model/datain,dw=01, LIBRARYMODULES=/opt/modules/3.2.6.6/init/.librarymodules:acml:alps:app rentice2:blcr:dmapp:fftw:ga:gni-headers:hdf5:libfast:mpich1:mrnet:netcd f:ntk:onesided:petsc:petsc-complex:pmi:portals:rca:trilinos:udreg:ugni: xpmem:xt-atp:xt-lgdb:xt-libsci:xt-mpt:xt-papi:/etc/opt/cray/modules/sit e_librarymodules,LABELF=2011010121, home_model_agcm=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/model, HOSTNAME=eslogin05, HOME_suite=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm, MODULESHOME=/opt/modules/3.2.6.6, WORK_HOME=/scratchout/grupos/assim_dados/home/carlos.bastarz, MACHTYPE=x86_64-suse-linux,GROUP=assim_dados,initlz=2,MINICOM=-c on, subt_obs_dataout=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3D VAR/datainout/obs,CSHEDIT=emacs,LESSOPEN=lessopen.sh %s, CRAY_UDREG_INCLUDE_OPTS=-I/opt/cray/udreg/2.3.1-1.0400.3778.7.3.gem/in clude,USER=carlos.bastarz,GSSTEP=0,PGI_VERS_STR=12.2.0, PGROUPD_LICENSE_FILE=/opt/pgi/license.dat,NDFCT0618=12h,CPU=x86_64, work_gsi_datain=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3D VAR/datainout/gsi/datain, subt_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/data run, dirfNameOutputNEXT=/scratchin/grupos/assim_dados/home/carlos.bastarz/G 3DVAR/datainout/agcm/model/dataout/TQ0299L064/2011010118,hold=,TRC=299, TRUNC=TQ0299, work_grh_agcm=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVA R/datainout/agcm/grh,PBS_O_HOST=eslogin05-eth0, home_run_agcm=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/run, subt_agcm=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/dat ainout/agcm, home_pre_agcm_databcs=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/ pre/databcs,QT_HOME_DIR=/usr/share/desktop-data, path_in=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/datai nout/agcm/model/datain, home_sfc=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm2gsi, work_agcm=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR/da tainout/agcm, home_gsi_gsisa=/stornext/home/carlos.bastarz/G3DVAR/cptec/gsi/SRC/GSIs a,XDG_CONFIG_DIRS=/etc/xdg,ANL=GANLNMC2011010112S.unf.TQ0299L064, work_pre_agcm_databcs=/scratchout/grupos/assim_dados/home/carlos.basta rz/G3DVAR/datainout/agcm/pre/databcs, subt_model_agcm=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DV AR/datainout/agcm/model,gaussgiven=.TRUE., GNU_PRE_COMPILE_OPTS= -march=amdfam10, agcm_scripts_g3dvar=/stornext/home/carlos.bastarz/G3DVAR/run/scripts/a gcm_scripts, _LMFILES_=/opt/modulefiles/modules/3.2.6.6:/opt/modulefiles/pbs/10.4.0 .101257:/opt/cray/xt-asyncpe/default/modulefiles/xtpe-network-gemini:/o pt/modulefiles/PrgEnv-pgi/3.1.72:/opt/modulefiles/xt-totalview/8.9.2:/o pt/modulefiles/totalview-support/1.1.2:/opt/modulefiles/pgi/12.2.0:/opt /cray/xt-asyncpe/default/modulefiles/xtpe-mc12:/opt/modulefiles/tupa2/1 .0.0:/opt/cray/gem/modulefiles/nodestat/2.2-1.0400.28140.5.3.gem:/opt/c ray/gem/modulefiles/sdb/1.0-1.0400.29394.12.45.gem:/opt/cray/modulefile s/MySQL/5.0.64-1.0000.4667.20.1:/opt/cray/gem/modulefiles/udreg/2.3.1-1 .0400.3778.7.3.gem:/opt/cray/gem/modulefiles/ugni/2.3-1.0400.4127.5.20. gem:/opt/cray/gem/modulefiles/gni-headers/2.1-1.0400.4156.6.1.gem:/opt/ cray/gem/modulefiles/dmapp/3.2.1-1.0400.3965.10.63.gem:/opt/cray/gem/mo dulefiles/xpmem/0.1-2.0400.30792.5.6.gem:/opt/modulefiles/hss-llm/6.0.0 :/opt/modulefiles/admin-modules/1.0.2-1.0400.28857.5.1.gem:/opt/modulef iles/Base-opts/1.0.2-1.0400.28857.5.1.gem:/opt/cray/modulefiles/atp/1.4 .2:/opt/modulefiles/xt-asyncpe/5.07:/opt/cray/modulefiles/xt-libsci/11. 0.05:/opt/cray/modulefiles/xt-mpich2/5.4.3:/opt/cray/gem/modulefiles/pm i/3.0.0-1.0000.8661.28.2807.gem,PAGER=less,MODULE_VERSION=3.2.6.6, home_pos_agcm=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/pos, LIBSCI_VERSION=11.0.05, work_gsi_dataout=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3 DVAR/datainout/gsi/dataout,RES=mod299, CRAY_XPMEM_INCLUDE_OPTS=-I/opt/cray/xpmem/0.1-2.0400.30792.5.6.gem/inc lude,RESIN=62,QUEUE=pesq, home_pos_agcm_run=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/pos/ exec,home_pre_agcm=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/pre, HOME=/stornext/home/carlos.bastarz,total=1, LD_LIBRARY_PATH=/opt/pgi/12.2.0/linux86-64/12.2/libso:/opt/pgi/12.2.0/ linux86-64/12.2/lib:/opt/cray/llm/default/lib64:/opt/cray/mpt/5.2.2/xt/ seastar/mpich2-pgi/lib:/opt/cray/mpt/5.2.2/xt/seastar/sma/lib64, WALLTIME=1:00:00,prefi=,FCT=09,ASYNCPE_DIR=/opt/cray/xt-asyncpe/5.07, G_BROKEN_FILENAMES=1, home_obs=/stornext/home/carlos.bastarz/G3DVAR/cptec/obs, run_g3dvar=/stornext/home/carlos.bastarz/G3DVAR/run, GRHDATAOUT=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/da tainout/agcm/grh/dataout, public_fix=/scratchin/grupos/assim_dados/home/gdad/public/GSI/FIX, PGI_PATH=/opt/pgi/12.2.0,NPROC=480, MODULEPATH=/opt/totalview-support/1.1.2/modulefiles:/opt/cray-xt-modul efiles:/opt/cray/gem/modulefiles:/opt/cray/xt-asyncpe/default/modulefil es:/opt/cray/modulefiles:/opt/modulefiles, public_gsi=/scratchin/grupos/assim_dados/home/gdad/public/GSI, PBS_O_SYSTEM=Linux, home_grh_agcm_run=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/grh/ exec,NNTPSERVER=news,PGI_VERSION=12.2,G_FILENAME_ENCODING=@locale\,UTF-8\, ISO-8859-15\,CP1252,HOST=eslogin05,PBS_O_SHELL=/bin/bash, subt_gsi_dataout=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3D VAR/datainout/gsi/dataout, home_cptec_bin=/stornext/home/carlos.bastarz/G3DVAR/cptec/bin, subt_pre_agcm_databcs=/scratchin/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/pre/databcs,RESOUT=299, work_gsi=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR/dat ainout/gsi,mf=01,LESSCLOSE=lessclose.sh %s %s,mi=01, SSH_CLIENT=150.163.144.122 44843 22,mw=01,DK_SAN=,MORE=-sl, DMAPP_ABORT_ON_ERROR=1, public_rc=/scratchin/grupos/assim_dados/home/gdad/public/GSI/RC, PBS_O_HOME=/stornext/home/carlos.bastarz, home_gsi_src=/stornext/home/carlos.bastarz/G3DVAR/cptec/gsi/SRC, HOSTTYPE=x86_64,DATA=2011010112,ASYNCPE_VERSION=5.07,GrADSOnly=F, TERM=xterm,runmodel=_NMC, public_crtm=/scratchin/grupos/assim_dados/home/gdad/public/GSI/REL2, GrADS=T,PGI=/opt/pgi/12.2.0,LV=64,pbs_server1=eslogin13, pbs_server2=aux20-eth4, subt_sfc_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/ datarun/interface, CRAY_MPICH2_DIR=/opt/cray/mpt/5.4.3/xt/gemini/mpich2-pgi/109, LIBSCI_BASE_DIR=/opt/xt-libsci/11.0.05,pfxgrd=G00450L064, CRAY_GNI_HEADERS_INCLUDE_OPTS=-I/opt/cray/gni-headers/2.1-1.0400.4156. 6.1.gem/include,eigeninit=.FALSE., subt_logs_dataout=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3 DVAR/out_log,UTC=12,MODULE_VERSION_STACK=3.2.6.6, caldate=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/utils/bin/cald ate.3.0.1, subt_grh_agcm_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3 DVAR/datainout/agcm/grh/exec,cpu_mpi=480,AnlPref=gdas1, subt_pos_agcm_dataout=/scratchin/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/pos/dataout, work_gsi_datain_obs=/scratchout/grupos/assim_dados/home/carlos.bastarz /G3DVAR/datainout/gsi/datain/Obs, work_model_agcm=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3D VAR/datainout/agcm/model,GRID=Q,RESO=299,LESSKEY=/etc/lesskey.bin, MRES=TQ0299L064,AUX_QUEUE=pesq.q,RmGANL=F, work_obs_run=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datarun/obs,PREFY=NMC,PYTHONSTARTUP=/etc/pythonstart, work_grh_agcm_run=/scratchout/grupos/assim_dados/home/carlos.bastarz/G 3DVAR/datainout/agcm/grh/exec, OLDPWD=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/run, subt_pre_agcm_datain=/scratchin/grupos/assim_dados/home/carlos.bastarz /G3DVAR/datainout/agcm/pre/datain, PWD=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/datainout /agcm/model/exec_NMC, public_gdad=/scratchin/grupos/assim_dados/home/gdad/public, PATHENV=/stornext/home/carlos.bastarz/G3DVAR/run/scripts/agcm_scripts, CRAY_LD_LIBRARY_PATH=/opt/cray/pmi/3.0.0-1.0000.8661.28.2807.gem/lib64 :/opt/cray/mpt/5.4.3/xt/gemini/mpich2-pgi/109/lib:/opt/xt-libsci/11.0.0 5/pgi/109/mc12/lib,XTOS_VERSION=3.1.72,MPPBS=#PBS -l mppwidth=480, RCLOCAL_BASEOPTS=true,LESS=-M -I,TRCLV=TQ0299L064, USERMODULES=/opt/modules/3.2.6.6/init/.usermodules:acml:alps:apprentic e2:atp:blcr:cce:craypat:dmapp:fftw:ga:gcc:gni-headers:hdf5:intel:libfas t:mpich1:mrnet:netcdf:ntk:onesided:pathscale:petsc:petsc-complex:pgi:pm i:portals:PrgEnv-cray:PrgEnv-gnu:PrgEnv-intel:PrgEnv-pathscale:PrgEnv-p gi:rca:stat:trilinos:udreg:ugni:xpmem:xt-asyncpe:xt-craypat:xt-lgdb:xt- libsci:xt-mpt:xt-papi:xt-totalview:/etc/opt/cray/modules/site_usermodul es,TOTALVIEW_SUPPORT_LIB=/opt/totalview-support/1.1.2/lib, XKEYSYMDB=/usr/share/X11/XKeysymDB, subt_pos_agcm_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3 DVAR/datainout/agcm/pos/exec,SHELL=/bin/bash, CRAY_MPICH2_ROOTDIR=/opt/cray/mpt/5.4.3/xt, LESS_ADVANCED_PREPROCESSOR=no,CRAY_CPU_TARGET=mc12,timestep=225, subt_gsi=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/data inout/gsi,CRAY_MPICH2_VERSION=5.4.3, PRGENVMODULES=/opt/modules/3.2.6.6/init/.prgenvmodules:PrgEnv-cray:Prg Env-gnu:PrgEnv-intel:PrgEnv-pathscale:PrgEnv-pgi,LABELANL=2011010112, yi=2011,DHFCT=1, home_pos_agcm_source=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/p os/source, CRAY_PMI_POST_LINK_OPTS=-L/opt/cray/pmi/3.0.0-1.0000.8661.28.2807.gem/ lib64, home_pre_agcm_sources=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/ pre/sources,mgiven=.TRUE.,yf=2011,PREFX=NMC,MPICH_ABORT_ON_ERROR=1, work_sfc_run=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datarun/interface,PE_ENV=PGI, PE_PRODUCT_LIST=CRAY_PMI:CRAY_MPICH2:LIBSCI:ASYNCPE:ATP:TOTALVIEW:TOTA LVIEW-SUPPORT:PGI:CRAY_LLM:CRAY_XPMEM:CRAY_DMAPP:CRAY_UGNI:CRAY_UDREG:X TPE_MC12,yw=2011, subt_g3dvar=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR, ThreadsperMPITASK=1, subt_pos_agcm=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datainout/agcm/pos, scripts_g3dvar=/stornext/home/carlos.bastarz/G3DVAR/run/scripts, ATP_MRNET_COMM_PATH=/opt/cray/atp/1.4.2/bin/atp_mrnet_commnode_wrapper , subt_pre_agcm=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datainout/agcm/pre,SSH_SENDS_LOCALE=yes,PREFXI=NMC,PBS_SERVER=eslogin13, PREFXO=NMC,MAQUI=eslogin05-eth0,MAIL=/var/mail/carlos.bastarz, SSH_CONNECTION=150.163.144.122 44843 150.163.223.25 22, TOOLMODULES=/opt/modules/3.2.6.6/init/.toolmodules:apprentice2:atp:cra ypat:mrnet:stat:xt-craypat:xt-lgdb:xt-papi:xt-totalview:/etc/opt/cray/m odules/site_toolmodules, DK_suite2=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/dat ainout/agcm,GDASOnly=F, work_run_gsi=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datarun/gsi,PBS_O_LOGNAME=carlos.bastarz,ESWRAP_LOGIN=login5, CRAY_DMAPP_POST_LINK_OPTS=-L/opt/cray/dmapp/3.2.1-1.0400.3965.10.63.ge m/lib64,INPUTRC=/etc/inputrc, work_model_agcm_run=/scratchout/grupos/assim_dados/home/carlos.bastarz /G3DVAR/datainout/agcm/model/exec, work_pre_agcm_dataout=/scratchout/grupos/assim_dados/home/carlos.basta rz/G3DVAR/datainout/agcm/pre/dataout,ATP_POST_LINK_OPTS=-Wl\, -L/opt/cray/atp/1.4.2/lib/ -Wl\,-lAtpSigHandler -Wl\, --undefined=__atpHandlerInstall, subt_obs_datain=/stornext/grupos/assim_dados/oper/letkf/datainout/obs/ prepbufr,SUBMIT_HOME=/scratchin/grupos/assim_dados/home/carlos.bastarz, NLV=64,SHLVL=3, CRAY_UGNI_INCLUDE_OPTS=-I/opt/cray/ugni/2.3-1.0400.4127.5.20.gem/inclu de, CRAY_XPMEM_POST_LINK_OPTS=-L/opt/cray/xpmem/0.1-2.0400.30792.5.6.gem/l ib64, PBS_O_PATH=/opt/cray/pmi/3.0.0-1.0000.8661.28.2807.gem/bin:/opt/cray/x t-asyncpe/5.07/bin:/opt/cray/atp/1.4.2/bin:/opt/pgi/12.2.0/linux86-64/1 2.2/bin:/opt/toolworks/totalview.8.9.2/bin:/opt/totalview-support/1.1.2 /bin:/opt/cray/llm/default/bin:/opt/cray/llm/default/etc:/opt/cray/xpme m/0.1-2.0400.30792.5.6.gem/bin:/opt/cray/dmapp/3.2.1-1.0400.3965.10.63. gem/bin:/opt/cray/ugni/2.3-1.0400.4127.5.20.gem/bin:/opt/cray/udreg/2.3 .1-1.0400.3778.7.3.gem/bin:/opt/cray/MySQL/5.0.64-1.0000.4667.20.1/sbin :/opt/cray/MySQL/5.0.64-1.0000.4667.20.1/bin:/opt/cray/sdb/1.0-1.0400.2 9394.12.45.gem/bin:/opt/cray/nodestat/2.2-1.0400.28140.5.3.gem/bin:/opt /pbs/10.4.0.101257/bin:/opt/modules/3.2.6.6/bin:/stornext/home/carlos.b astarz/bin:/usr/local/bin:/usr/bin:/bin:/usr/bin/X11:/usr/X11R6/bin:/us r/games:/usr/lib/mit/bin:/usr/lib/mit/sbin:/opt/pathscale/bin:/opt/nedi t/5.5:/opt/cray/bin, work_pre_agcm=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVA R/datainout/agcm/pre, inctime=/stornext/home/carlos.bastarz/G3DVAR/cptec/bin/inctime, PATHBASE=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm, SetLinear=FALSE,XTPE_NETWORK_TARGET=gemini,ENV=/etc/bash.bashrc, PKG_CONFIG_PATH=/opt/cray/pmi/3.0.0-1.0000.8661.28.2807.gem/lib64/pkgc onfig:/opt/cray/xpmem/0.1-2.0400.30792.5.6.gem/lib64/pkgconfig:/opt/cra y/dmapp/3.2.1-1.0400.3965.10.63.gem/lib64/pkgconfig:/opt/cray/gni-heade rs/2.1-1.0400.4156.6.1.gem/lib64/pkgconfig:/opt/cray/ugni/2.3-1.0400.41 27.5.20.gem/lib64/pkgconfig:/opt/cray/udreg/2.3.1-1.0400.3778.7.3.gem/l ib64/pkgconfig:/opt/cray/MySQL/5.0.64-1.0000.4667.20.1/lib64/pkgconfig, XNLSPATH=/usr/share/X11/nls,PBS_O_MAIL=/var/mail/carlos.bastarz, _=/opt/pbs/10.4.0.101257/bin/qsub, work_pos_agcm_datain=/scratchout/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/pos/datain, work_model_agcm_datain=/scratchout/grupos/assim_dados/home/carlos.bast arz/G3DVAR/datainout/agcm/model/datain, work_dataout=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datainout, LS_COLORS=no=00:fi=00:di=01;34:ln=00;36:pi=40;33:so=01;35:do=01;35:bd= 40;33;01:cd=40;33;01:or=41;33;01:ex=00;32:*.cmd=00;32:*.exe=01;32:*.com =01;32:*.bat=01;32:*.btm=01;32:*.dll=01;32:*.tar=00;31:*.tbz=00;31:*.tg z=00;31:*.rpm=00;31:*.deb=00;31:*.arj=00;31:*.taz=00;31:*.lzh=00;31:*.l zma=00;31:*.zip=00;31:*.zoo=00;31:*.z=00;31:*.Z=00;31:*.gz=00;31:*.bz2= 00;31:*.tb2=00;31:*.tz2=00;31:*.tbz2=00;31:*.avi=01;35:*.bmp=01;35:*.fl i=01;35:*.gif=01;35:*.jpg=01;35:*.jpeg=01;35:*.mng=01;35:*.mov=01;35:*. mpg=01;35:*.pcx=01;35:*.pbm=01;35:*.pgm=01;35:*.png=01;35:*.ppm=01;35:* .tga=01;35:*.tif=01;35:*.xbm=01;35:*.xpm=01;35:*.dl=01;35:*.gl=01;35:*. wmv=01;35:*.aiff=00;32:*.au=00;32:*.mid=00;32:*.mp3=00;32:*.ogg=00;32:* .voc=00;32:*.wav=00;32:, home_g3dvar=/stornext/home/carlos.bastarz/G3DVAR, home_cptec=/stornext/home/carlos.bastarz/G3DVAR/cptec, WINDOWMANAGER=/usr/bin/gnome,CRAY_LLM_DIR=/opt/cray/llm/default, home_agcm=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm, work_pos_agcm_dataout=/scratchout/grupos/assim_dados/home/carlos.basta rz/G3DVAR/datainout/agcm/pos/dataout,COLORTERM=1,IM=900, CRAY_DMAPP_INCLUDE_OPTS=-I/opt/cray/dmapp/3.2.1-1.0400.3965.10.63.gem/ include -I/opt/cray/gni-headers/2.1-1.0400.4156.6.1.gem/include, LABELFCT=2011010121, work_gsi_datain_bkg=/scratchout/grupos/assim_dados/home/carlos.bastarz /G3DVAR/datainout/gsi/datain/Bkg, subt_gsi_datain=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DV AR/datainout/gsi/datain, FILEENV=/stornext/home/carlos.bastarz/G3DVAR/run/scripts/agcm_scripts/ EnvironmentalVariablesMCGA, FEXE=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/datainou t/agcm/pre/exec,GetTracers=F, FFTW_SYSTEM_WISDOM_DIR=/opt/xt-libsci/11.0.05,DISPLAY=localhost:38.0, home_model_agcm_datain=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm /model/datain,LANG=en_US.UTF-8, subt_run_gsi=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/ datarun/gsi, subt_grh_agcm_dataout=/scratchin/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/grh/dataout, subt_pre_agcm_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3 DVAR/datainout/agcm/pre/exec, PBS_O_WORKDIR=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datainout/agcm/model/exec_NMC, work_g3dvar=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR, OSTYPE=linux, dirfNameOutput=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVA R/datainout/agcm/model/dataout/TQ0299L064/2011010112, TARGETMODULES=/opt/modules/3.2.6.6/init/.targetmodules:craype-cpu-sand ybridge:craype-network-aries:xtpe-barcelona:xtpe-interlagos:xtpe-istanb ul:xtpe-mc12:xtpe-mc8:xtpe-netork-aries:xtpe-network-gemini:xtpe-networ k-seastar:xtpe-shanghai:xtpe-target-cnl:xtpe-target-native:/etc/opt/cra y/modules/site_targetmodules,XTPE_MC12_ENABLED=ON, home_gsi=/stornext/home/carlos.bastarz/G3DVAR/cptec/gsi, work_pos_agcm_run=/scratchout/grupos/assim_dados/home/carlos.bastarz/G 3DVAR/datainout/agcm/pos/exec,hw=21, home_pos_agcm_datain=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/p os/datain, CRAY_UGNI_POST_LINK_OPTS=-L/opt/cray/ugni/2.3-1.0400.4127.5.20.gem/lib 64,SHMEM_ABORT_ON_ERROR=1,hi=12, public_agcm=/scratchin/grupos/assim_dados/home/gdad/public/AGCM, BUILD_OPTS=/opt/cray/xt-asyncpe/5.07/bin/build-opts,hf=21, CRAY_PMI_INCLUDE_OPTS=-I/opt/cray/pmi/3.0.0-1.0000.8661.28.2807.gem/in clude,cpu_node=24,SSH_TTY=/dev/pts/19, work_pos_agcm=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVA R/datainout/agcm/pos, subt_grh_agcm=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datainout/agcm/grh, subt_pos_agcm_datain=/scratchin/grupos/assim_dados/home/carlos.bastarz /G3DVAR/datainout/agcm/pos/datain,RUNPOS=No, home_pre_agcm_scripts=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/ pre/scripts, LOADEDMODULES=modules/3.2.6.6:pbs/10.4.0.101257:xtpe-network-gemini:Pr gEnv-pgi/3.1.72:xt-totalview/8.9.2:totalview-support/1.1.2:pgi/12.2.0:x tpe-mc12:tupa2/1.0.0:nodestat/2.2-1.0400.28140.5.3.gem:sdb/1.0-1.0400.2 9394.12.45.gem:MySQL/5.0.64-1.0000.4667.20.1:udreg/2.3.1-1.0400.3778.7. 3.gem:ugni/2.3-1.0400.4127.5.20.gem:gni-headers/2.1-1.0400.4156.6.1.gem :dmapp/3.2.1-1.0400.3965.10.63.gem:xpmem/0.1-2.0400.30792.5.6.gem:hss-l lm/6.0.0:admin-modules/1.0.2-1.0400.28857.5.1.gem:Base-opts/1.0.2-1.040 0.28857.5.1.gem:atp/1.4.2:xt-asyncpe/5.07:xt-libsci/11.0.05:xt-mpich2/5 .4.3:pmi/3.0.0-1.0000.8661.28.2807.gem,NDFCT0012=180h, subt_dataout=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/ datainout,PREFIC=NMC,PREFIX=NMC,LOGNAME=carlos.bastarz, PATH=/opt/cray/pmi/3.0.0-1.0000.8661.28.2807.gem/bin:/opt/cray/xt-asyn cpe/5.07/bin:/opt/cray/atp/1.4.2/bin:/opt/pgi/12.2.0/linux86-64/12.2/bi n:/opt/toolworks/totalview.8.9.2/bin:/opt/totalview-support/1.1.2/bin:/ opt/cray/llm/default/bin:/opt/cray/llm/default/etc:/opt/cray/xpmem/0.1- 2.0400.30792.5.6.gem/bin:/opt/cray/dmapp/3.2.1-1.0400.3965.10.63.gem/bi n:/opt/cray/ugni/2.3-1.0400.4127.5.20.gem/bin:/opt/cray/udreg/2.3.1-1.0 400.3778.7.3.gem/bin:/opt/cray/MySQL/5.0.64-1.0000.4667.20.1/sbin:/opt/ cray/MySQL/5.0.64-1.0000.4667.20.1/bin:/opt/cray/sdb/1.0-1.0400.29394.1 2.45.gem/bin:/opt/cray/nodestat/2.2-1.0400.28140.5.3.gem/bin:/opt/pbs/1 0.4.0.101257/bin:/opt/modules/3.2.6.6/bin:/stornext/home/carlos.bastarz /bin:/usr/local/bin:/usr/bin:/bin:/usr/bin/X11:/usr/X11R6/bin:/usr/game s:/usr/lib/mit/bin:/usr/lib/mit/sbin:/opt/pathscale/bin:/opt/nedit/5.5: /opt/cray/bin, subt_pre_agcm_scripts=/scratchin/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/pre/scripts, work_pre_agcm_datain=/scratchout/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/pre/datain, subt_model_agcm_dataout=/scratchin/grupos/assim_dados/home/carlos.bast arz/G3DVAR/datainout/agcm/model/dataout, subt_model_agcm_run=/scratchin/grupos/assim_dados/home/carlos.bastarz/ G3DVAR/datainout/agcm/model/exec, subt_bkg_dataout=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3D VAR/datainout/gsi/Bkg,NMSST=sstwkl, work_obs_dataout=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3 DVAR/datainout/obs, DK_suite=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/data inout/agcm,CRAY_PRE_COMPILE_OPTS=-hnetwork=gemini, home_pre_agcm_datain=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/p re/datain, work_pre_agcm_scripts=/scratchout/grupos/assim_dados/home/carlos.basta rz/G3DVAR/datainout/agcm/pre/scripts, INFODIR=/usr/local/info:/usr/share/info:/usr/info, subt_pre_agcm_dataout=/scratchin/grupos/assim_dados/home/carlos.bastar z/G3DVAR/datainout/agcm/pre/dataout,DIRGRADS=/opt/grads/2.0.a9/bin, tmstp=1339163091, MPICH_DIR=/opt/cray/mpt/5.4.3/xt/gemini/mpich2-pgi/109, work_run=/scratchout/grupos/assim_dados/home/carlos.bastarz/G3DVAR/dat arun, work_model_agcm_dataout=/scratchout/grupos/assim_dados/home/carlos.bas tarz/G3DVAR/datainout/agcm/model/dataout, subt_bkg_cptec=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVA R/datainout/gsi/Bkg/cptec,CRAY_PRGENVPGI=loaded, CRAY_SITE_LIST_DIR=/etc/opt/cray/modules,RCLOCAL_PRGENV=true, usuario=carlos.bastarz, work_logs_dataout=/scratchout/grupos/assim_dados/home/carlos.bastarz/G 3DVAR/out_log, dirhome=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/pre, PREFIXO=NMC,LABELFGS=2011010118, DK=/scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR/datainout/ agcm, CRAY_UDREG_POST_LINK_OPTS=-L/opt/cray/udreg/2.3.1-1.0400.3778.7.3.gem/ lib64, home_grh_agcm=/stornext/home/carlos.bastarz/G3DVAR/cptec/agcm/grh, XAUTHLOCALHOSTNAME=eslogin05,PBS_O_QUEUE=pesq comment = Job run at Fri Jun 08 at 13:44 on (login5:ncpus=1) alt_id = 8391 etime = Fri Jun 8 13:44:51 2012 accounting_id = 0x441000018cd Submit_arguments = /scratchin/grupos/assim_dados/home/carlos.bastarz/G3DVAR /datainout/agcm/model/exec_NMC/modg.NMC.TQ0299L064.eslogin05-eth0