Www.eu-eela.eu E-science grid facility for Europe and Latin America Grupo Grid Universidad de Los Andes WMS.

Presentación del tema: "Www.eu-eela.eu E-science grid facility for Europe and Latin America Grupo Grid Universidad de Los Andes WMS."— Transcripción de la presentación:

1 www.eu-eela.eu E-science grid facility for Europe and Latin America Grupo Grid Universidad de Los Andes WMS

2 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 2 Overview Contenido Comandos –glite-job-submit –glite-job-status –glite-job-list-match –glite-job-cancel –glite-job-output Posibles fallas.. Ejercicios

3 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 3 Comandos glite-job-submit: permite el envio (submit) de trabajos al Grid glite-job-status: devuelve el estado actual de un trabajo glite-job-cancel: permite cancelar un trabajo glite-job-output: obtiene la salida de un trabajo glite-job-list-match: devuelve todos los recursos que satisfacen los requerimientos de un trabajo

4 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 4 glite-job-submit (1) $ glite-job-submit [options] --vo permite trabajar con una VO diferente a la definida en el UI --output, -o guarda el job Id en un archivo --resource, -r especifica el recurso a donde enviar el trabajo para su ejecución --nomsgi no desplegará mensajes de error en el stdout

5 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 5 glite-job-submit (2) glite-job-submit job1.jdl ==================glite-job-submit Success =================== The job has been successfully submitted to the Network Server. Use glite-job-status command to check job current status. Your job identifier is: - https://lxshare0234.cern.ch:9000/rIBubkFFKhnSQ6CjiLUY8Q ======================================================== glite-job-submit -o jobID job1.jdl

6 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 6 glite-job-status (1) glite-job-status https://lxshare0234.cern.ch:9000/X- ehTxfdlXxSoIdVLS0L0w https://lxshare0234.cern.ch:9000/X- ehTxfdlXxSoIdVLS0L0w ************************************************************* BOOKKEEPING INFORMATION: Status info for the Job: https://lxshare0234.cern.ch:9000/X-ehTxfdlXxSoIdVLS0L0w Current Status: Scheduled Status Reason: Job successfully submitted to Globus Destination: lxshare0277.cern.ch:2119/jobmanager-pbs-infinite reached on: Mon Sep 18 12:21:35 2006 ************************************************************* glite-job-status -i jobID

7 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 7 glite-job-status (2) La opción -i puede ser usada para especificar un archivo que contiene una lista de job IDs (guardados previamente con la opción -o del comando glite-job-submit). glite-job-status -i jobs.list --------------------------------------------------------------------------------------------------- 1 : https://lxshare0234.cern.ch:9000/UPBqN2s2ycxt1TnuU3kzEw 2 : https://lxshare0234.cern.ch:9000/8S6IwPW33AhyxhkSv8Nt9A 3 : https://lxshare0234.cern.ch:9000/E9R0Yl4J7qgsq7FYTnhmsA 4 : https://lxshare0234.cern.ch:9000/Tt80pBn17AFPJyUSN9Qb7Q a : all q : quit --------------------------------------------------------------------------------------------------- Choose one or more jobId(s) in the list - [1-4]all: Si la opción --all es usada, entonces el estado de todos los trabajos enviados por el usuario serán mostrados.

8 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 8 glite-job-status (3) La opción --status (-s) hace que el comando devuelva solo los trabajos que están en el estado especificado, y la opción --exclude (-e) hace que devuelva los trabajos que no están en el estado especificado. Ejemplo: Todos los trabajos asociados a la cuenta que están en el estado DONE o RUNNING. glite-job-status --all -s Done -s Running

9 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 9 glite-job-list-match Es posible ver que CEs son elegibles para ejecutar un trabajo especifico dado por un archivo JDL, usando el comando glite-job-list-match job1.jdl Connecting to host grid007.cecalc.ula.ve, port 7772 Selected Virtual Organisation name (from proxy certificate extension): ula ************************************************************************* COMPUTING ELEMENT IDs LIST The following CE(s) matching your job requirements have been found: *CEId* grid001.cecalc.ula.ve:2119/jobmanager-lcgpbs-ula *************************************************************************

10 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 10 glite-job-submit (3) Un trabajo puede ser enviado a un recurso especifico, usando el comando glite-job-submit con la opción -r glite-job-submit -r grid001.cecalc.ula.ve:2119/jobmanager- lcgpbs-ula -o jobID job1.jdl ===============glite-job-submit Success ================ The job has been successfully submitted to the Network Server. Use glite-job-status command to check job current status. Your job identifier is: -https://grid007.cecalc.ula.ve:9000/Is2cV-buJUf0G78DY_CEVwhttps://grid007.cecalc.ula.ve:9000/Is2cV-buJUf0G78DY_CEVw The job identifier has been saved in the following file: /home/cecalc/yubiryn/jobID ====================================================

11 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 11 glite-job-cancel Un trabajo puede ser cancelado antes de finalizar usando el comando glite-job-cancel glite-job-cancel https://lxshare0234.cern.ch:9000/dAE162is6EStca0VqhVkog https://lxshare0234.cern.ch:9000/dAE162is6EStca0VqhVkog Are you sure you want to remove specified job(s)? [y/n]n :y =================== glite-job-cancel Success=================== The cancellation request has been successfully submitted for the following job(s) - https://lxshare0234.cern.ch:9000/dAE162is6EStca0VqhVkog =========================================================== glite-job-cancel -i jobID

12 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 12 glite-job-output Después que un trabajo ha finalizado (estado DONE), su salida puede ser copiada en el UI glite-job-output https://lxshare0234.cern.ch:9000/snPegp1YMJcnS22yF5pFlg https://lxshare0234.cern.ch:9000/snPegp1YMJcnS22yF5pFlg Retrieving files from host lxshare0234.cern.ch ( for https://lxshare0234.cern.ch:9000/snPegp1YMJcnS22yF5pFlg ) https://lxshare0234.cern.ch:9000/snPegp1YMJcnS22yF5pFlg ***************************************************************** JOB GET OUTPUT OUTCOME Output sandbox files for the job: - https://lxshare0234.cern.ch:9000/snPegp1YMJcnS22yF5pFlg have been successfully retrieved and stored in the directory: /tmp/jobOutput/snPegp1YMJcnS22yF5pFlg ***************************************************************** Por omisión, la salida es almacenada en /tmp, pero es posible especificar en que directorio guardarla usando la opción --dir

13 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 13 Posibles fallas.. Si el comando retorna el siguiente mensaje de error: **** Error: API_NATIVE_ERROR **** Error while calling the "NSClient::multi" native api AuthenticationException: Failed to establish security context... **** Error: UI_NO_NS_CONTACT **** Unable to contact any Network Server Esto significa que existe un problema de autentificación entre el UI y el Network Server (verifique su proxy o contacte con el Administrador del sitio para verificar el certificado del servidor)

14 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 14 Ejercicio 1 1. Compruebe los recursos disponibles para el trabajo job2.jdl 2. Envie a ejecutar el trabajo job2.jdl en uno de los recursos listado en el punto anterior y guarde el identificador en un archivo 3. Verifique el estado del trabajo 4. Cuando el estado del trabajo sea DONE, entonces obtenga y verifique la salida

15 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 15 Ejercicio 2 1. Seleccione un trabajo de su directorio hogar 2. Revise el archivo jdl y compruebe que tenga disponible todas las entradas 3. Verifique que recursos son elegibles para ejecutar el trabajo elegido 4. Envie a ejecutar el trabajo en uno de los recursos listado en el punto anterior 5. Verifique el estado del trabajo 6. Cancele el trabajo 7. Verifique el estado del trabajo 8. Intente obtener la salida del trabajo

16 www.eu-eela.eu Ambientes y Herramientas para la e-Investigación. Mérida, 23.06.2008 16 Preguntas …