Cluster TOCHTLI Pruebas de rendimiento de red 26 de abril de 2007-ICN.

Presentación del tema: "Cluster TOCHTLI Pruebas de rendimiento de red 26 de abril de 2007-ICN."— Transcripción de la presentación:

1 Cluster TOCHTLI Pruebas de rendimiento de red 26 de abril de 2007-ICN

2 Conversión de datos Existe una ligera confusión al hablar de bits y bytes en comunicaciones y almacenamiento. Para describir la transferencia de datos en bits usaremos la base 10. 1 bit (b) = 0 or 1 1 kilobit ( kb) = 10^3 bits = 1,000 bits 1 Megabit (Mb) = 10^6 bits = 1,000,000 bits 1 Gigabit (Gb) = 10^9 bits = 1,000,000,000 bits

3 Conversión de datos Para hablar en terminos de bytes usaremos el la base 2 1 byte (B) = 8 bits (b) 1 Kilobyte (K / KB) = 2^10 bytes = 1,024 bytes 1 Megabyte (M / MB) = 2^20 bytes = 1,048,576 bytes 1 Gigabyte (G / GB) = 2^30 bytes = 1,073,741,824 bytes 1 Terabyte (T / TB) = 2^40 bytes = 1,099,511,627,776 bytes

4 Datos útiles Algunos valores útiles son: 54Kbps=6.5918 KB/s (modem) 100Kbps= 12.207 KB/s 500Kbps= 61.035KB/s 1Mbps=122.07KB/s 24Mbps=2.861 MB/s 34Mbps=4.0531MB/s 100Mbps = 11.921 MB/s (hub) 155Mbps=18.477MB/s http://www.speedguide.net/conversion.php

5 Problema Tranferencia de datos a no mas de 500 Kbps (61.035 KB/s) en cualquiere de dirección: ICN-CERN CERN-ICN

6 Soluciones Verificar el ruteo de los datos (utlicen Internet2) Modificar configuración del protocolo TCP (buffers) Actualizar el kernel >2.6.17 que incluye algoritmos de auto tunning Modificaciones a nivel harware(nodos,ruteadores y todo aquel por donde pase el paquete de datos) con el uso de JumboFrames (9K). Actualmente 1.5K. Para redes >1Gb

7 Estado actual Kernel de SL3.x versión 2.4.X (no auto tunning) Paramatros TCP estandar: Buffers de R/W=135,168 Bytes Buffer TCP R/W (Bytes)= 4096 87,380 174,760 Tamaño de ventana TCP=86K RTT (round trip time) = 200ms

8 Valores especiales Es necesario redefinir el tamaño de los buffers tomando el cuenta el tamaño de ventana necesario Window size=BW * RTT Caso ideal BW=34Mbps y RTT=200ms Window size= 830 KB Caso real=24Mbps y RTT=250ms Window size=732KB

9 Configuración requerida Buffers de R/W=750,080 Bytes Buffer TCP R/W (Bytes)= 4096750,080849,920 El limite máximo puede ser mayor

10 Pruebas de red

11 HERRAMIENTAS ipef – Permite medir el BW entre dos puntos utlizando paquetes TCP /UDP traceroute – Muestra la ruta que siguen los paquetes de datos atraves de la red

12 Monitoreo Las siguientes páginas muestran el tráfico de la red http://www.noc.cudi.edu.mx/cgi-bin/mexico.cgi?log=mx-unam http://stryper.uits.iu.edu/abilene/summary.cgi?network=hstn- cudi&data=bits http://stryper.uits.iu.edu/abilene/summary.cgi?network=losa-cudi- tunnel&data=bits

13 Parametros de iperf Puertos:20200,20256,20512,20585,20714 Tamaño de la ventana TCP: 86K, 256K, 512K, 585K, 714K Tiempo: 5min Hilos: 1,2,4,8,16,32,64,96,128 Buffer de datos a enviar:128 y 256 KB Modo:Unidireccional (problemas firewall -CERN) Servidor: nahualli.nucleares.unam.mx *Ver script

14 Resultados

15 Ruteo ICN-CERN Correcto en dirección ICN-CERN: Hostname 1. 132.247.250.190 2. 132.247.251.5 3. 132.247.251.193 4. 132.247.251.202 5. 132.247.255.221 6. mexico7200-unam.core.cudi.edu.mx 7. gdl-mexico7200.core.cudi.edu.mx 8. tijuana-gdl.core.cudi.edu.mx 9. nlr-1-is-jmb-776.sttlwa.pacificwave.net

16 Ruteo ICN-CERN 10. denv-seat-58.layer3.nlr.net 11. chic-denv-36.layer3.nlr.net 12. 216.24.184.22 13. e513-e-rci76-2-te8.cern.ch 14. e513-e-rci76-1-ne1.cern.ch 15. ??? 16. ??? 17. ??? 18. ??? 19. ??? 20. pcalimex1.cern.ch

17 Ruteo CERN-ICN Incorrecto en dirección CERN-UNAM: Hostname 1 r27-1-rca80-1-an10 (137.138.53.1) 2 b2-s-rca86-1-gb20 (194.12.129.57) 3 b513-b-rfte6-2-rb6 (194.12.132.21) 4 g513-e-rci76-1-pg2 (194.12.144.41) 5 g513-e-rci76-1-fe1 (192.65.184.165) 6 e513-e-rci76-1-pe1 (192.65.184.161) 7 e513-e-rci76-2-ne1 (192.65.184.54) 8 fe-0-3-0.400.ar3.ZRH1.gblx.net (208.48.236.117)

18 Ruteo CERN-ICN 9 te7-2-0GE.ar4.LAX1.gblx.net (67.17.109.86) 10 64.213.78.22 (64.213.78.22) 11 bb-mex-nextengo-25-pos-13-2.uninet.net.mx (200.38.132.90) 12 * * * 13 customer-201-117-71-133.uninet-ide.com.mx (201.117.71.133) 14 132.247.251.233 (132.247.251.233) 15 132.247.251.194 (132.247.251.194) 16 132.247.251.6 (132.247.251.6) 17 nahualli.nucleares.unam.mx (132.248.29.50)

19 Rendimento de red Consideraciones: Firewall Horarios de tráfico en la red El tráfico CERN-ICN al regresar por el Internet “comercial” se ve acotado (menor BW)

20 Primera medicion dia lunes 23 de abril 2007

21

22 Prueba realizada en un nodo de trabajo de un cluster del CERN enviado por medio de la grid.

23 Ya que el WTCP no se podia moficiar entonces se probo con diferente número de hilos.

24

25 Siguientes pasos Pedir que verifiquen el ruteo CERN-ICN Continuar la pruebas: Diferentes horarios Evitar firewall Encontrar el número optimo de hilos y WTCP Generar documento Pedir que se modifiquen los buffers en los servicios clave de AliEn