Mantenganse alejados de los Kernel 2.6.9.

800-HELP.com · 03-jun-2006, 20:30

Saluos

Quiero compartir con Uds. algunas experiencias traumÃ¡ticas con referencia a la familia de kernels 2.6.9 especialmente las versiones mayores de 2.6.9.11 (los kernel que vienen por defecto en Centos/RedHat)

Recientemente y debido a alertas de seguridad y vulnerabilidades reportadas en el kernel 2.6.9.11 hicimos el upgrade de todos los servidores de mi compaÃ±ia a la versiÃ³n 2.6.9.34 (el Ãºltimo estable provisto por CentOS) la actualizaciÃ³n transcurriÃ³ sin problemas en una variedad de plataformas que incluian Pentium 4, y XEON y dual XEON, por supuesto guarde copia de mi anterior kernel por si las cosas no salian bien.

Luego de cruzar los dedos y la respectiva oraciÃ³n a SAN CPU se procediÃ³ a realizar el reboot de los servidores para que arrancaran con el nuevo kernel, el primer servidor arrancÃ³ sin problemas y luego de una hora de correr sin ningÃºn inconveniente decidimos realizar el reboot en los demÃ¡s servidores de la plataforma, debo agregar que estas operaciones siempre las realizamos a altas horas de la noche para causar un mÃ#nimo impacto a los clientes. Felices por el Ã©xito de la operaciÃ³n (actualizar kernel sie mpre supone un riesgo de que algo falle y la mÃ¡quina no arranque) nos tomamos un merecido descando.

4:00 AM Jueves: Recibo la primera alerta de un servidor web a dejado de funcionar, al revisar el equipo solo encontramos que el servidor apache habia muerto y por alguna razÃ³n el programa que deberÃ#a reiniciarlo no era capaz de iniciarlo por si solo, se solventÃ³ con un reboot de hardware.

7:00 AM Jueves: Nuestro servidor de correo dejÃ³ de funcionar, esta vez si notamos una alta carga

13:00 Jueves: Colpaso del servidor de BBDD MySQL la misma causa una anormal carga del servidor.

5:00 Jueves: Colpaso del servidor de Panel de Control, la misma situaciÃ³n elevadas cargas

En fin estÃ¡ ha sido la constante en los Ãºltimos dÃ#as, luego de investigar un poco la causa del colapso de los servidores estaba en que se presentaban demoras en la lectura / escritura a los discos, un problema conocido como iowait (en donde un proceso tiene que esperar para leer o escribir en el disco y los procesos se van acumulando) esto es una condiciÃ³n normal en un servidor sobrecargado pero no en nuestros Dual XEON con discos SCSI y arreglos RAID, en fin luego de investigaciones pruebas y consultas decidimos volver a nuestros anteriores kernels, se hace el reboot se arranca sin problemas con los kernel 2.6.9.11 y todo paece volver a la normalidad, las cargas vuelven a estar en valores < 1 pero no es lo Ãºnico que esta casi en cero. La memoria libre a desaparecido !!!!, en condiciones normales nuestrsos servidores mantenian entre 400 a 700 MB de memoria libre ahora TOP mostraba apenas unos 40 MB libres y el servidor comenzaba a usar la SWAP.

El dilema erÃ¡ crÃ#tico, o utilizaba el kernel nuevo con sus altas cargas o utilizabamos el kernel viejo sin memoria !!!

En definitiva estamos utilizando el kernel nuevo y monitoreando cuidadosamente todos los servicios y cargas mientras compilamos nuestros propios kernels

Moraleja : NO USEN NINGUN KERNEL 2.6.9 salvo los 2.6.9.11

AMateos · 03-jun-2006, 23:59

Muy interesante, gracias por compartirlo Guillermo

800-HELP.com · 04-jun-2006, 00:24

Para completar la historia:
Ya habia escuchado varias historias referentes a los problemas de los Ãºltimos kernels de CentOS sin embargo eran mas bien referentes a Cpanel.

Durante todo el dÃ#a de hoy hemos estado compilando kernels para el primero nos asesorÃ³ la gente de Rack911 (Los recomiendo ampliamente) y todo saliÃ³ a la perfecciÃ³n las cargas ya son normales al igual que el uso de la memoria.

AMateos · 04-jun-2006, 00:32

Me alegra que la historia haya salido bien, valla lÃ#o se te habÃ#a montado.

imported_pesst · 04-jun-2006, 07:08

Awwww me pones los pelos de punta! espero que salga la version 2.7, y oiba a instalar FEDORA en el cursillo que estoy haciendo, pero visot lo visto sugerirÃ© otra distribuciÃ³n.

salu2

800-HELP.com · 04-jun-2006, 11:16

Saludos:

El bug del kernel solo lo notarÃ¡s si haces un uso muy intensivo de lecturas / escrituras (como servidor de archivos, servidor de bases de datos o servidor web) si es un equipo para tu uso no te darÃ¡ problemas.

Mi laptop estÃ¡ usando CentOS 4.3 con el kernel 2.6.9.34 sin ningÃºn problema.

Los kernel de la serie 2.6.16.X son seguros

nandross · 04-jun-2006, 15:32

Joder, un fallo tras otro...Â¿y eso no puede ser un fallo de fÃ¡brica o algo asÃ#?

Lo digo por lo de que funcionan bien casi todos menos esa serie...