Freeze Linux Ubuntu

[batataw]

Bonjour

Je possède un serveur Linux Ubuntu virtuel chez Ikoula, de temps en temps le system se freeze. Plus accès au SSH et mes sites webs sont inaccessibles mais le serveur répond toujours au ping.

J'ai des bases en administration linux mais je suis incapable d'analyser un syslog comme il se doit. Après le reboot du system, j'ai extrait dans un fichier texte la dernière commande avant plantage. Ainsi qu'un screen capture qu'Ikoula m'a envoyé puisque je n'avais plus accès à mon ordinateur.

Sauriez-vous me dire ce qui freeze ma machine ?

D'avance merci

[Mygale1978]

Salut,

L'extrait du syslog que tu fournis ne décrit que l'initialisation des différentes ressources lors démarrage de ton système. Il faudrait donc avoir les extraits avant le redémarrage càd avant le 16 mai à 3h21 du matin

Code :

1
2
 
ls -ltra /var/log/syslog*

Pour identifier le fichier syslog dont la dernière écriture est avant le 16 mai 3h21

Il serait également intérressant d'avoir les logs d'erreurs d'apache. Par défaut ils sont dans /var/log/apache2. Sinon il faut regarder la directive Errorlog dans la configuration d'apache pour les localiser.

Pourrais-tu également lister les différents filesystems et leur capacité.

Code :

1
2
 
df -h

[batataw]

Merci pour ta réponse rapide.

J'ai vérifié les logs d'apache je ne vois rien d'anormale.

Code :

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
 
[Sun May 15 06:25:05 2011] [notice] Apache/2.2.14 (Ubuntu) Phusion_Passenger/3.0.7 PHP/5.3.2-1ubuntu4.7 with Suhosin-Patch configured -- resuming normal operations
[Sun May 15 12:47:39 2011] [error] [client 80.84.63.167] client sent HTTP/1.1 request without hostname (see RFC2616 section 14.23): /w00tw00t.at.ISC.SANS.test0:)
[Sun May 15 13:51:37 2011] [error] [client 62.24.252.133] File does not exist: /var/www/magento/robots.txt, referer: http://www.dandiesandcandies.co.uk/robots.txt
[Sun May 15 17:19:36 2011] [error] [client 66.249.66.240] File does not exist: /var/www/olivier/robots.txt
[Sun May 15 21:30:51 2011] [error] [client 69.28.58.4] File does not exist: /var/www/robots.txt, referer: http://o-demangel.com/robots.txt
[Sun May 15 22:44:25 2011] [error] [client 69.58.178.59] File does not exist: /var/www/olivier/robots.txt
[Mon May 16 01:21:22 2011] [notice] Apache/2.2.14 (Ubuntu) Phusion_Passenger/3.0.7 PHP/5.3.2-1ubuntu4.7 with Suhosin-Patch configured -- resuming normal operations
[Mon May 16 01:41:17 2011] [error] [client 86.18.116.158] File does not exist: /var/www/olivier/images/shadow.gif, referer: http://www.o-demangel.com/contact
[Mon May 16 02:35:50 2011] [error] [client 62.24.252.133] File does not exist: /var/www/magento/robots.txt, referer: http://www.dandiesandcandies.co.uk/robots.txt
[Mon May 16 05:30:56 2011] [error] [client 66.249.66.240] File does not exist: /var/www/olivier/robots.txt
[Mon May 16 06:15:55 2011] [error] [client 80.84.63.167] client sent HTTP/1.1 request without hostname (see RFC2616 section 14.23): /w00tw00t.at.ISC.SANS.test0:)
[Mon May 16 10:46:46 2011] [error] [client 74.52.185.98] File does not exist: /var/www/phpMyAdmin
[Mon May 16 10:46:46 2011] [error] [client 74.52.185.98] File does not exist: /var/www/MyAdmin
[Mon May 16 10:46:46 2011] [error] [client 74.52.185.98] File does not exist: /var/www/myadmin
[Mon May 16 10:46:47 2011] [error] [client 74.52.185.98] File does not exist: /var/www/pma
[Mon May 16 10:46:47 2011] [error] [client 74.52.185.98] File does not exist: /var/www/mysql
[Mon May 16 11:10:48 2011] [error] [client 82.230.38.51] File does not exist: /var/www/olivier/images/shadow.gif, referer: http://www.o-demangel.com/css/form.css

Je ne sais pas si ça peut aider mais j'ai joint un dump du syslog avant le reboot.

[Mygale1978]

Oui dans le syslog on ne voit rien non plus. Dans le log d'erreur d'apache, on ne voit là que des scan de bot.

Pourrais-également regarder dans les logs de zabbix pour voir si tu trouves qqch?

Pourrais-tu également fournir le listing de tes filesystems?

Code :

1
2
 
df -h

[batataw]

/dev/hda3 8,9G 3,2G 5,3G 38% /
none 239M 176K 239M 1% /dev
none 244M 0 244M 0% /dev/shm
none 244M 48K 244M 1% /var/run
none 244M 0 244M 0% /var/lock
none 244M 0 244M 0% /lib/init/rw
/dev/hda1 89M 17M 68M 20% /boot

zabbix_hourly_checks.log

--------------- ZABBIX CHECKS ---------------
20110516_1200

File /var/log/zabbix/hourly_results exists, deleting.
Setting rights on /var/log/zabbix/hourly_results
Checking Qmail Queue :
Qmail isn't installed.
Checking PostFix Queue :
PostFix queue checked.

zabbix_daily_checks.log

--------------- ZABBIX CHECKS ---------------
20110516_0400

File /var/log/zabbix/daily_results exists, deleting.
Setting rights on /var/log/zabbix/daily_results
SMART Test :
Getting devices to check
Activating SMART on devices and proceeding with check
SMART Test done.
RKHunter Scan :
Check RKHunter's presence
RKHunter is not in the right place or is not installed, Downloading now...
sh: Can't open ./installer.sh
Done with installation
Launching update and full scan now...
/root/IkoulaRelease/scripts/zabbix_daily_checks.sh: line 116: /usr/local/bin/rkhunter: No such file or directory
/root/IkoulaRelease/scripts/zabbix_daily_checks.sh: line 117: /usr/local/bin/rkhunter: No such file or directory
Scan is over. Storing result in /var/log/zabbix/daily_results
Analyzing result of RKHunter's scan in /var/log/rkhunter.log
RKHunter Scan done.

cat /var/log/zabbix/zabbix_agentd.log
Des centaines de lignes comme celle ci-dessous

840:20110516:115536 Timeout while answering request
840:20110516:115639 Timeout while answering request
840:20110516:115742 Timeout while answering request
840:20110516:115845 Timeout while answering request
840:20110516:115948 Timeout while answering request
840:20110516:120051 Timeout while answering request
840:20110516:120154 Timeout while answering request
840:20110516:120257 Timeout while answering request
840:20110516:120400 Timeout while answering request
840:20110516:120503 Timeout while answering request

[Mygale1978]

Bon, il n'y a rien de bien croustillant à se mettre sous la dent avec ce qui est montré.

Je vois seulement des timeout de l'agent zabix (peut-être dû au blocage?)

Pourrais-tu fournir la liste des logs que tu as dans /var/log/

Pourrais-tu éventuellement attcher les syslog en pièce jointe afin d'avoir une vue plus globale?

[batataw]

Merci pour tout le temps que tu consacres à mon problème, je t'ai joint tous les fichiers syslog. Je sais c'est vraiment pas évident.

[Mygale1978]

Ok merci je y jeter un oeil.


Pourrais-tu également fournir par la même occasion en pièce jointe les logs suivants: daemon.log*, messages* et debug* ansi que les logs d'erreur d'apache

PS= le * = tous les fichiers associés.

Peux-tu également me dire si le support d'ikoula t'a fourni des pistes?

[Mygale1978]

Bon les syslogs ne fournissent déjà aucune information pertinente..

[lheydorff]

Bonjour,

J'ai un problème très similaire au tiens (Flex-Server chez Ikoula, Ubuntu 32bits 10.04 Server). Les blocages interviennent au bouts de quelques jours (2 semaines maximum) en cours de journée ou en pleine nuit.

Les logs ne montrent aucune activité étrange (si ce n'est le timeout de l'agent zabbix). J'enregistre également toutes les minutes le résultat du "top" et je ne vois rien de spécial non plus au niveau mémoire ou processeur.

Pour information, Ikoula utilise Microsoft Hyper-V pour nos serveurs virtuels. Les Linux Integration Components sont bien activés dans la config Ubuntu fournie par Ikoula sauf le paramétrage de l'interface réseau qui est toujours en eth0 et non seth0.

Pour redémarrer, je dois passer par l'interface flex.ikoula.com pour arrêter / démarrer la machine virtuelle, ce qui n'est pas bon.

Je viens de lancer un SOS à Ikoula mais je viens également poster ici afin de savoir si ton problème est résolu et si oui, comment ?

D'avance, merci.

[frp31]

Envoyé par lheydorff

Bonjour,


Pour information, Ikoula utilise Microsoft Hyper-V pour nos serveurs virtuels. Les Linux Integration Components sont bien activés dans la config Ubuntu fournie par Ikoula sauf le paramétrage de l'interface réseau qui est toujours en eth0 et non seth0.

D'avance, merci.

déjà on sait que c'est un problème structurel ...

rebooter toutes les nuits pendant une période de test résout le problème ou pas ? (crontab)

[batataw]

Désolé Mygale1978, je ne t'ai pas fourni les fichiers que tu m'as demandés mais comme frp31, je pense que c'est un problème structurel. J'ai beau chercher, je ne trouve rien dans les logs.

Je ne crois pas à une coïncidence, je pense que leurs serveurs ne sont pas vraiment à l'aise avec des distribs linux. De plus la supervision est quasi impossible. Ils sont fait pour faire tourner Windows pas linux.

Comme je ne compte pas passer mes journées à faire le béta testeur pour Ikoula, je compte abandonner cette solution pour un serveur dédié ou bien un VPS ayant fait ses preuves avec linux.

[lheydorff]

rebooter toutes les nuits pendant une période de test résout le problème ou pas ? (crontab)

Je ne sais pas encore ; j'ai prévu de faire le premier reboot automatique cette nuit.

[Mygale1978]

Oui pas de problèmes. j'espère que tu bénéficies encore des conditions "30 jours satisfait ou remboursé" d'ikoula!

[batataw]

La c'est bon je me casse dés que possible. Y'en a marre. Il freeze encore.
J'ai joint le fichier de log pour les sportifs. Il me semble avoir vu passer une erreur système mémoire.

[frp31]

Code :

1
2
3
4
5
6
7
8
9
10
francois@trillian:~/Téléchargements$ grep -Ei "error|warning|prob|erreur|try" syslog
Jun  9 01:03:21 28028hpv121029 rsyslogd-2039: Could no open output file '/dev/xconsole' [try http://www.rsyslog.com/e/2039 ]
Jun  9 01:03:21 28028hpv121029 kernel: [    0.000000] ACPI: Skipping IOAPIC probe due to 'noapic' option.
Jun  9 01:03:21 28028hpv121029 kernel: [    0.000000] please try 'cgroup_disable=memory' option if you don't want memory cgroups
Jun  9 01:03:21 28028hpv121029 kernel: [    0.043752] Dentry cache hash table entries: 65536 (order: 7, 524288 bytes)
Jun  9 01:03:21 28028hpv121029 kernel: [    0.149025] * this clock source is slow. Consider trying other clock sources
Jun  9 01:03:21 28028hpv121029 kernel: [    0.289887] Trying to unpack rootfs image as initramfs...
Jun  9 01:03:21 28028hpv121029 kernel: [    0.425295] Fixed MDIO Bus: probed
Jun  8 23:03:23 28028hpv121029 snmpd[858]: Failed to register extend entry 'sensors_cpu' - possibly duplicate name.
francois@trillian:~/Téléchargements$

essayes de booter avec les parametres noacpi (grub) et changes
cgroup_disable=memory
vérifies que sensors_cpu soit pas déclaré en double
et recompile le noyau pour notament restructurer l'initramfs

[batataw]

Merci mais franchement ça m'ennuie de faire tout un tas de manip alors que le problème est peut-être dû à l'hébergeur. Je vais tenter un dernier truc. Basculer sous CentOS.

[frp31]

Envoyé par batataw

Merci mais franchement ça m'ennuie de faire tout un tas de manip alors que le problème est peut-être dû à l'hébergeur. Je vais tenter un dernier truc. Basculer sous CentOS.

tu tentes un contournement qui ne corrigera probablement pas ton problème.

[batataw]

Ok,que me conseilles-tu alors ?

[batataw]

J'ai tenté un dernier truc, augmenté la Ram et ajouté un core. Je confirme cette offre n'est pas stable, elle plante sans qu'on ne sait trop pourquoi. J'abandonne définitivement.