Правила форума Гаранты форума
Размещение рекламы AMX-X компилятор

Здравствуйте, гость Вход | Регистрация

Наши новости:

14-дек
24-апр
10-апр
11-апр

Массовый перезапуск HLDS...

, Ахтунг! Ахтунг!
Статус пользователя kajfat
сообщение 26.4.2011, 13:34
Сообщение #1
Стаж: 15 лет

Сообщений: 20
Благодарностей: 2
Полезность: 77

Держку серваки на Ubuntu Server 10.10, все было отлично, но вот несколько дней назад это началось...
ВСЕ сервера массово одновременно перезапускаются. Такое бывает раз в несколько часов. Что делать с сабжем - ХЗ. Логи прилагаются.
Лог

Код
Apr 26 15:29:05 ubuntu kernel: [261495.547569] lo: Disabled Privacy Extensions
Apr 26 15:29:18 ubuntu kernel: [261495.548240] lo: Disabled Privacy Extensions
Apr 26 15:29:54 ubuntu kernel: [261543.645179] apache2 invoked oom-killer: gfp_mask=0x201da, order=0, oom_adj=0
Apr 26 15:29:55 ubuntu kernel: [261543.645182] apache2 cpuset=/ mems_allowed=0
Apr 26 15:29:55 ubuntu kernel: [261543.645185] Pid: 3280, comm: apache2 Not tainted 2.6.35-22-server #35-Ubuntu
Apr 26 15:29:55 ubuntu kernel: [261543.645186] Call Trace:
Apr 26 15:29:55 ubuntu kernel: [261543.645192]  [<ffffffff810ae53d>] ? cpuset_print_task_mems_allowed+0x9d/0xb0
Apr 26 15:29:55 ubuntu kernel: [261543.645195]  [<ffffffff81103691>] dump_header+0x81/0xc0
Apr 26 15:29:55 ubuntu kernel: [261543.645197]  [<ffffffff81103751>] oom_kill_process+0x81/0x180
Apr 26 15:29:55 ubuntu kernel: [261543.645199]  [<ffffffff81103c88>] __out_of_memory+0x58/0xd0
Apr 26 15:29:55 ubuntu kernel: [261543.645201]  [<ffffffff81103d86>] out_of_memory+0x86/0x1c0
Apr 26 15:29:55 ubuntu kernel: [261543.645203]  [<ffffffff811076b6>] __alloc_pages_slowpath+0x526/0x590
Apr 26 15:29:55 ubuntu kernel: [261543.645205]  [<ffffffff81107884>] __alloc_pages_nodemask+0x164/0x1d0
Apr 26 15:29:55 ubuntu kernel: [261543.645208]  [<ffffffff81052ec9>] ? enqueue_task+0x79/0x90
Apr 26 15:29:55 ubuntu kernel: [261543.645211]  [<ffffffff811397ba>] alloc_pages_current+0x9a/0x100
Apr 26 15:29:55 ubuntu kernel: [261543.645213]  [<ffffffff81100da7>] __page_cache_alloc+0x87/0x90
Apr 26 15:29:55 ubuntu kernel: [261543.645215]  [<ffffffff8110ae49>] __do_page_cache_readahead+0xc9/0x210
Apr 26 15:29:55 ubuntu kernel: [261543.645217]  [<ffffffff8110afb1>] ra_submit+0x21/0x30
Apr 26 15:29:55 ubuntu kernel: [261543.645219]  [<ffffffff81102593>] filemap_fault+0x3f3/0x450
Apr 26 15:29:55 ubuntu kernel: [261543.645222]  [<ffffffff8111d1f4>] __do_fault+0x54/0x560
Apr 26 15:29:55 ubuntu kernel: [261543.645224]  [<ffffffff81120129>] handle_mm_fault+0x1b9/0x440
Apr 26 15:29:55 ubuntu kernel: [261543.645227]  [<ffffffff815a2535>] do_page_fault+0x125/0x350
Apr 26 15:29:55 ubuntu kernel: [261543.645230]  [<ffffffff8159f0b5>] page_fault+0x25/0x30
Apr 26 15:29:55 ubuntu kernel: [261543.645232] Mem-Info:
Apr 26 15:29:55 ubuntu kernel: [261543.645233] Node 0 DMA per-cpu:
Apr 26 15:29:55 ubuntu kernel: [261543.645234] CPU    0: hi:    0, btch:   1 usd:   0
Apr 26 15:29:55 ubuntu kernel: [261543.645235] CPU    1: hi:    0, btch:   1 usd:   0
Apr 26 15:29:55 ubuntu kernel: [261543.645237] CPU    2: hi:    0, btch:   1 usd:   0
Apr 26 15:29:55 ubuntu kernel: [261543.645238] CPU    3: hi:    0, btch:   1 usd:   0
Apr 26 15:29:55 ubuntu kernel: [261543.645239] Node 0 DMA32 per-cpu:
Apr 26 15:29:55 ubuntu kernel: [261543.645240] CPU    0: hi:  186, btch:  31 usd:  66
Apr 26 15:29:55 ubuntu kernel: [261543.645241] CPU    1: hi:  186, btch:  31 usd: 167
Apr 26 15:29:55 ubuntu kernel: [261543.645242] CPU    2: hi:  186, btch:  31 usd: 158
Apr 26 15:29:55 ubuntu kernel: [261543.645243] CPU    3: hi:  186, btch:  31 usd: 116
Apr 26 15:29:55 ubuntu kernel: [261543.645244] Node 0 Normal per-cpu:
Apr 26 15:29:55 ubuntu kernel: [261543.645246] CPU    0: hi:  186, btch:  31 usd:  58
Apr 26 15:29:55 ubuntu kernel: [261543.645247] CPU    1: hi:  186, btch:  31 usd: 127
Apr 26 15:29:55 ubuntu kernel: [261543.645248] CPU    2: hi:  186, btch:  31 usd: 161
Apr 26 15:29:55 ubuntu kernel: [261543.645249] CPU    3: hi:  186, btch:  31 usd:  91
Apr 26 15:29:55 ubuntu kernel: [261543.645252] active_anon:1619477 inactive_anon:320155 isolated_anon:0
Apr 26 15:29:55 ubuntu kernel: [261543.645252]  active_file:1334 inactive_file:2430 isolated_file:0
Apr 26 15:29:55 ubuntu kernel: [261543.645253]  unevictable:0 dirty:2 writeback:0 unstable:0
Apr 26 15:29:55 ubuntu kernel: [261543.645253]  free:11799 slab_reclaimable:6480 slab_unreclaimable:12602
Apr 26 15:29:55 ubuntu kernel: [261543.645254]  mapped:1392 shmem:7952 pagetables:17574 bounce:0
Apr 26 15:29:55 ubuntu kernel: [261543.645255] Node 0 DMA free:15824kB min:20kB low:24kB high:28kB active_anon:0kB inactive_anon:0kB active_file:0kB inactive_file:0kB unevictable:0kB isolated(anon):0kB isolated(file):0kB present:15696kB mlocked:0kB dirty:0kB writeback:0kB mapped:0kB shmem:0kB slab_reclaimable:0kB slab_unreclaimable:8kB kernel_stack:0kB pagetables:0kB unstable:0kB bounce:0kB writeback_tmp:0kB pages_scanned:0 all_unreclaimable? yes
Apr 26 15:29:55 ubuntu kernel: [261543.645260] lowmem_reserve[]: 0 2991 8033 8033
Apr 26 15:29:55 ubuntu kernel: [261543.645263] Node 0 DMA32 free:24272kB min:4264kB low:5328kB high:6396kB active_anon:2377548kB inactive_anon:594460kB active_file:0kB inactive_file:0kB unevictable:0kB isolated(anon):0kB isolated(file):0kB present:3063124kB mlocked:0kB dirty:0kB writeback:0kB mapped:4kB shmem:10696kB slab_reclaimable:10856kB slab_unreclaimable:16140kB kernel_stack:1736kB pagetables:14416kB unstable:0kB bounce:0kB writeback_tmp:0kB pages_scanned:33 all_unreclaimable? yes
Apr 26 15:29:55 ubuntu kernel: [261543.645268] lowmem_reserve[]: 0 0 5042 5042
Apr 26 15:29:55 ubuntu kernel: [261543.645270] Node 0 Normal free:7100kB min:7188kB low:8984kB high:10780kB active_anon:4100360kB inactive_anon:686160kB active_file:5336kB inactive_file:9720kB unevictable:0kB isolated(anon):0kB isolated(file):0kB present:5163120kB mlocked:0kB dirty:8kB writeback:0kB mapped:5564kB shmem:21112kB slab_reclaimable:15064kB slab_unreclaimable:34260kB kernel_stack:2880kB pagetables:55880kB unstable:0kB bounce:0kB writeback_tmp:0kB pages_scanned:17792 all_unreclaimable? yes
Apr 26 15:29:55 ubuntu kernel: [261543.645275] lowmem_reserve[]: 0 0 0 0
Apr 26 15:29:55 ubuntu kernel: [261543.645277] Node 0 DMA: 2*4kB 1*8kB 0*16kB 2*32kB 2*64kB 0*128kB 1*256kB 0*512kB 1*1024kB 1*2048kB 3*4096kB = 15824kB
Apr 26 15:29:55 ubuntu kernel: [261543.645283] Node 0 DMA32: 1664*4kB 606*8kB 258*16kB 96*32kB 27*64kB 0*128kB 1*256kB 1*512kB 1*1024kB 1*2048kB 0*4096kB = 24272kB
Apr 26 15:29:55 ubuntu kernel: [261543.645288] Node 0 Normal: 1369*4kB 13*8kB 1*16kB 1*32kB 1*64kB 3*128kB 0*256kB 0*512kB 1*1024kB 0*2048kB 0*4096kB = 7100kB
Apr 26 15:29:55 ubuntu kernel: [261543.645293] 11724 total pagecache pages
Apr 26 15:29:55 ubuntu kernel: [261543.645293] 0 pages in swap cache
Apr 26 15:29:55 ubuntu kernel: [261543.645295] Swap cache stats: add 0, delete 0, find 0/0
Apr 26 15:29:55 ubuntu kernel: [261543.645295] Free swap  = 0kB
Apr 26 15:29:55 ubuntu kernel: [261543.645296] Total swap = 0kB
Apr 26 15:29:55 ubuntu kernel: [261543.656407] 2095088 pages RAM
Apr 26 15:29:55 ubuntu kernel: [261543.656409] 50419 pages reserved
Apr 26 15:29:55 ubuntu kernel: [261543.656410] 166937 pages shared
Apr 26 15:29:55 ubuntu kernel: [261543.656410] 2026893 pages non-shared



HEEEEELP! cray.gif
Перейти в начало страницы         Просмотр профиля    Отправить личное сообщение
   Цитировать сообщение
Статус пользователя 330863
сообщение 26.4.2011, 20:24
Сообщение #2


Стаж: 16 лет

Сообщений: 4358
Благодарностей: 1079
Полезность: 497

kajfat,
Код
Apr 26 15:29:55 ubuntu kernel: [261543.645246] CPU    0: hi:  186, btch:  31 usd:  58
Apr 26 15:29:55 ubuntu kernel: [261543.645247] CPU    1: hi:  186, btch:  31 usd: 127
Apr 26 15:29:55 ubuntu kernel: [261543.645248] CPU    2: hi:  186, btch:  31 usd: 161
Apr 26 15:29:55 ubuntu kernel: [261543.645249] CPU    3: hi:  186, btch:  31 usd:  91

ахтунг ,думаю из за перенагрузки на ядра процессора или из за csdeath сплойта...
Перейти в начало страницы         Просмотр профиля    Отправить личное сообщение
   + Цитировать сообщение
Статус пользователя kajfat
сообщение 26.4.2011, 20:35
Сообщение #3
Стаж: 15 лет

Сообщений: 20
Благодарностей: 2
Полезность: 77

Загрузка проца ~70%. csDeath прикрыт в iptables. Не пойму почему таки((
Перейти в начало страницы         Просмотр профиля    Отправить личное сообщение
   + Цитировать сообщение
Статус пользователя 330863
сообщение 26.4.2011, 20:37
Сообщение #4


Стаж: 16 лет

Сообщений: 4358
Благодарностей: 1079
Полезность: 497

kajfat,
ну высокая нагрузка проца может быть не только от этого
Перейти в начало страницы         Просмотр профиля    Отправить личное сообщение
   + Цитировать сообщение
Статус пользователя kajfat
сообщение 26.4.2011, 20:48
Сообщение #5
Стаж: 15 лет

Сообщений: 20
Благодарностей: 2
Полезность: 77

На одном из серверов стояло ОГРОМНОЕ количество кривых плагинов (жрал аж ГИГАБАЙТ оперативы), отключил его, надеюсь из-за него была такая херня
Перейти в начало страницы         Просмотр профиля    Отправить личное сообщение
   + Цитировать сообщение
  Тема закрытаНачать новую тему
 
0 пользователей и 1 гостей читают эту тему: