Упал

From

Serguei Revtov (2:5021/49.1)

To

All

Date

2007-02-26T12:39:14Z

Area

RU.UNIX.SOLARIS

Hi All!

После пары месяцев аптайма свалился сервак HP DL380 c 10 соляркой. После автозагрузки работает нормально. Диагностика, насколько ничего не понимаю, похожа на глюки проца?

cpu.generic: [ID 369736 kern.warning] WARNING: Machine-Check Exception in kernel mode
genunix: [ID 843051 kern.info] NOTICE: SUNW-MSG-ID: SUNOS-8000-0G, TYPE: Error, VER: 1, SEVERITY: Major
unix: [ID 836849 kern.notice]
^Mpanic[cpu1]/thread=fffffe80003a7c80:
genunix: [ID 663943 kern.notice] Unrecoverable Machine-Check Exception
unix: [ID 100000 kern.notice]
genunix: [ID 655072 kern.notice] fffffe80003a7560 unix:cmi_mca_trap+4d ()
genunix: [ID 655072 kern.notice] fffffe80003a7570 unix:mcetrap+17b ()
genunix: [ID 655072 kern.notice] fffffe80003a7740 genunix:vsnprintf+5be ()
genunix: [ID 655072 kern.notice] fffffe80003a7820 genunix:snprintf+94 ()
genunix: [ID 655072 kern.notice] fffffe80003a79a0 genunix:cprintf+19c ()
genunix: [ID 655072 kern.notice] fffffe80003a7ab0 genunix:cmn_err+108 ()
genunix: [ID 655072 kern.notice] fffffe80003a7b10 cpu.generic:gcpu_mca_trap+1ba ()
genunix: [ID 655072 kern.notice] fffffe80003a7b20 unix:cmi_mca_trap+31 ()
genunix: [ID 655072 kern.notice] fffffe80003a7b30 unix:mcetrap+17b ()
genunix: [ID 655072 kern.notice] fffffe80003a7c40 unix:cpu_halt+b2 ()
genunix: [ID 655072 kern.notice] fffffe80003a7c60 unix:idle+89 ()
genunix: [ID 655072 kern.notice] fffffe80003a7c70 unix:thread_start+8 ()
unix: [ID 100000 kern.notice]
genunix: [ID 672855 kern.notice] syncing file systems...
cpu.generic: [ID 369736 kern.warning] WARNING: Machine-Check Exception in kernel mode
last message repeated 5 times
genunix: [ID 843051 kern.info] NOTICE: SUNW-MSG-ID: SUNOS-8000-0G, TYPE: Error, VER: 1, SEVERITY: Major
unix: [ID 836849 kern.notice]
^Mpanic[cpu6]/thread=fffffe800085fc80:
genunix: [ID 663943 kern.notice] Unrecoverable Machine-Check Exception
unix: [ID 100000 kern.notice]
genunix: [ID 655072 kern.notice] fffffe800089be70 unix:cmi_mca_trap+4d ()
genunix: [ID 655072 kern.notice] fffffe800089be80 unix:mcetrap+17b ()
genunix: [ID 655072 kern.notice] fffffe800089bf70 unix:panic_idle+20 ()
genunix: [ID 655072 kern.notice] fffffe800089bfa0 unix:xc_serv+1d0 ()
genunix: [ID 655072 kern.notice] fffffe800089bff0 unix:av_dispatch_autovect+78 ()
genunix: [ID 655072 kern.notice] fffffe800085f6d0 unix:_interrupt+155 ()
genunix: [ID 655072 kern.notice] fffffe800085f7f0 unix:lock_set_spl_spin+70 ()
genunix: [ID 655072 kern.notice] fffffe800085f800 genunix:disp_lock_enter+1e ()
genunix: [ID 655072 kern.notice] fffffe800085f820 genunix:turnstile_lookup+44 ()
genunix: [ID 655072 kern.notice] fffffe800085f870 unix:rw_enter_sleep+80 ()
genunix: [ID 655072 kern.notice] fffffe800085f880 genunix:log_enter+2c ()
genunix: [ID 655072 kern.notice] fffffe800085f8e0 cpu.generic:gcpu_mca_trap+b9 ()
genunix: [ID 655072 kern.notice] fffffe800085f8f0 unix:cmi_mca_trap+31 ()
genunix: [ID 655072 kern.notice] fffffe800085f900 unix:mcetrap+17b ()
genunix: [ID 655072 kern.notice] fffffe800085fa20 unix:lock_set_spl_spin+75 ()
genunix: [ID 655072 kern.notice] fffffe800085fa30 genunix:disp_lock_enter+1e ()
genunix: [ID 655072 kern.notice] fffffe800085fa50 genunix:turnstile_lookup+44 ()
genunix: [ID 655072 kern.notice] fffffe800085faa0 unix:rw_enter_sleep+80 ()
genunix: [ID 655072 kern.notice] fffffe800085fab0 genunix:log_enter+2c ()
genunix: [ID 655072 kern.notice] fffffe800085fb10 cpu.generic:gcpu_mca_trap+b9 ()
genunix: [ID 655072 kern.notice] fffffe800085fb20 unix:cmi_mca_trap+31 ()
genunix: [ID 655072 kern.notice] fffffe800085fb30 unix:mcetrap+17b ()
genunix: [ID 655072 kern.notice] fffffe800085fc40 unix:cpu_halt+b2 ()
genunix: [ID 655072 kern.notice] fffffe800085fc60 unix:idle+89 ()
genunix: [ID 655072 kern.notice] fffffe800085fc70 unix:thread_start+8 ()
unix: [ID 100000 kern.notice]
genunix: [ID 111219 kern.notice] dumping to /dev/dsk/c1t0d0s1, offset 215547904, content: kernel
genunix: [ID 409368 kern.notice] ^M100% done: 159363 pages dumped, compression ratio 2.65,
genunix: [ID 851671 kern.notice] dump succeeded
genunix: [ID 540533 kern.notice] ^MSunOS Release 5.10 Version Generic_118855-15 64-bit
genunix: [ID 943906 kern.notice] Copyright 1983-2005 Sun Microsystems, Inc. All rights reserved.
...


Крешдамп в /var/crash/ сохранился. С помощью adb даже стек вызовов можно высмотреть, толку-то...
Схудилось серваку в 1:24 ночи в выходные, в это время ничего страшного не должно быть, даже всякие nfsfind в это время еще не просыпаются.

Собственно вопрос - что делать, чего лечить?

И еще по psrinfo почему-то показывается 8 процессоров, хотя там всего 2, т.е. должно показывать 4...



-- Serguei
   2:5021/11.10 || 2:5021/49.1

--- GoldED+/W32-MSVC 1.1.5-snapshot Sep 11 2005
 * Origin: Welcome to ru.unix.solaris (2:5021/49.1)
SEEN-BY: 450/1024 5000/5000 5011/13 5012/46 5015/28 5020/400 545 2238 4441
SEEN-BY: 5021/2 19 29 49 5025/3 5030/1957 5035/38 5045/7 5054/1 4 8 9 28 35 37
SEEN-BY: 5062/10 5064/7 5085/13 5095/20 5096/18

PATH: 5021/49 19 29 5020/545 5054/1 37