URL: https://www.opennet.me/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID6
Нить номер: 21969
[ Назад ]
Исходное сообщение
"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 26-Ноя-10 04:23 
Добрый всем день!

Недавно появилась проблема, Cisco7201 ((C7200P-ADVENTERPRISEK9-M), Version 12.4(4)XD11 ) периодически падает с руганью в логах:

*Nov 25 16:51:15.038: %SYS-2-INPUT_GETBUF: Bad getbuffer, bytes= 23899, for interface= GigabitEthernet0/1
-Process= "<interrupt level>", ipl= 1
-Traceback= 0x1417CA8 0x3377BC 0x28E4BC 0x7A4DE8 0x7A2D54 0x7A2E54 0x7A8064 0x7A2968 0x7A0C48 0x642D0 0x4AADC 0x646AC 0x727278 0x72A250 0x72177C 0x70AA1C
*Nov 25 16:51:19.190: %SYS-2-INPUT_GETBUF: Bad getbuffer, bytes= 38260, for interface= GigabitEthernet0/0
-Process= "<interrupt level>", ipl= 1
-Traceback= 0x1417CA8 0x3377BC 0x28E4BC 0x7A4DE8 0x7A2D54 0x7A2E54 0x7A8064 0x7A2968 0x7A0C48 0x642D0 0x646AC 0x727278 0x72A250 0x72177C 0x70AA1C 0x709928

Выдержки из crashinfo:


------------------ show memory summary ------------------


                Head    Total(b)     Used(b)     Free(b)   Lowest(b)  Largest(b)
Processor    5B2AE40   843927684    37906468   806021216   805854648   793596036
      I/O   38000000  >        0  >        0  >        0           0  Corrupted

------------------ show buffers ------------------


Buffer elements:
     1118 in free list (500 max allowed)
     2400105 hits, 0 misses, 1119 created

Public buffer pools:
Small buffers, 104 bytes (total 207, permanent 50, peak 207 @ 00:03:19):
     0 in free list (20 min, 150 max allowed)
     1854162 hits, 2008 misses, 49 trims, 206 created
     1769 failures (169 no memory)
Middle buffers, 600 bytes (total 49, permanent 25, peak 907 @ 05:42:43):
     0 in free list (10 min, 150 max allowed)
     121299 hits, 2120 misses, 874 trims, 898 created
     1791 failures (149 no memory)
Big buffers, 1536 bytes (total 50, permanent 50, peak 56 @ 05:30:59):
     0 in free list (5 min, 150 max allowed)
     185520 hits, 5509 misses, 6 trims, 6 created
     5460 failures (7699 no memory)
VeryBig buffers, 4520 bytes (total 11, permanent 10, peak 12 @ 05:56:22):
     0 in free list (0 min, 100 max allowed)
     55 hits, 5452 misses, 1 trims, 2 created
     5451 failures (7645 no memory)
Large buffers, 5024 bytes (total 2, permanent 0, peak 2 @ 00:00:56):
     0 in free list (0 min, 10 max allowed)
     12 hits, 5447 misses, 0 trims, 2 created
     5446 failures (7632 no memory)
Huge buffers, 18024 bytes (total 4, permanent 0, peak 17 @ 02:26:51):
     0 in free list (0 min, 4 max allowed)
     9843 hits, 5479 misses, 36 trims, 40 created
     5459 failures (7669 no memory)

Interface buffer pools:
IPC buffers, 4096 bytes (total 2, permanent 2):
     2 in free list (1 min, 8 max allowed)
     0 hits, 0 fallbacks, 0 trims, 0 created
     0 failures (0 no memory)

Header pools:
Header buffers, 0 bytes (total 511, permanent 256, peak 511 @ 05:56:25):
     255 in free list (256 min, 1024 max allowed)
     171 hits, 85 misses, 0 trims, 255 created
     0 failures (0 no memory)
     256 max cache size, 256 in cache
     6967 hits in cache, 0 misses in cache

Particle Clones:
     1024 clones, 354373 hits, 0 misses

Public particle pools:
F/S buffers, 128 bytes (total 512, permanent 512):
     0 in free list (0 min, 512 max allowed)
     512 hits, 0 misses
     512 max cache size, 512 in cache
     354589 hits in cache, 0 misses in cache
Normal buffers, 512 bytes (total 2048, permanent 2048):
     2048 in free list (1024 min, 4096 max allowed)
     0 hits, 0 misses, 0 trims, 0 created
     0 failures (0 no memory)

Private particle pools:
GigabitEthernet0/0 buffers, 512 bytes (total 1000, permanent 1000):
     0 in free list (0 min, 1000 max allowed)
     1000 hits, 0 fallbacks
     1000 max cache size, 872 in cache
     117636618 hits in cache, 0 misses in cache
     14 buffer threshold, 0 threshold transitions
GigabitEthernet0/1 buffers, 512 bytes (total 1000, permanent 1000):
     0 in free list (0 min, 1000 max allowed)
     1000 hits, 0 fallbacks
     1000 max cache size, 872 in cache
     63685979 hits in cache, 0 misses in cache
     14 buffer threshold, 0 threshold transitions
GigabitEthernet0/2 buffers, 512 bytes (total 1000, permanent 1000):
     0 in free list (0 min, 1000 max allowed)
     1000 hits, 0 fallbacks
     1000 max cache size, 872 in cache
     251443 hits in cache, 0 misses in cache
     14 buffer threshold, 0 threshold transitions
GigabitEthernet0/3 buffers, 2304 bytes (total 529, permanent 400):
     129 in free list (128 min, 1200 max allowed)
     357 hits, 43 misses, 3 trims, 132 created
     0 failures (0 no memory)
     400 max cache size, 272 in cache
     128 hits in cache, 0 misses in cache
     14 buffer threshold, 0 threshold transitions
FastEthernet0/0 buffers, 2304 bytes (total 529, permanent 400):
     129 in free list (128 min, 1200 max allowed)
     357 hits, 43 misses, 3 trims, 132 created
     0 failures (0 no memory)
     400 max cache size, 272 in cache
     128 hits in cache, 0 misses in cache
     14 buffer threshold, 0 threshold transitions

------------------ show processes memory ------------------


Processor Pool Total:  843927684 Used:   37888540 Free:  806039144
      I/O Pool Total:   67108864 Used:    6623280 Free:   60485584

PID TTY  Allocated      Freed    Holding    Getbufs    Retbufs Process
   0   0   54279476   20327668   31431096        395    8778068 *Init*          
   0   0      12148   71305744      12148          0          0 *Sched*        
   0   0  180190068  134455036    1601108       4633       3816 *Dead*          
   1   0     200368      67676     144576          0          0 Chunk Manager  
   2   0        252        252       4228          0          0 Load Meter      
   3   0          0          0       7244          0          0 chkpt message ha
   4   0      65588          0      90816          0          0 EDDRI_MAIN      
   5   0      86184      83044      10428          0          0 Check heaps    
   6   0      87980    1044792      57396         45          0 Pool Manager    
   7   0        252        252       7228          0          0 Timers          
   8   0        252        252      10228          0          0 ATM AutoVC Perio
   9   0        252        252       7228          0          0 ATM VC Auto Crea
  10   0          0          0       7228          0          0 IPC Dynamic Cach
  11   0          0          0       7228          0          0 IPC Zone Manager
  12   0          0          0       7228          0          0 IPC Periodic Tim
  13   0          0          0       7228          0          0 IPC Deferred Por
  14   0        744          0       7972          0          0 IPC Seat Manager
  15   0          0          0       7228          0          0 IPC BackPressure
  16   0          0          0       7228          4          4 EnvMon          

=============PID to process name mapping=================
PID      Process            Which Block
-2        *Init*                  Corrupted block
0        Unknown                  Corrupted block's next block
-2        *Init*                  Corrupted block's previous block

  I/O memory

Alloc PC        Size     Blocks      Bytes    What

Corrupted pool

0x0       0000000000 0000036171 0036016840    Memory Summary

0x0       0000000000 0000000163 0012424056    Memory Summary (Free Blocks)

Видимо по какой-то причине (DDos или память течет) выбирается вся I/O память, сначала использовался c7200p-ipbase-mz.124-15.T5.bin, заменили на c7200p-adventerprisek9-mz.124-4.XD11.bin - не помогло. Может кто сталкивался с подобным, буду рад любой помощи. Спасибо!

Содержание
Сообщения в этом обсуждении
"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Leonid Ryzhik , 26-Ноя-10 10:27 
>[оверквотинг удален]
> *Nov 25 16:51:15.038: %SYS-2-INPUT_GETBUF: Bad getbuffer, bytes= 23899, for interface=
> GigabitEthernet0/1
> -Process= "<interrupt level>", ipl= 1
> -Traceback= 0x1417CA8 0x3377BC 0x28E4BC 0x7A4DE8 0x7A2D54 0x7A2E54 0x7A8064 0x7A2968
> 0x7A0C48 0x642D0 0x4AADC 0x646AC 0x727278 0x72A250 0x72177C 0x70AA1C
> *Nov 25 16:51:19.190: %SYS-2-INPUT_GETBUF: Bad getbuffer, bytes= 38260, for interface=
> GigabitEthernet0/0
> -Process= "<interrupt level>", ipl= 1
> -Traceback= 0x1417CA8 0x3377BC 0x28E4BC 0x7A4DE8 0x7A2D54 0x7A2E54 0x7A8064 0x7A2968
> 0x7A0C48 0x642D0 0x646AC 0x727278 0x72A250 0x72177C 0x70AA1C 0x709928

у меня был такой tac case. по совету tac перешел на c7200p-advipservicesk9-mz.124-24.T3.bin

если не используете vpdn, то это работает. я использую pptp, и, к сожалению, время от времени ( раз в пару месяцев ) рушится где-то память в дескрипторах сессий, перезагрузка спасает. скоро соберусь и открою кейс.

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 26-Ноя-10 11:54 

> у меня был такой tac case. по совету tac перешел на c7200p-advipservicesk9-mz.124-24.T3.bin
> если не используете vpdn, то это работает. я использую pptp, и, к
> сожалению, время от времени ( раз в пару месяцев ) рушится
> где-то память в дескрипторах сессий, перезагрузка спасает. скоро соберусь и открою
> кейс.

Спасибо. Да, используется именно vpdn pptp, попробую заменить ios. Вы не могли бы посмотреть, md5 образа верно: 5d3e23296fb268efc5b1b62b5e4e914c *c7200p-advipservicesk9-mz.124-24.T3.bin ?

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Leonid Ryzhik , 26-Ноя-10 12:07 
>> у меня был такой tac case. по совету tac перешел на c7200p-advipservicesk9-mz.124-24.T3.bin
>> если не используете vpdn, то это работает. я использую pptp, и, к
>> сожалению, время от времени ( раз в пару месяцев ) рушится
>> где-то память в дескрипторах сессий, перезагрузка спасает. скоро соберусь и открою
>> кейс.
> Спасибо. Да, используется именно vpdn pptp, попробую заменить ios. Вы не могли
> бы посмотреть, md5 образа верно: 5d3e23296fb268efc5b1b62b5e4e914c *c7200p-advipservicesk9-mz.124-24.T3.bin
> ?

md5 совпадает. следите за моментом, когда по sh vpdn количество туннелей будет отрицательным - в этот момент новые сессии не смогут начаться. ребут.


"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 26-Ноя-10 15:23 
> md5 совпадает. следите за моментом, когда по sh vpdn количество туннелей будет
> отрицательным - в этот момент новые сессии не смогут начаться. ребут.

Большое спасибо за участие и предупреждение. Ночью поменяю ios, по результатам отпишусь )).

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 06-Дек-10 04:40 
Большое спасибо  Leonid Ryzhik! uptime is 1 week, 7 hours, 2 minutes, в логах ни строчки про "Bad getbuffer". Вы не могли бы отписаться если откроете case о проблеме написанной Вами в сообщении:

>если не используете vpdn, то это работает. я использую pptp, и, к сожалению, время от времени
>(раз в пару месяцев) рушится где-то память в дескрипторах сессий, перезагрузка спасает. скоро соберусь и открою кейс.

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Leonid Ryzhik , 11-Мрт-11 16:42 
>  Большое спасибо  Leonid Ryzhik! uptime is 1 week, 7 hours,
> 2 minutes, в логах ни строчки про "Bad getbuffer". Вы не
> могли бы отписаться если откроете case о проблеме написанной Вами в
> сообщении:
>>если не используете vpdn, то это работает. я использую pptp, и, к сожалению, время от времени
>>(раз в пару месяцев) рушится где-то память в дескрипторах сессий, перезагрузка спасает. скоро соберусь и открою кейс.

кейс пока так и не открыл. у вас такая проблема появилась? какое количество сессий в среднем есть на кошаке?

С уважением,
Леонид Рыжик.

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 17-Мрт-11 08:41 
>>  Большое спасибо  Leonid Ryzhik! uptime is 1 week, 7 hours,
>> 2 minutes, в логах ни строчки про "Bad getbuffer". Вы не
>> могли бы отписаться если откроете case о проблеме написанной Вами в
>> сообщении:
>>>если не используете vpdn, то это работает. я использую pptp, и, к сожалению, время от времени
>>>(раз в пару месяцев) рушится где-то память в дескрипторах сессий, перезагрузка спасает. скоро соберусь и открою кейс.
> кейс пока так и не открыл. у вас такая проблема появилась? какое
> количество сессий в среднем есть на кошаке?
> С уважением,
> Леонид Рыжик.

  За все время после смены ios (uptime is 15 weeks, 3 days, 11 hours, 18 minutes) проблема не проявилась, чему я несказанно рад. Количество сессий колеблется от 300 до 600-от, сейчас 438. А сколько у вас ?

С уважением
и благодарностью,
Squirel.

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Leonid Ryzhik , 21-Мрт-11 18:48 
>> кейс пока так и не открыл. у вас такая проблема появилась? какое
>> количество сессий в среднем есть на кошаке?
>> С уважением,
>> Леонид Рыжик.
>   За все время после смены ios (uptime is 15 weeks,
> 3 days, 11 hours, 18 minutes) проблема не проявилась, чему я
> несказанно рад. Количество сессий колеблется от 300 до 600-от, сейчас 438.
> А сколько у вас ?

у меня примерно столько же.
какая версия ios сейчас?

C уважением,
Леонид Рыжик.

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 29-Мрт-11 17:15 
>[оверквотинг удален]
>>> С уважением,
>>> Леонид Рыжик.
>>   За все время после смены ios (uptime is 15 weeks,
>> 3 days, 11 hours, 18 minutes) проблема не проявилась, чему я
>> несказанно рад. Количество сессий колеблется от 300 до 600-от, сейчас 438.
>> А сколько у вас ?
> у меня примерно столько же.
> какая версия ios сейчас?
> C уважением,
> Леонид Рыжик.

#sh ver
Cisco IOS Software, 7200 Software (C7200P-ADVIPSERVICESK9-M), Version 12.4(24)T3                                                     , RELEASE SOFTWARE (fc2)
Technical Support: http://www.cisco.com/techsupport
Copyright (c) 1986-2010 by Cisco Systems, Inc.
Compiled Tue 23-Mar-10 13:16 by prod_rel_team

ROM: System Bootstrap, Version 12.4(12.2r)T, RELEASE SOFTWARE (fc1)
BOOTLDR: Cisco IOS Software, 7200 Software (C7200P-KBOOT-M), Version 12.4(15)T5,                                                      RELEASE SOFTWARE (fc4)

router uptime is 17 weeks, 1 day, 18 hours, 58 minutes
System returned to ROM by reload at 19:45:40 Chita Sun Nov 28 2010
System image file is "bootflash:c7200p-advipservicesk9-mz.124-24.T3.bin"
Last reload reason: Reload Command


С уважением,
Squirel.

"%SYS-2-INPUT_GETBUF: Bad getbuffer"
Отправлено Sqquirel , 05-Апр-11 02:37 
Чудес не бывает, произошло все так, как Вы и говорили:

%No active L2TP tunnels

PPTP Tunnel and Session Information Total tunnels -19980
после этого ребут.

Время без сбоев: is 18 weeks, 1 day, 2 hours, 42 minutes


С уважением,
Squirel.