Frozen Fido : RU.CISCO : Народ - спасайте :( чего ковырять?

ru.cisco

 
 - RU.CISCO ---------------------------------------------------------------------
 From : Alex Solovyov                        2:5020/1575    29 Oct 2005  00:36:06
 To : All
 Subject : Народ - спасайте :( чего ковырять?
 --------------------------------------------------------------------------------

В общем большому кораблю... :(

Есть киска 7507. Отконфигурил, поставили - все завелось, все заурчало -
зашибись. Только одно меня смутило, но решил не обращать внимание - при
включении (когда рубильником на ее блоке питания) в логе появляется следующая
гадость:
----------
*Oct 28 16:51:36: %ALIGN-3-SPURIOUS: Spurious memory access made at 0x40C1D988
reading 0x4
*Oct 28 16:51:36: %ALIGN-3-TRACE: -Traceback= 40C1D988 40C2E6DC 40C3E880
40375638 4038CF40 4038D108 4038D264 4038D308
*Oct 28 16:51:36: %ALIGN-3-TRACE: -Traceback= 40C1D9D8 40C2E6DC 40C3E880
40375638 4038CF40 4038D108 4038D264 4038D308
----------
После этого, если сделать restart с консоли - то этих строчек не появляется в
логе. Так как это проявилось только при "холодном старте" - не придал большого
значения, так как на сайте cisco.com сказано - "давайте ваш tech-support - мы
будем думать над ним".

Во обещем после поднятия в рабочей конфигурации проверил sh int stat - все было
замечательно - через проц мизер, через route-cache 60% трафика, все остальное -
distributed, загрузка проца - не более 15-20%. Все ОК.

Проходит часов 6 и что-то смотрю - mrtg график CPU пополз далеко вверх под
60-80%. Заползаю на киску.. БА - ВЕСЬ трафик шурует через проц! Обнуляю каунтеры
- так и есть - ни dCEF'a, ни FastSwitching'a. Пытаюсь отключить cef , очищаю ip
cache.. пытаюсь включить cef обратно и .. я потерял консоль (все удаленно
конфигурится).. Проходит несколько минут - отозвалась. Вот лог момента:
-----------
Oct 28 22:41:35: %SYS-5-CONFIG_I: Configured from console by xxxx on vty1
(yyy.yyy.yyy.yyy)
Oct 28 22:42:28: Other config session is opened by xxxx on vty1
(yyy.yyy.yyy.yyy)

Oct 28 22:43:02: %VIP2 R5K-3-MSG: slot0 VIP-3-SVIP_RELOAD: SVIP Reload is
called.
Oct 28 22:43:02: %VIP2 R5K-3-MSG: slot0 VIP-3-SYSTEM_EXCEPTION: VIP System
Exception occurred sig=23, code=0x24, context=0x60E0C8E4

Oct 28 22:43:03: %DBUS-3-DBUSINTERRSWSET: Slot 0, Internal Error due to VIP
crash
Oct 28 22:43:27: %FIB-3-FIBDISABLE: Fatal error, slot 0: IPC Failure: timeout
Oct 28 22:47:26: %SYS-5-CONFIG_I: Configured from console by xxxx on vty0
(yyy.yyy.yyy.yyy)
Oct 28 22:47:26: %RSP-3-RESTART: cbus complex
-----------

Т.е. она просто перегрузила VIP..
После такого выкрутаса fastswitching напрочь пропал. Т.е. сейчас вот такая
картина:
sh int stat
FastEthernet0/0/0
Switching path Pkts In Chars In Pkts Out Chars Out
Processor 1035263 678644383 1065500 144418681
Route cache 82 2003 8 504
Distributed cache 3923519 3963657380 2999548 364820509
Total 4958864 4642303766 4065056 509239694

При этом (на всех интерфейсах):
FastEthernet0/0/0 is up, line protocol is up
Internet address is xxx.xxx.xxx.xxx/30
Broadcast address is 255.255.255.255
Address determined by non-volatile memory
MTU is 1500 bytes
Helper address is not set
Directed broadcast forwarding is disabled
Outgoing access list is not set
Inbound access list is 150
Proxy ARP is disabled
Local Proxy ARP is disabled
Security level is default
Split horizon is enabled
ICMP redirects are always sent
ICMP unreachables are always sent
ICMP mask replies are never sent
IP fast switching is enabled
IP fast switching on the same interface is disabled
IP Flow switching is disabled
IP CEF switching is enabled
IP Distributed switching is enabled
IP Feature Fast switching turbo vector
IP Feature CEF switching turbo vector
IP multicast fast switching is disabled
IP multicast distributed fast switching is disabled
IP route-cache flags are Fast, Distributed, Policy, CEF
Router Discovery is disabled
IP output packet accounting is disabled
IP access violation accounting is disabled
TCP/IP header compression is disabled
RTP/IP header compression is disabled
Policy routing is disabled
Network address translation is enabled, interface in domain outside
WCCP Redirect outbound is disabled
WCCP Redirect inbound is disabled
WCCP Redirect exclude is disabled
BGP Policy Mapping is disabled
------------
Чего делать, куда копать? :( Куда пропал FastSwitching? К сожаление сейчас не
подниму лог (в другом месте он) - но я сам смотрел на статистику и видел, что
fast-switching работает и берет на себя львиную долю трафика - то, что сейчас
пролетает через проц - летело через route-cache стандартный, а на проц кидалось
совсем чуть-чуть. Distributed-трафик был примерно такой же показатель (в
процентах от total)

Hа киске исползуется только NAT, policy-map-shaping, tunnel, routе on dest в
тунель или на другой интерфейс в инет напрямую. Все - больше ничего. Hу
SMTP-server поднял только чтоб мргтой лазить ну и логирование на удаленную
машинку.

В чем может быть проблема? в памяти? в IOS'e? в конфиге? :( Точно такой же
конфиг прекрасно жил на 4700, но, естественно, без distributed - на CEF'e все
замечательно крутилось, да и без CEF'a тоже крутилось все замечательно через
route-cache - на проц отдавалось не так много.
Hе знаю чего делать - нужен совет.. или, если это проблема именно этого IOS'a -
то новый IOS :-) : нету у меня сертификата со всеми вытекающими.. емыл для
данного подарка: first -a- briggs.ru (влезет туда много :-)

краткий sh ver:
Cisco IOS Software, RSP Software (RSP-JK9SV-M), Version 12.3(7)T, RELEASE
SOFTWARE (fc1)
...
Compiled Fri 20-Feb-04 20:35 by eaarmas
ROM: System Bootstrap, Version 11.1(8)CA1, EARLY DEPLOYMENT RELEASE SOFTWARE
(fc1)
BOOTLDR: RSP Software (RSP-BOOT-M), Version 12.2(12a), RELEASE SOFTWARE (fc1)

xxxxxx uptime is 7 hours, 24 minutes
System returned to ROM by reload at 13:57:06 MSD Fri Oct 28 2005
System restarted at 17:06:44 MSD Fri Oct 28 2005
System image file is "disk0:rsp-jk9sv-mz.123-7.T.bin"
Last reload reason: Unknown reason
....
Cisco RSP4 (R5000) processor with 262144K/2072K bytes of memory.
R5000 CPU at 200MHz, Implementation 35, Rev 2.1, 512KB L2 Cache
Last reset from power-on
Chassis Interface.
1 EIP controller (6 Ethernet).
1 VIP2 R5K controller (2 FastEthernet).
6 Ethernet interfaces
2 FastEthernet interfaces
123K bytes of NVRAM.

62720K bytes of ATA PCMCIA card at slot 0 (Sector size 512 bytes).
8192K bytes of Flash internal SIMM (Sector size 256K).
No slave installed in slot 3.
Configuration register is 0x2102
----------------
-------------
#show align
Alignment data for:
RSP Software (RSP-JK9SV-M), Version 12.3(7)T, RELEASE SOFTWARE (fc1)
Technical Support: http://www.cisco.com/techsupport
Compiled Fri 20-Feb-04 20:35 by eaarmas

No alignment data has been recorded.

Total Spurious Accesses 2, Recorded 2

Address Count Traceback
4 1 0x40C1D988 0x40C2E6DC 0x40C3E880 0x40375638
0x4038CF40 0x4038D108 0x4038D264 0x4038D308
4 1 0x40C1D9D8 0x40C2E6DC 0x40C3E880 0x40375638
0x4038CF40 0x4038D108 0x4038D264 0x4038D308
----------------------

Sincerely yours - Alex-First [Team Realm 7:359@Realm]
"Роза пpи имени пpежнем - с нагими мы впpедь именами"
(с) Умбеpто Эко "Имя pозы"
... "..Я о ней мечтал всю жизнь. Hаконец мои желанья сбылись.." (с) Аpия
--- Коцать тут..
* Origin: Hacker's Stone BBS (095) 344-1488 [00:00-12:00] (2:5020/1575)

Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор

Тема:	Автор:	Дата:
Народ - спасайте :( чего ковырять?	Alex Solovyov	29 Oct 2005 00:36:06

Архивное /ru.cisco/28224362cc37.html, оценка 2 из 5, голосов 10