nocproject.org

ufir: именно

огрызок

с дерьмовым и слабым процом

и без резервирования

dvolodin: проблема вернулась сновая алярмы отстают на сутки

смотреть нужно, что у тебя в событиях

http://pastie.org/8578986

вот забавный патчик с защитой от взбесившихся железок

в евентах все хорошо в алярмах опять отставание на сутки

много их поднимает?

кстати, на поиграться

http://www.tokutek.com/products/tokumx-for-mongodb/

добрые люди прикрутили к монге индексы из tokudb

много кого?

http://cdn.oreillystatic.com/en/assets/1/event/36/How%20TokuDB%20Fractal%20Tree%20Databases%20Work%20Presentation.pdf

IRevent: алармов

раз в 5 минут по 2-3 но вчерашних

а в логах коррелятора что?

время синхронизировано?

в логах вроде ничего криминального время нормальное

2013-12-27 11:15:15,249 [fm.correlator] Removing job dispose(52bbbb4303bd2934f34bef94)

2013-12-27 11:15:15,277 Cannot dereference job dispose(52bbbb4703bd2934f34bef96). Removing

вот такое часто в логах

это нормально

а

Cannot dereference?

железки вытирал из базы?

нет

там просто куча логов с железок для которых МО нету валится

dvolodin, а что ты сломал? у меня обновление не проходит

Syncing inv.objectmodels

... updating Cisco | ME3400E | ME-3400E-24TS-M

... updating Cisco | ME3400E | ME-3400E-24TS-M

Error: Checksum mismatch for file 'inv/collections/objectmodels/Cisco/ME3400E/ME-3400E-24TS-M.json'

я обновлял ее вроде

или ты руками правил

хм

правил чтобы тебе дифф отправить

hg revert сделать?

а, ну да, у меня там фикс стоит, ты его еще не закоммитил

угу

dvolodin, NOC-1249 - сделай тогда, а то некрасиво получается

у меня трансиверы в дырки не вставляются

закоммитил

спасибо

dvolodin, а это

- "direction": "s",

+ "direction": "i",

там же sfp?

да

dvolodin, первый коммент из того issue

дырка под sfp типа i всегда

или я не поправил?

ты не поправил, там по ошибке S стоит

и трансиверы не лезут

и ты комменты не прочитал

а

там еще один вендор

еще трансивер

и исправленый вариант Sumitomo етрансивера

я ему имя SFP LX вместо part_no сделал

уехало

чего-то в битбакете не вижу

dvolodin, да, спасибо, все приехало

заодно и проверили переименование

:)

lexus-omsk, это ведь ты хотел статью

http://kb.nocproject.org/pages/viewpage.action?pageId=11108392

да мне в принципе достаточно было того, что ты в тот раз скинул, а вот другим пригодится

и я думал там не периодик будет, есть же специальный интерфейс для классификации... если не ошибаюсь?

эмм

может и есть, я не знаю о нем

да и на что реагировать то?

периодик вполне работает

знаешь

за год

вот ни разу не имел проблемы что он периодик а не триггер

называется IInterfaceClassification

не, ну так-то да, разница не большая, будет оно сразу при создании интерфейса, или раз в сутки, скажем

zi_rus: там не триггеры. Там именно интерфейс. Пишешь пирулю с этим интерфейсом, она получает на входе от дискавери описание интерфейса и железку, задает ему класс на выходе.. Дискавери пишет в базу с этим классом

mikevlz, ну это и есть триггер, она получает на входе в какой момент? когда дискавери прошелся и скормил ей это

ну воспринимай как знаешь

это правило классификации указываается в конфигах

если это будут в нок встраивать, я всем мозг вынесу чтобы делали правильно, через этот интерфейс или еще как

а пока мне хватате того как оно работает

это костыль до того момента пока оно в апстрим не вольется

эх, как достало периодическое поглюкивание web-морды... это только в Опере бывает, когда перестают нормально закрываться и открываться вкладки?

в лисе так же

не замечал такого

и еще в хроме вроде бывает

это везде бывает

dvolodin, одобряэ? http://kb.nocproject.org/pages/viewpage.action?pageId=11108392

а да, точно

было такое

i.profile=InterfaceProfile.objects.get(name="NNI").id

не стоит так в цикле дергать

сделай переменные nni_id = ....

lexus-omsk, это когда откраваешь новый таб а у него только заголовок появляется?

и используй их

да можно так, не оптимизировал, работает не трогай, как говорится

скорее наоборот - не появляется самого таба сверху, только его содержимое, и то в маааленьком неюзабелном окошке

дадада

точно

тоже эта фигня творится

я думал всегда что это фича :)

dvolodin, в статье поправил по твоей рекомендации

там есть еще залипание, когда закрываешь таб, он остается. Закрывается со второго раза, только вот все что после него - несдвигается

mikevlz, короче глючит он

оно вместе приходит по-моему, сначала не закрывается, а потом и новые глючат

mikevlz: а про какой конфиг ты говорил, где указывается пируль?

lexus-omsk: то-ли основной Noc.conf, то-ли дискавери... не помню :)

основной, точно... я дискавери первым делом проверил

zi_rus: кстати, если по умолчанию распихивать порты на uni/nni

то можно реализовать это сразу в interface discovery

эмм, и как ты себе это представляешь?

смотри

если нашли линк -- проверяем с каждой стороны, если стоит дефолтный профиль - пишем NNI

а во время interface discovery -- если у нас уже есть интерфейс и у него есть линк и дефолтный профиль - ставить NNI

приветы.

Error: Checksum mismatch for file 'inv/collections/objectmodels/Avago/Transceiver/1G/SFP_T.json'

и нахрен это встраивать? лучше пример стандартной пирули сделать.

стандартная болезнь?

`kk: ага

поправлю

dvolodin, как тебе сказать, я тебе еще два года назад такое предлагал сделать, если есть линк значит порт сетевой, значит нужный профиль указать, но это слишком сильно прибивается гвоздями. пример, у меня с ноке есть cpe клиентские, так что лично у себя я в NN

I перевожу не просто все порты с линками, а с линками которые НЕ смотрят на СРЕ. Встроенный пируль более гибкое решение, его и отключить и поправить под свои нужды легче чем копать код нока, еще и сломаешь что-нибудь

у меня тоже кстати отставание на сутки.

e_zombie, http://kb.nocproject.org/pages/viewpage.action?pageId=11108392 - вот можешь попросвещаться

откуда столько народу понабежало? почти 40 человек

боты

e_zombie: ты патчик накати, со своим отставанием

попробую в ближайшее время. бумажная работа

zi_rus: очень сильно не хватает построчной коментариев кода.

dvolodin:

2013-12-27 13:19:46,763 REPORT: elapsed: 95.2849s, speed: 10.5ev/s, events: 1000, lag: 84945.763472s, failed: 0, deleted: 2, suppressed: 0, unknown: 324, classified: 271, disposed: 112, duplicated: 291, unk. duplicated: 0

2013-12-27 13:21:39,585 REPORT: elapsed: 112.8213s, speed: 8.9ev/s, events: 1000, lag: 85031.585354s, failed: 0, deleted: 0, suppressed: 0, unknown: 620, classified: 142, disposed: 106, duplicated: 132, unk. duplicated: 0

dvolodin: Не смержилась часть файлов

e_zombie, мне кажется там все очевидно. а что тебе непонятно?

вот когда тебе кажется что что то очевидно - это как раз и оказывается самым сложным для понимания другими.

я это ещё со школы выучил. когда готовился к олимпиадам по физике.

и в жизни это подтверждается не раз

слышал бы ты как я на съёмках с моделью общаюсь.

там вообще всё пошагово идёт всегда

zi_rus: по моим подсчетам у него вот тут unk. duplicated: 0 должно быть изрядно

ну там вроде все названия сделаны логичными, просто из названия должно быть понятно что происходит

e_zombie, ну ты тогда задай вопросы, потому что в коде где один цикл и if else, я даже не знаю что тут комментировать

dvolodin, ну без правил конечно таких полно будет

zi_rus: вот и напиши что где какая переменная означает

там одна переменная

i

это объеки

*объект

текущий интерфейс

цикл же по ней построен

кто в курсе чего у ростелекома в сторону европы умерло?

что-то большое

на Наге тоже жалуются.

добавил классификатору хитрую давилку unknown | syslog

которая гасит повторы

да уже починили

как защита от флудящих железок

dvolodin: а как быть с моими отстающими алярмами?

IRevent: жди. сейчас поправят кое что и возможно это полечит

хорошо

IRevent: что у тебя REPORT в логе классификатора показывает?

2013-12-27 16:07:13,239 REPORT: elapsed: 0.2206s, speed: 22.7ev/s, events: 5, lag: 1.239098s, failed: 0, deleted: 0, suppressed: 0, unknown: 0, classified: 2, disposed: 3, duplicated: 0, unk. duplicated: 0

2013-12-27 13:58:37,715 REPORT: elapsed: 67.8842s, speed: 14.7ev/s, events: 1000, lag: 87073.715219s, failed: 0, deleted: 0, suppressed: 0, unknown: 119, classified: 205, disposed: 83, duplicated: 265, unk. duplicated: 328

2013-12-27 14:00:14,030 REPORT: elapsed: 96.3145s, speed: 10.4ev/s, events: 1000, lag: 87158.030456s, failed: 0, deleted: 0, suppressed: 0, unknown: 208, classified: 180, disposed: 135, duplicated: 140, unk. duplicated: 337

2013-12-27 14:01:47,887 REPORT: elapsed: 93.8562s, speed: 10.7ev/s, events: 1000, lag: 87246.887099s, failed: 0, deleted: 0, suppressed: 0, unknown: 244, classified: 110, disposed: 117, duplicated: 113, unk. duplicated: 416

2013-12-27 14:03:43,039 REPORT: elapsed: 115.1520s, speed: 8.7ev/s, events: 1000, lag: 87360.039769s, failed: 0, deleted: 0, suppressed: 0, unknown: 270, classified: 122, disposed: 162, duplicated: 115, unk. duplicated: 331

2013-12-27 14:06:05,497 REPORT: elapsed: 142.4574s, speed: 7.0ev/s, events: 1000, lag: 87501.497643s, failed: 0, deleted: 0, suppressed: 0, unknown: 296, classified: 38, disposed: 195, duplicated: 35, unk. duplicated: 436

2013-12-27 14:06:59,018 REPORT: elapsed: 53.5207s, speed: 18.7ev/s, events: 1000, lag: 87552.018884s, failed: 0, deleted: 0, suppressed: 0, unknown: 359, classified: 45, disposed: 57, duplicated: 40, unk. duplicated: 499

с самым последним патчем проверй

e_zombie: да, у тебя заработала давилка повторов

уже неплохо

это с последним

но лаг то увеличивается

у меня не давит дубли

ты куда патч то залил в инвенотри поди?

да

я то на develop

давай к нам, у нас есть патчик

мне страшно

хотя нет я на инвентори как оказалось

если я себе в профиле добавил почту или изменил ее, когда оно применится?

или надо нок рестартить?

или как?

не надо рестартить

значит просто должно примениться?

да

хорошо

было бы неприятно узнать что почта не применилась и надо еще что-то сделать

а нотификация нужна сейчас

в фм вообще ничего нельзя добавить без рестарта

правило - рестарт

триггер -рестарт

и это правильно.

а то жиром заплывешь

это не помогает. позавчера медосмотр был, сказали уже заплываю

а мне постеснялись...

в тренажёрку вас всех

я ленюсь

надо просто меньше жрать

https://pp.vk.me/c416817/v416817625/7c80/G6z4CCcRFVQ.jpg

IRevent не дождался патча ;)

нашли причину оттупки классификатора

dvolodin, admin и oper status надо разделять и выводить в инвентори

oper в inventory нельзя

это динамифка

почему нельзя?

не, ты можешь засунуть его куда хочешь

но он должен быть в инвентори

у портов

точнее у интерфейсов

:)

наверное, нужно коллекцию наворотить

oper_status

с полями managed object id, interface name и oper_status

а может и admin status туда же

а у тебя интерфейсы в постгресе? может их тупо в монгу утащить полностью?

в монге

и коллекцию в монгу

так почему нельзя просто параметр добавить

или это плохо скажется на масштабируемости?

именно

постоянные апдейты статических данных - это не очень хорошо

там немного в другом дело

dvolodin: будешь пилить чекбокс в СА с включение\отключение классификации событий для объекта?

или будем обусждать?

e_zombie, по-моему ты чего-то курнул. зачем это надо

если у тебя есть в сети железка с битой сфпи которая шлёт 10 событий в сек - твоему классификатору "пиздарики фанарики"

e_zombie: уже нет

как видишь

а если 10 - то гарантированнл

и что быстрее - снять чекбокс или писать пирулю?

e_zombie, быстрее поменять sfp

за 100 км?

да ты супермэн я гляжу

e_zombie: сними trap source, и будет тебе счастье

[sarcazm mode on]

да хоть за тысячу, у тебя на сети проблема, ее надо решать, брать новую сфп из зипа и ехать менять

а если серьезно -- то явно нужна простыня настроек

как минимум -- копия всего, что есть в managed object profile

конечно нужна, пингование конкретной железки отключить прямо не получается

zi_rus: это вам хорошо, у вас сухо и холодно

zi_rus: а в этот момент система управления сетью у тебя полегла. и ты думаешь это правильно?

а у них в саратове девки горячие, парней караулят

сунет монтажник еще SFP не туда, как доставать?

девки у нас нихуя не горячие.

тупые сучки через одну

e_zombie, я думаю что жизнь мониторинга это дело второе. и если поток событий смог его положить то надо решать почему это произошло

вот и я о том же. и причём это должен сделать обычный тупой сменный. а не ты в пьяном угаре 31 января

нет, это никто не должен делать

пьяный угар 31 января?

стоп

мониторинг должен выдерживать

хорош пить спирт для протирки оптических осей

dvolodin, 31 января это пятница, так что ок

zi_rus: это ты расскажи володину с его блокировками в монге :)

dvolodin, почему нок не выдерживает битые сфпшки?

:) ЫЫЫЫЫЫЫЫЫЫЫЫЫЫЫЫЫ

не выдергивает?

в этом что-то есть

злой фолт с криком "заебала" гасит флудящий порт

:)

и карает ответсвенного

e_zombie, dvolodin говорит что сменному будет бить удар током в причинные места пока не поменяет сфп

ну у нас в 180 км один уже три месяца меняет

электрический стул для мониторинга

[root@orangebox remote]# grep "Dec 27 15:22" snet.log | wc -l

1945

это у меня так сеть сообщает о самочувствии

http://www.photosight.ru/photos/5353115/

ну нет повода не выпить.

вроде работает теперь слассификатор нормально

в новый год с новым классификатором

простите нуба, а это что за подсистема?

cm? или sa?

fm

[root@orangebox remote]# grep "Dec 27 15:22" snet.log | wc -l

1945

[root@orangebox remote]# ls -1 ./hosts/ | wc -l

4400

[root@orangebox remote]#

ну вот что бы знали до какого предела мы пока можем маштабироваться

а что за папка хостс ?

туда сислог валит логи с сети в файлы

я свой сислог сервер назвал orangebox по аналогии с чёрным ящиком на самолётах

Вова - выпей лучше вискаря

грамм 300

300 мало

лучше вина. 0.7э

да хз. я в вине не разбираюсь, которым баба моя поит - то и пью иногда

хорошее вино - это очень и очень неплохо

и голова не болит и праздник быстро не заканчивается

dvolodin: Дииим! Доделай мержинг. Не все изменения перенеслись!

e_zombie просто я люблю нефть

нефть всему голова

а еще я люблю маму, Родину и деньги

Dmitry11: что не донеслось?

https://bitbucket.org/nocproject/noc/src/9d5c2d086681de5a2aababd2dc9bee3f30a3f355/fm/collections/eventclassificationrules/Cisco/IOSXR/Security/Audit.json?at=feature/inventory

перекдючись на development и увидишь различия

Это только то, на что мне указали

zi_rus: вот с последним коммитом можно будет и состояние линков отслеживать по event'ам

dvolodin: увидел разницу между ветками ?

походу и дискавери начало быстрее работать

приветствую всех

добрались таки руки для внедрения noc

с чего посоветуете начать? добавил несколько MO. конфиги собирает.

MO нескольких типов добавил - от отступа до роутеров

отступа = доступа)

mik0s: настрой их, чтобы слали логи и трапы

И смотри на FM

все на корпоративах чоль?

о

Dmitry11: спасибо. Это где хоть настраивается?

в самих железках сам настраивай

а кто подскажет, можно ли импортировать новые модели оборудования в ветку default ?

в смысле syslog в сторону noc засылать? и snmp trap туда же?

а в НОК - в МО достаточно прописаит Trap Source IP

mik0s: да

заодно, можешь импортировать вланы с железок в VC

Dmitry11: на железках syslog и trap в сторону noc + в МО указать Trap Source IP ?

да

Dmitry11: спасибо - сейчас тогда пока это сделаю

а вот с импортом в VC траблы. пробовал сделать, но вываливается окно заполненное пустыми строками

mik0s: обновляйся до текущих версий

скорее всего у тебя релиз 0.8

вроде скриптом ставился

ага, так и есть в эбаут 0.8

обновление с помощью /opt/noc# ./scripts/upgrade

?

или как-то еще?

обновился через скрипт /opt/noc# ./scripts/upgrade

0.8

и лучше сразу на ветку inventory потому что девелом и дефолт устаревшие очень сильно

правь конфиг upgrade.conf

см https://bitbucket.org/nocproject/noc/commits/all

BRANCH=inventory ?

feature/inventory

активненько так)

ага, спасибо. сейчас проверим

сегодня полечили одну очень неприятную багу которую не видели гдето с год

у тебя есть на сколько устройств?

сеть на сколько устройств?

у меня в ноке 6500 железок

около 500 коммутаторов - малышка)

да. у тебя всё будет хорошо

дай бог)

помни что эксполрт импорт работает криво с тегами

тиы пока не знаешь зачем это - но помни об этом когда у тебя не поднимутся бакапы :)

просто пока даже не представляю куда дальше смотреть. много всего. по рассказам все очень вкусно, но что где - хз

ok )

добавь руками одну железку

потом сделай экспорт

и потом сделай csv файл для всх остальных лжелезок и загрузи в систему

это всё в Sistem activation \ menedgement objecy

ага, спасибо - как раз думал как остальной доступ туда впихивать

вот есть у меня все железки

конфиги собираются

потом в SA сходи в сетуп и сделай там MO profiles

и разбей их по группам типов железок

так будет удобнее отключить лишний опрос

так

вернее сд\перва это сделай а потом уж генери файл с железками

угу

h4wk: а зачем?

e_zombie: а какой функционал будет полезен первое время?

нужны модели сейчас - сиди на feature/inventory

сбор конфигов

потом карты

это работает почти правильно.

dvolodin: у меня при установке из ветки интвентори нету моделей, которые есть в дефолтной ветке

остальное через ёбтвоюмать

ни длинком ни зте

*длинков

e_zombie: по конфигам - вот есть они. на роутерах полезно, на аггрегации да, но доступ - там пол конфига динамические. можно как-то убирать не нужное или пусть складируются состояния?

h4wk: каких именно?

mik0s: лишнее из конфига тоже можно вырезать

да прибудет с новичками сила

пошёл я домой

e_zombie: а где искать логи железки которые завернул на noc?

e_zombie: спасибо за помощь

в СА \ мо \ сама железка сверху меню конфиш

там же скрипты и аварии

ну ещё фаулт менеджемент более менее. его сегодня как раз починили

всё. ушёл

хм - нету никакого меню

даже отредактировать MO не могу теперь)

e_zombie: давай, удачи)

dvolodin: это уже ручками в скриптах?

?

dvolodin: mik0s: лишнее из конфига тоже можно вырезать

pyRule

аа, понятно. ну до этого еще далеко))

чего-то толи обновилось плохо, то ли еще что -- не вижу в SA MO меню никакого, только строка поиска

и даже всплывающая менюшка на железке не работает (

проблема в safary?

zi_rus: твое как-то так

http://pastie.org/8580364

safari нормально работает

лучше обновись до feature/inventory

dvolodin: как раз до него обновился

до этого работало)

тогда настройки nginx проверь

и кеши сбрось

и перегрузи страницу

попробую

да уж перегружал и страницу и сам noc

р

о

логаут/логин помог)

а киньте кто-нибудь JSON с классифицированных событий Link Up, Link Down и Err-Disable?