nocproject.org

dvolodin: привет

есть вопрос по селекторам:

делаю, name "s3-1-1.intt|s3-1-2.intt|s57-1-2.intt"

Source Combine Method: OR, Sources: "backbone"

Expression выглядит так:

(IS MANAGED AND name ~ "s3-1-1.intt|s3-1-2.intt|s57-1-2.intt") OR ((IS MANAGED) OR (IS MANAGED AND tags CONTAINS ["backbone"]) OR (IS MANAGED AND name ~ "s2-1-1.tomica"))

нажимаю кнопку Matched Objects --- объекты s3-1-1.intt|s3-1-2.intt|s57-1-2.intt не попадают в выборку

вопрос:

Source Combine Method: OR --- это OR с другими полями селектора, или тоько в Source?

*только

or -- это только между source

жаль, в экспрешшн выглядит как не только

dvolodin: а как тогда это работает в моем случае? почему в селекторе отработал блок Source а не Filter by Name, коммутаторы в них не пересекаются

там еще беда с Is Enabled, но это отдельная тема

hello. its channel about anime?

я вчера гуглил как корректно обновить монгу, много было ответов про мангу :)

корректно обновить монгу ?

просто берешь и обновляешь

ага, я ни разу не обновлял

у них бинарный формат не меняется

ну если очкуешь можешь перед этим сделать mongodump

дело в том, что с того репозитария, что был в убунте, никаких обновлений не прилетало

freeseacher: настроил же я бэкап в ноке

у меня вот так

cat /etc/apt/sources.list.d/mongodb.list

deb http://downloads-distro.mongodb.org/repo/debian-sysvinit dist 10gen

так что менял репозитарий и ставил

ага, с него

пользун нок в монге грохнулся

а так, все прошло ровно

у меня вроде ничего ни разу не йобалось

но у меня почти всегда последняя версия на этом хосте

была 2.0.4 и я подозреваю, что это встроенная версия убунты, что ли

процесс назывался mongodb, теперь mongod

ага и конфиги задвоились

при инсталле он честно предупредил, что одну снесет, а другую поставит

freeseacher: не подскажешь, есть ли в питоне что-то, что позволит собрать "1,2,3,4,5" -> "1-5"?

ага

алгоритмика :)

готовой функции не знаю

ааа, я подозревал :)

отсортируй, возьми первый эелемент, иди по массиву, если следующий элемент больше на единицу выкидывай его, иначе замыкай последовательность и продолжай

а вот еще, есть ли способ получить по урлу отчет VC\Int и топологию Network Map\Chart?

в каком виде ?

в том, в каком дает вход в VC\int (репорт) или Network Map\Chart (экран с топологией)

типа мы уже жахнули на посмотреть интерфейсы по конкретному влану

или на топологию по конкретному чарту

тополгия картинкой не храниться

она каждый раз отрисоывается из заданных параметров

да и не надо картинкой

а vc\int легко

погоди

может я не так задаю вопрос

noc-server/vc/vc/<id>/interfaces/

"main/desktop/#sa.managedobject/15" вот так я захожу в SA\MO\ ID=15

аа

в закладки добавить ?

хочу сделать доку, а в ней урлы

в карте не вижу поддержку хистори апи.

видимо попасть в конкретную карту не получитсья

подозреваю что это будет в feature/jointjsmap

а вот штука с mrt, это не для таких случаев?

не

она для удаленного взова скриптов

но ведь за выбором чарта тоже ведь дальше скрипты?

не догояю я с mrt

http://kb.nocproject.org/pages/viewpage.action?pageId=4784205

читал я, просветления не произошло :)

там вызывается на пользовательский интерфейс

а `низкоуровневые` функции

а тебе надо в интерфейс

так мы запрашиваем json, который отдает скрипт нока?

для этого есть штука которая называется history api (название дурацкое и не отражает чего на самом деле оно позволяет делать)

да

хистори апи отвечает за формирование ссылки в интерактивных приложениях

и вот эту часть ссылки #sa.managedobject/15 обрабатывает уже не сервер а браузер, как бы эмулирую тыки на вебе

и ее нужно специально прикручивать?

да

плохо

я не допрошусь этого

freeseacher: еще скажи, а вот kb, та что в ноке, она живая?

нет

она мертвая

была идея выкладывать решения в вибе патчей, что бы в нее прилетали статьи

*в виде патчей

типа есть проблема, относящаяся к сносу МО, делаем патчик, комрады обнавляются и видят новую статью

некоторое обобщение логов канала

похоже на блог ?

ну слегка

только это будет именно knowledge base по текущим проблемам

а что мешает сейчас вести ?

по идее это можно вывести на welcome page

во первых мы это обсуждали, например мне не удобен блог, в том виде что есть

TSergey_: у меня была идея распределенной KB, да

блог в confluence хорош, но ему сильно не хватает нормального индекса

индекса ?

а во вторых --- писать стать про то как снести state в networkchart --- не дотягивает, а как KB, может быть востребовано

да, он там колендарный

можно, наверное, в KB сделать spaces

и какие-то из них -- публичные с синхронизацией

dvolodin: а то как сейчас организован KB в ноке --- ты можешь сделать что бы с патчем прилетела статья в KB?

мне они более интересны в роли инструкций по действиям при авариях

чтобы в отдельном табе показывать статью из KB

dvolodin: и если правильно понимаю, русский там не поддерживается

как так не поддерживается?

эээ

неужели путаю

наверное потому что в "Language:" только English

нашел где добавить язык

dvolodin: про селекторы вопрос, то как ты показываешь селектор в Expession, так и должен накатываться селектор?

TSergey_: текстовая форма только для справки нужна

т.е. может показываться правило не так, как накатывается фильтр

dvolodin: и фильтр работает как AND + тэги, где внутри можно выставить AND\OR

фильтр всегда работает как and

какая-то ошибка, или я не догоняю

есть два МО s2-1-1 (id 4) s144-1-2 (id 2)

делаю селектор s2, [Filter By Name: s2-1-1] Expression:{IS MANAGED AND name ~ "s2-1-1"}, Matched Objects: s2-1-1

делаю селектор s2_s144, [Filter By Name: s144-1-2, Sources: s2] Expression:{

(IS MANAGED AND name ~ "s144-1-2") OR (IS MANAGED AND name ~ "s2-1-1")} Matched Objects: s2-1-1

почему во втором случае показывается только s2-1-1?

1. откуда OR, если все в фильтре AND

2. почему s2-1-1? вовсе должно быть пусто

в expression OR\AND между скобками берется из Source Combine Method, видимо просто ошибка формирования Expression

проверил подключая селекторы в Sources и меняя Source Combine Method

нет, там все правильно

если хочешь комбинировать селекторы - не пиши в них фильтры

ща

(IS MANAGED AND name ~ "s144-1-2") OR (IS MANAGED AND tags CONTAINS ["boot"]) OR (IS MANAGED AND name ~ "s2-1-1")

вот это их селектора где первые скобки из фильтра, вторые две из Source

и метод OR

а это при методе AND

(IS MANAGED AND name ~ "s144-1-2") AND (IS MANAGED AND tags CONTAINS ["boot"]) AND (IS MANAGED AND name ~ "s2-1-1")

при комбинировании селекторы + фильтр, отрабатываю только селекторы?

*отрабатывают?

да, вероятно так

а нет, вот еще момоент

фильтр + один селектор (OR) Matched Objects: из селектора

фильтр + один селектор (AND) Matched Objects: пусто

*момент

и невозможно полностью не использовать фильтр, IS MANAGED лезет во все выражения

и не устанавливается в "-"

dvolodin, обновился, дебаги нового ничего не показывают, проба также замирает после перваого прохода и writer ничего не пишет

NOC-1430

e_zombie, ты небось модельки удалял

freeseacher, графиками еще не баловался?

если и удалял то оооочень давно

кто-нибудь может подтвердить проблемы как у меня или это я неудачник?

e_zombie, а трейс появился давно или сейчас

не могу сказать. за коррелятором не смотрел. плюс я первый день после месяца отпуска. я числа 15 обновился и уехал на урал

а вот так правильно писать Affects Version/s: 0.9 ?

никак не пиши, пусть фиксер думает.

а насчёт IS MANAGED - оно ещё и не самым понятным образом игнорится в ряде случаев

точнее, в принципе понятным - в случае использования OR.

доброго дня. А это у меня только такая трабла, что если делать сниппет на селектор, и в селекторе одна из железок недоступна, то скрипт вываливается в трейс? Оо причем до запуска

страшные вещи ты говоришь

кто у нас там Длинки правил ? NOC-1431

отбой.

всем спать?

не. по багу.

хорошо

2014-09-04 13:10:23,746 REPORT: elapsed: 8.2366s, speed: 121.4ev/s, events: 1000, lag: 83522.746086s, failed: 0, deleted: 0, suppressed: 0, unknown: 15, classified: 98, disposed: 149, duplicated: 111, unk. duplicated: 627

2014-09-04 13:10:32,287 REPORT: elapsed: 8.5410s, speed: 117.1ev/s, events: 1000, lag: 83506.287565s, failed: 0, deleted: 2, suppressed: 0, unknown: 10, classified: 262, disposed: 127, duplicated: 114, unk. duplicated: 485

2014-09-04 13:10:38,913 REPORT: elapsed: 6.6251s, speed: 150.9ev/s, events: 1000, lag: 83477.913197s, failed: 0, deleted: 0, suppressed: 0, unknown: 20, classified: 105, disposed: 149, duplicated: 105, unk. duplicated: 621

2014-09-04 13:10:58,638 REPORT: elapsed: 19.7249s, speed: 50.7ev/s, events: 1000, lag: 83476.638487s, failed: 0, deleted: 0, suppressed: 0, unknown: 8, classified: 349, disposed: 89, duplicated: 97, unk. duplicated: 457

2014-09-04 13:11:07,303 REPORT: elapsed: 8.6642s, speed: 115.4ev/s, events: 1000, lag: 83400.303138s, failed: 0, deleted: 8, suppressed: 0, unknown: 14, classified: 281, disposed: 125, duplicated: 77, unk. duplicated: 495

ччёто у меня коррелятор раком стоит.

толи пол месяца не работал толи ещё что.

строю кусочек топологии по LLDP

один DES-3200-18 в упор не видит соседа

его видят, он нет

посоветуйте чего-нибудь

Command: show lldp remote_ports

Remote Entities Count : 0

LLDP Status : Enable

forum.dlink.ru - 'На коммутаторах (des-3200) прошивкой 1.83.B004, 1.83.B005 не работает (не видет соседей) lldp пока не скажешь "config gvrp 25-28 state disable ingress_checking disable"'

в общем, как обычно

вот это да

http://forum.dlink.ru/viewtopic.php?f=2&t=156053&start=75

1.84.B006

пишите авторам

e_zombie: да, он у тебя на дель от жизни отстал

disposed очень много

'выше был же совет. ставите на магистралях pvid == management vlan и не нужно ингресс чекинг выключать.'

у меня вроде так и есть

а вот это config lldp ports 25-26 notification enable я не включаю

e_zombie, посмотри в топ cpu классификатор не съел?

съел.

аааааа

dvolodin, нас уже двое

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND

9409 mongodb 20 0 79.3g 1.3g 1.2g R 86.1 23.0 16:08.13 /usr/bin/mongod --quiet -f /etc/mongodb.conf --smallfiles --nojournal run

9165 noc 20 0 516m 145m 12m R 78.5 2.5 28:34.94 /opt/noc/bin/python ./scripts/noc-correlator.py launch -c etc/noc-correlator.conf -i 0

9169 noc 20 0 449m 79m 12m S 35.0 1.4 11:02.75 /opt/noc/bin/python ./scripts/noc-discovery.py launch -c etc/noc-discovery.conf -i 0

9420 postgres 20 0 1638m 30m 22m R 11.5 0.5 2:00.94 postgres: noc noc [local] SELECT

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND

9153 noc 20 0 470m 106m 12m R 92.7 1.9 0:42.38 /opt/noc/bin/python ./scripts/noc-sae.py launch -c etc/noc-sae.conf -i 0

9409 mongodb 20 0 79.3g 1.1g 1.1g R 87.0 20.5 0:27.44 /usr/bin/mongod --quiet -f /etc/mongodb.conf --smallfiles --nojournal run

9165 noc 20 0 487m 115m 12m R 82.1 2.0 0:39.00 /opt/noc/bin/python ./scripts/noc-correlator.py launch -c etc/noc-correlator.conf -i 0

9150 noc 20 0 682m 93m 12m R 74.8 1.6 0:13.35 /opt/noc/bin/python ./scripts/noc-scheduler.py launch -c etc/noc-scheduler.conf -i 0

9169 noc 20 0 442m 73m 12m R 60.2 1.3 0:25.31 /opt/noc/bin/python ./scripts/noc-discovery.py launch -c etc/noc-discovery.conf -i 0

insert query update delete getmore command flushes mapped vsize res faults locked db idx miss % qr|qw ar|aw netIn netOut conn time

4 609 202 102 0 208|0 0 79g 79.3g 1.14g 7 noc:4.7% 0 0|0 1|0 231k 343k 27 12:40:56

4 604 189 98 0 197|0 0 79g 79.3g 1.14g 0 noc:5.7% 0 1|0 1|0 226k 328k 27 12:40:57

4 520 231 120 0 241|0 0 79g 79.3g 1.14g 0 noc:6.3% 0 0|0 1|0 229k 319k 27 12:40:58

13 455 214 107 1 228|0 0 79g 79.3g 1.14g 0 noc:6.1% 0 0|0 1|0 205k 287k 27 12:40:59

13 462 178 85 0 193|0 0 79g 79.3g 1.14g 0 noc:11.2% 0 0|0 1|0 184k 266k 27 12:41:00

78 503 171 89 0 254|0 0 79g 79.3g 1.14g 0 noc:6.0% 0 0|0 1|0 217k 277k 27 12:41:01

4 446 187 92 0 192|0 0 79g 79.3g 1.14g 0 noc:5.4% 0 0|0 1|0 195k 251k 27 12:41:02

301 462 181 97 1 492|0 0 79g 79.3g 1.14g 0 noc:10.2% 0 0|0 2|0 296k 299k 27 12:41:03

e_zombie, не, у тебя не то, у меня классификатор ест цпу

e_zombie, а открой fm > events > new

e_zombie, не не маленький же уже

там много их или пустой список

кидай в пасту

не дрейфь. я счас разгребу свои фекалии и вылезет тоже самое что и у тебя

http://pastebin.com/BGw4WwUy

PID USERNAME THR PRI NICE SIZE RES STATE C TIME WCPU COMMAND

86470 root 1 103 0 397M 227M CPU4 4 3:54 99.37% python2.7

99% - это классификатор

у меня лаг растёт

htop пизже

сразу показывает кто

похуй на него

dvolodin, а можно заставить лаунчер писать почему демон сдох? а то пока руками не влез не увидел

$ ./scripts/noc-classifier.py start

[Errno 13] Permission denied: '/var/noc/log/noc-classifier.log'

e_zombie: монгостат посмотри

еще полезно запускать mongosniff

zi_rus: а ланчер почем знает?

Ребятки, как вы от подстановки arp шлюза справляетесь? Или от подстановки ip? На dlink'ах, например? Только ipmb?

dvolodin: в монгостат 3-5% локов

http://pastebin.com/HBJcME77

dvolodin, ну и я не знаю, почему демон не может ему инфу слить что все плохо

лаунчер это центральная фигура

должен знать

я конечно могу сбросить тебе вывод лага с привязкой по времени чтобы построить график :)

файло на 3 метра

e_zombie: у тебя большое количество query

dvolodin: не брал бастилию (с)

ты знаешь что у меня нет никаких наворотов и фильтров.

запусти на несколько секунд mongosniff и кинь мне вывод

только не на пасту

mongosniff --source NET <имя интерфейса>

если локально у тебя все -- lo0

[root@nocproject noc]# mongosniff

found device: eth0

sniffing... 27017

^C

чёто оно не выводит ничего

mongosniff --source NET lo0

а какая у тебя монга?

db version v2.4.6

свежак

скорее тухляк

нынче в моде 2.6

а, точно, у меня 2.6.3, перепутал

а у меня снифф засегфолтился

sniffing... 27017

127.0.0.1:24471 -->> 127.0.0.1:27017 noc.noc.schedules.main.jobs 129 bytes id:7d8eb40 131656512

query: { $query: { s: "W", ts: { $lte: new Date(1409840469855) } }, $orderby: { ts: 1 } } ntoreturn: 0 ntoskip: 0

2014-09-04T14:21:10.351+0400 Assertion failure messageShouldHaveNs() src/mongo/db/dbmessage.cpp 82

Segmentation fault (core dumped)

а ты сходи и скажи это разрабам центоса

zi_rus: посмотри на performance report и попробуй вот такое

это по слову REPORT в логах классификатора

и накати индекс

db.noc.alarms.active.ensureIndex({"timestamp": 1, "managed_object": 1})

dvolodin, такое какое?

zi_rus: посмотри в логах классификатора REPORT и покажи последние 3 значения

накати индекс

и покажи еще 3 значения

dvolodin, http://pastebin.com/4eGj7YXf

ничего не изменилось

PID USERNAME THR PRI NICE SIZE RES STATE C TIME WCPU COMMAND

91501 noc 1 24 0 301M 129M select 4 5:18 13.38% /opt/noc/bin/python ./scripts/noc-classifier.py launch -c

классификатор жрет цпу больше чем весь остальной нок

народ

PID USERNAME THR PRI NICE SIZE RES STATE C TIME WCPU COMMAND

91501 noc 1 24 0 301M 129M select 4 5:18 13.38% /opt/noc/bin/python ./scripts/noc-classifier.py launch -c

ой

"1.3.6.1.4.1.9.9.131.1.5.2.0": "2",

"source": "SNMP Trap",

"1.3.6.1.4.1.9.9.131.1.5.3.0": "=AC=1F=F0=07",

"1.3.6.1.6.3.1.1.4.1.0": "1.3.6.1.4.1.9.1.1639"

спакуха. счас всё умрёт.

"=AC=1F=F0=07" - это ip

вот это ip или ipv6

кто на глаз может определить?

0_0

вилкой в глаз

что определить? 172.31.240.7?

evyscr, я знаю что это преобразуется в такой адрес. вопрос в том нельзя ли преобразовать это в легитимный ipv6 адрес

::ffff:172.31.240.7 ?

я всё ещё не понимаю вопроса. need more data.

evyscr, нет, =AC=1F=F0=07 - это какие-то бинарные данные, ты раскодировал их в 172,31,,,,, это и я делал, а в ipv6 раскодировать можно или это ipv4 и ничего более

evyscr, "1.3.6.1.4.1.9.9.131.1.5.2.0": "2" - в мибе 2 означает ipv6

вот отсюда и вопрос

ну типа вроде есть депрекейтед вида ::172.31.240.7

не, ну я знаю про такое, но нет, это либо должен быть нормальный адрес

2000::

или это кривой миб

в полноценный v6 не разложишь

если это было вопросом

ок

это и хотел услышать

в циске кейс наверное открою, почему мибы кривые

zi_rus: http://pastebin.com/ZfPBPfkT

экстремальный патчик на коррелятор

dvolodin, почему коррелятор если у меня тупит классификатор? его отдачей задевает

dvolodin, накатил патч, какой эффект ожидать?

сравнить скорость до и после

хотя бы по REPORT

и mongostat

по монгостату все очень неопределенно, а по репорту, разброс значений стал больше но кардинально не изменился, примерно 50 ивентов в секунду и осталось

хотя зомби жаловался на корелятор, может ему виднее будет

dvolodin а в каком случае сниппет, который на свиче выполняет команды в cli, может возвращать none? при этом нифига не выполняя, или выполняя - как повезет

?

dvolodin, классификатор опять 100% cpu съел, зараза

dvolodin, а не, очередь короткая получилась, разобрал и спустил нагрузку

слушай, чего у него за проблемы с большим количеством ивентов?

это явно не hi-load решение при моих-то 600 железках

dvolodin, может это монга тормозить? я просто поставил нечеловеческие периоды для хранения

[fm]

active_window = 2592000

keep_events_wo_alarm = 1825

keep_events_with_alarm = 1825

может база слишком разрослась

хм

PID USERNAME VCSW IVCSW READ WRITE FAULT TOTAL PERCENT COMMAND

79922 mongodb 290 0 6 15 0 21 100.00% /usr/local/bin/mongod --logpath /var/log/mongo

похоже дело таки с монге

на ИО залипает

значит это я лох

будем с монгой воевать

сколько у тебя в active events?

dvolodin, как посмотреть? в новом интерфейсе нет счетчика

> db.noc.events.active.count()

458940

попробуй все-таки запустить mongosniff

и покажи кусочек mongostat

dvolodin, вот так когда ио 100% http://pastebin.com/x91XBHK7

фигня абсолютная

в логах монги жалоб на медленные запросы нет?

с логом беда

dvolodin, вроде нет, io 100%, в логах криминала не вижу

именно io 100%?

top -m io -o total

PID USERNAME VCSW IVCSW READ WRITE FAULT TOTAL PERCENT COMMAND

765 mongodb 237 0 3 6 0 9 100.00% /usr/local/bin/mongod --logpath /var/lo

да, по такой команде он показывает ио

по крайней мере если верить ману

100% CPU

нет, это не цпу

цпу это когда просто топ делаешь

и там он на уровне нуля у монги

а top -m io

показывает статистику по ио

PID USERNAME THR PRI NICE SIZE RES STATE C TIME WCPU COMMAND

782 noc 1 26 0 329M 159M sbwait 0 6:27 34.57% /opt/noc/bin/python ./scripts/noc-classifier.py launch -c

db.serverStatus() на пасту кинь

dvolodin, http://pastebin.com/aHNxLbEj

посмотрел загрузку дисков по gstat, там тоже все на уровне нуля

dvolodin Короче тупит только с DES-3526. Причем может со второго-третьего раза конфигурацию залить, но все равно выдавать none.

а чего оно так тормозит

Night_Snake_, ты по длинкам с Dmitry1 пообщайся, он их наелся

zi_nnov я их тоже накушаюсь, предполагаю)

zi_nnov: db.setProfileLevel(2)

секунд 10 подержи

то же самое, только уровень 0

и покажи, что у тебя в db.system.profile.find()

сейчас тулзу сделаю для профилирования

dvolodin, не прокатило

> db.setProfileLevel(2)

2014-09-05T00:13:40.701+0400 TypeError: Property 'setProfileLevel' of object [object DB] is not a function

setProfilingLevel

dvolodin, http://pastebin.com/Gnn3cgcq

чуднО

это плохо?

странно и непонятно?

странно но понятно?

show profile еще покажи

> show profile

>

zi_rus: накати апдейты и запусти ./scripts/mongo-profile

profile-mongo

еще вот такой патчик помогает

http://pastebin.com/ru577U5Y