nocproject.org

Привет всем!

,,

и тебе не хворать

он тоже пытался поставить башню https://pp.vk.me/c543108/v543108789/116e9/WeBxbJatghY.jpg

У меня большая база узлов, но она на zabbixе. Нужно как то интегрировать zabbix с noc. Что посоветуете?

не лучше работать через API?

нууууу если быстро - то выгрузи базу в текстовый файл и чере и через импорт занеси.

если хочешь ебли - пытайся интегрировать.

если хочешь экстра извращений - то пиши\используй автодискавери самописный

https://kb.nocproject.org/pages/viewpage.action?pageId=19169410

/noc csv-import sa.managedobject -r skip -v 3 ../fttb-20130626.csv

кстати у тебя микросервисы или девелоп ?

проблема в том, что zabbix каждый день то добавляются узлы, то удаляются

плюс автодискавери

у noc нет api?

оно умеет у тебя выполнить команду внешнюю ?

/noc wipe managed_object 10.64.104.104

тут много чего нету.

и ещё большее через жопу.

тут боль.

zabbix?

посмотри ссылку которую я тебе дал. все танцы тама вокруг генерации текстового файла.

если ты сможешь забиксом его сформировать

то будет тебе счастье.

спасибо

и да. ставь башню и микросервисы. если у тебя сеть хотябы 1000+ то девелоп ну очень криво себя ведёт.

да и мёрт он.

у меня 14000+

узлов

ну почти как у меня. ставь башню

башня это что?

https://bitbucket.org/nocproject/noc-tower/overview

это хрень что управляет конфигурациями в новой ветке.

и оно ставит микросервисы которые типа крутые и менее ресурсоёмкие для больших конфигураций

ок

а сама система насколько стабильно работает?

нуууууууу смотря что .

по микросервисам сказать не могу. девелоп крутится на моих задачах более менее.

пинги , конфиги, анализ событий ...

я например в первую очередь собираюсь использовать сохранение конфигураций

это работает.

если профили для оборудования есть. если нет - пиши и делай пул реквасты

мониторинг не нужен, у меня стоит zabbix

остальные фичи, как я понял с коробки не работают

ты поставь а там увидишь .

их нужно доводить до ума написанием программ

смотря какое оборудование у тебя.

у меня например 90% оборудования из коробки собралось.

какую конфигурацию для серверов посоветуешь для 14к узлов?

если у тебя только сбор конфигов будет то гиг оперативы и с 10 гиг под конфиги.

если врубишь фм то там будет расти монга гиг до 100-150 за месяц если пустишь туда весь сислог с сети

кстати рекомендую логи сваливать через сислог сервер. потому что часть событий дропается.

Filesystem Size Used Avail Use% Mounted on

/dev/mapper/VolGroup-lv_root

28G 18G 11G 61% /

tmpfs 7.7G 4.0K 7.7G 1% /dev/shm

/dev/sda1 477M 145M 307M 32% /boot

/dev/sdc1 99G 28G 66G 30% /mnt/mongo

/dev/sdb1 110G 34G 71G 33% /mnt/mongo2

/dev/sdd1 688G 353G 300G 55% /mnt/backup

я сегодня целый день тут . так что по поводу башни могу тебя консультировать почти пошагово.

хай

и я сейчас начну писать доку.

хай

сегодня сисек не будет. будут только школьницы

Пиши доку, это полезно

хай

главное удержаться от матов.

hanapi, довольно стабильно.

у меня монга валится каждые пол дня.

hanapi: микросервисы умеют тянуть данные из внешних систем

ставить надо да. ветку feature/microservices

dvolodin, а не запилить ли etl для заббикса

ну очень много людей же с ним приходит

давно пора было.

давно хотел поставить нок

freeseacher: а какие сложности?

никто кроме тебя не знает как это делать :)

все время останавливало отсутствие интеграции с заббикс

гыгыгыгы

дайте мне подопытного

заббикс, насколько я помню, mysql и постгрес?

да

у меня mysql

но интеграцию нужно делать через api zabbix

у них структура БД может меняться

https://bitbucket.org/nocproject/noc/src/0c87fb6b0c6d39928ae4968fc96e10694991f3b5/core/etl/loader/managedobject.py?at=feature%2Fmicroservices&fileviewer=file-view-default

нужен SELECT, который достанет поля

fields = [

"id",

"name",

"is_managed",

"container",

"administrative_domain",

"pool",

"segment",

"profile_name",

"object_profile",

"termination_group",

"service_terminator",

"scheme",

"address",

"port",

"user",

"password",

"super_password",

"snmp_ro"

]

сегмент всегда в АЛЛ :)

dvolodin, по api да

ну кому как

нет смысла морочится с мусенькой

api у него не сдохнет?

это очень важно

нет не сдохнет

оно норм

у них сейчас вышла 3 версия

но интегрировать имеет смысл 2.4

нет

2ю4 короткая поддержка

3 надо

3 версия будет долго поддерживаться

все сейчас будут на нее мигрировать

да там по API и разницы может и не быть

я уже, гораздо шустрее тройка

я жду убунту 16

короче кому надо - нужен хомячок.

там есть нужные мне фичи

лучше пустой или полупустой

я могу помочь

у могу собрать стенд с оборудованием

короче, нужна функция iter_data, которая будет отдавать строки, отсортированые по id

и дать внешний доступ

https://pp.vk.me/c629224/v629224151/46135/zeAXzxLDBtM.jpg

держите лолей

Это что такого у тебя было?

Аварии или только события?

корелятор раскорячился

в логах отвал от монги.

при этом сама монга вроде жива

и новые события создаются.

ребутаешь и монгу и нок и потом просирается на пол дня.

У меня почему-то у некоторых МО интерфейсы не дискаверит, хотя вроде как все отрабатыват

Он именно не записывает список интерфейсов в SA > MO > interfaces

ну сколько нам историй трудных готовит ..

2016-04-11 10:19:21,737 [scheduler.correlator] [5708440abab2636721331c27] [dispose] Starting

2016-04-11 10:19:21,781 [scheduler.correlator] [correlator|dispose|5708440abab2636721331c27] Completed. Status: SUCCESS (43.77ms)

2016-04-11 10:19:21,781 [scheduler.correlator] Remove job 570b4ff910d040e2e13e89af

2016-04-11 10:19:21,785 [scheduler.correlator] [correlator|dispose|5708440abab2636721331c26] Completed. Status: SUCCESS (48.00ms)

2016-04-11 10:19:21,785 [scheduler.correlator] Remove job 570b4ff910d040e2e13e89ae

О кстати, сейчас проапгрейдился и получил данные

Сразу соседа нашел

Есть афигенная задачка: 4 GW, все в оодной группе hsrp, как сделать так, что бы каждый раз, когда один из GW становиться мастером за группу - он же анонсировал сети в BGP, например менялся loca pref на выше и

затем при следующей смене мастера hsrp, у первого GW local pref становился прежним, а у нового мастера повышался? Cisco IOS XR

Надо что бы всегда анонсировал сети мастер за группу hsrp

так. хватит распиздяйничать. надо писать доку.

Port Security Violation on port Fa 1/0/31, MAC 9C:93:4E:15:41:D8

2d 16h

3624

И всем опхуй

SomovIS_, ага. но ты продолжай.

hanapi: https://kb.nocproject.org/pages/viewpage.action?pageId=21233723

вдруг сам разберешься пока расказываешь

за выходные ворох багов исправили, обновляйте микросервисы

спасибо, уже смотрю

dvolodin: что-то поменяли в графане? даш пустой

добавляли графики объекта

посмотри в web, 500-й нет?

есть трейс, сейчас скину

а еще NOC научился мерзко завывать при новых авариях

Я уже услышал)_

Как парктроник

dvolodin: я надеюсь это отключаемо и отключено по дефолту.

первая жертва

:)

рррррблять.

услышал?

а ты жалуешься, что аварии игнорят

:)

мне гомоцрм сейчас мешает спать у девчёнок в комнате что оно пиликает.

постоянно.

и я не обновлялся.

игнорят их не потому.

что не видят. а потому что их мног и они идут постоянно. а мозг на такие вещи начинает забивать через неделю.

http://i.imgur.com/c3ldKJs.png стабильность работы нока.

в микросервисах есть эскалации

типа - не ушла авария за 5 минут - пишет письмо

или TT делает

кроме того, я делаю управляемую задержку отображения

А мануалы будут?

fm.alarms будет показывать alarm в списке, только если он висит не менее отведенного времени

и на кратковременные отвалы можно будет не реагировать

https://pp.vk.me/c614622/v614622016/1dc24/eWYJM_f8KIE.jpg

в графиках bps - где посмотреть в мбит/сек ?

https://pp.vk.me/c630218/v630218496/2493a/-LN8hpZ5bdA.jpg

bee26: Значит в mbps пока нету, он динамический

а bps это что? если траф, то должно быть in/out

скинь скрин

https://imagebin.ca/v/2dN1lomDkIAX

за последнюю неделю - не видно даже колебаний трафа день/ночь - что это?

все настройки из коробки

У меня такое же было, сейчас скажу

test-series )

мои глаза вытекают. белая графана.

e_zombie, давай продолжение https://pp.vk.me/c630218/v630218496/2493a/-LN8hpZ5bdA.jpg

пока нету. барулин конечно выкладывает пачками но не сегодня.

bee26: открой графану, например любой объект и сделай следующее:

В data sources

https://usercontent.irccloud-cdn.com/file/TmhSII4D/

e_zombie: добавь в мануал на всякий

а он оказался уже написан

нет желания на slack перейти с irc?

ещё на телеграмм предложи

slack удобен, поиск по истории есть и т.п., интеграция с сервисами

в телегу кстати я больше верю

slack коммерческий bloatware

для опенсорса не пойдет вовсе

а ваще давай на TOX переходить

Есть форк слаки

SomovIS_: теперь похоже. bps на бит/сек - никак?

dvolodin: не смотрел пока snmp trap?

SomovIS_, ты про mattermost ?

bee26: поменять на рус?

freeseacher: rocketchat

bps это и есть bit/s ?

ну и чем оно лучше телеги ?

да

если у тебя kbs или mbs - так и будет писать

kbps

mbps

SomovIS_: а такое безобразие как лечить? https://imagebin.ca/v/2dNALpzMlOPs

Как пример https://usercontent.irccloud-cdn.com/file/X1JpmIS4/

Где ты видишь безобразие?) Отрицательные значения?

сбор данных 7 апреля прекратился или не отображается (возможно после апгрейда)

какой шутник это придумал

ok: [noc2host] => (item={u'owner': u'root', u'name': u'etc/config/'})

ok: [noc2host] => (item={u'owner': u'root', u'name': u'etc/config/supervisor'})

ok: [noc2host] => (item={u'owner': u'root', u'name': u'var/etc'})

ok: [noc2host] => (item={u'owner': u'root', u'name': u'var/db'})

ok: [noc2host] => (item={u'owner': u'root', u'name': u'var/etc/noc'})

bee26: после рестарта сервиса у меня старые данные дропаются

народ а видели начальные развлекушки с метриками хоста ?

я тут бъюсь с тем что надо бы как то ходить по табличкам

и чото хз как

сейчас еще пинговый RTT прикрутим

а кто сталкивался с eltex esr1000? :)

скажите честно - это писюк с зеброй?

dvolodin: а с какой целью интересуещься?

dvolodin: каг правило да - линукс на арме

Apr 11 12:54:50 noc2host telegraf[1100]: 2016/04/11 12:54:50 Error: procstat getting process, exe: [] pidfile: [/var/lib/pgsql/9.4/data/postmaster.pid] pattern: [] user: [] Failed to read pidfile '/var/lib/pgsql/9.4/data/postmaster.pid'. Error: 'open /var/lib/pgsql/9.4/data/postmaster.pid: permission denied'

Apr 11 12:54:33 noc2host telegraf[1100]: 2016/04/11 12:54:33 Error: procstat getting process, exe: [] pidfile: [] pattern: [noc-correlator] user: [] Failed to execute /usr/bin/pgrep. Error: 'exit status 1'

iZverg: с грязной, ознакомился с техническим решением на базе этого оборудования, пошел смотреть детали

увидел явный писюк со встроенным свичем

стало интересно

ARM там?

Или какой SoC ?

dvolodin: угу. но смотри, esr я не тыкал, я тыкал в их телефонию, в т.ч. smg2016

я так понял, что мелкие пакеты его убъют еще раньше 1Gbit/s ?

А вот TWAMP встроили, молодцы

https://telegram.me/joinchat/Ames7j1sNOYpeOqKd40ghw

для желающих в телегу.

у них двухпортовый шлюз телефонный, там SoC. вот эта хрень бродкастами убиваецца влёт

который TAU ?

Дима давай чатик в топик закинем ?

вместо Testing https://chat.nocproject.org/

ну да

дык опа надо

вот так?

ага

теперь из вредности начинаем отвечать на вопросы в телеграме :)

ну что процесс пошел .

да не

это плохая идея

не надо хоронить irc

irc это хорошо

Коллеги, как в НОК посмотреть какие данные получены для построения топологии по CDP/LLDP? Включил на двух смежных коммутаторах LLDP, но что-то результата нет. Видимо, нужно как-то зааппрувить связь, но где..

интерфейсы определились?

ага

dvolodin, вот правильный публичный линк https://telegram.me/nocproject

нате

Я думаю, что проблема в том, что CDP/LLDP в качестве идентификатора "соседа" передает device_id, который берется из hostname. У нас никто и никогда именованиям железок не занимался (не было потребности, и на функционал не влияет в нашем случае), поэтому device_id у нас �

https://v1.std3.ru/80/ba/1460097436-80badc67e71f08725fdd009289510b07.jpeg

theuser: смотри чтобы у тебя в конфигах был включён дискавери.

и проверь что скрипты отработало нормально.

в lldp device_id вообще в основном mac

e_zombie: на пикче ты?

я подлиннее стрижен.

evyscr В основном - это как? Я думал там какой-то ожидаемый формат - sysname, например. Или NOC автоматом детектит по разным типам device_id?

e_zombie в каких конфигах должен быть включЁн дискавери?

см noc.conf

интерфейс дискавери и ллдп.

плюс у группы должно быть включено это самое дискавери

e_zombie включил, get_cdp отработал. Как посмотреть какие связи появились?

в мо есть закладка линкс

ну и в логах дискавери смотри события по этому поводу

links

e_zombie Ура! Спасибо!

у тебя редхатовские сервера есть ?

не радуйся. не всё оборудование у тебя залинкуется .

e_zombie, только центось

https://bitbucket.org/nocproject/noc/pull-requests/

можешь попробовать залинковать и сервера

есть ещё для ллдп но он кривой

http://pastebin.com/MqixkBm5

/me прдупреждает, что e_zombie любит закинуть код, который может привести к непредсказуемым последствиям

ну он же не правит либы какие-то

ломает скрипты собственного профиля

все равно noc2 грядет

почему noc2

?

сова уже прилетела

evyscr: вот вот. я не крушу системные библиотеки

https://pp.vk.me/c633219/v633219151/20829/gcUh4qA2Cwc.jpg

https://pp.vk.me/c633219/v633219151/207d5/BQjpN4Kfly4.jpg

https://pp.vk.me/c628618/v628618217/50e8f/2vGlDGViGNc.jpg

это тоже школьницы да ?

второгодницы

да

dvolodin, с помощью CDP топология строится только на основе device_id, или ip-адрес также может участвовать в идентификации?

смотри внутренности модуля. вроде как там айпи участвует.

последняя ок

e_zombie, я смотрю в цискины get_cdp_neighbors.py, и адреса там нифига не участвуют. И вообще такого атрибута не предусмотрено в igetcdpneighbors.py

e_zombie, что за шлюхи на первой?

школота что в субботу снимал. их коллега фотограф снимал на каком то конкурсе моделей и мы их встретили на проспекте в субботу

как дропнуть алярм а не закрыть его

>>> from noc.fm.models import *

>>> from noc.sa.models import *

>>> alarms = ActiveAlarm.objects.filter()

>>> for a in alarms:

... print a

... a.clear_alarm("drop")

...

5708d7e1bab26349711aa67c

Traceback (most recent call last):

File "<stdin>", line 3, in <module>

File "/opt/noc/fm/models/activealarm.py", line 163, in clear_alarm

ct = self.alarm_class.get_control_time(self.reopens)

e_zombie: слово в кавычках это комментирий

смотри в /opt/noc/fm/models/alarms.py

попробуй стандартные

delete

drop

etc

a.delete()

вроде дропнулось

1https://pp.vk.me/c7011/v7011718/1bbdb/bdxGcseBQPs.jpg

провокационный вопрос. поддержка не линукса нужна кому нить ?

а что ты считаешь не линуксом

и поддержку для чего предлагаешь

да просто подумалось

вот тут на канале ~40 человек

из них у одного мне извеснтно есть фря.

у остальных linux

и даже фря более распространена чем какой-либо линукс в частности

в каждом линуксе своих тараканов столько

что по каждому свою поддержку надо

Смотря какой заказчик будет