nocproject.org

,,

.

dvolodin: можно пнуть тебя на тему network map

zi_rus, :)

есть потребность, чтобы оно таки пришло в нормальный вид

там вроде хотели движок менять

а совесть поменять?

да какая тут совесть

вот и я говорю - какая

как сказал один герой

страшные муки моей совести давно привели к ее смерти

zi_rus: карту если переделывать, то комплексно

сделать уровни в object profile для начала

убрать в карте селекторы вообще

и плясать от объекта

чтобы по ней шастать можно было

привет

только начал разбираться в НОК

подскажите пожалуйста, как реализовать автодисоквери топологии по макам

по макам чего?

нок может только роутеры в порты свичей по макам втыкать

сеть L2

L2+ управляемые свичи

DES-3526

пробуй другие протоколы

stp, lldp

lldp в процессе - вечером стенд соберу проверю. Просто видел в описании что может по макам, вот и решил проверить

evyscr: с патчем вроде справилось, и интерфейсы определились нормально

вон там Dmitry1 пришёл, ему скажи

Dmitry1: rev 10782 бажный

была проблема, на трех одинаковых коммутаторах, с одинаковой прошивкой возникали разные проблемы

freenetwork: по stp в длинках не умеет, длинк не отдает того, что нужно для линковки

на одном серийны не определился, на друом интерфейсы и тп

evyscr: ткни меня пальцем в коммит

ну блин

или в ошибку

10782:b2bf9e9affc9

reset_cli_queue(), подозреваю, нехорошее делает

lf

да

а что не так?

на ряде длинков в вечноцикл впадает

на каких именно?

fumufu86: какие у тебя были?

я засёк на 1210-28/me/b2

костыль делался для DES-3226 и DES-3326

а ресет делается для всех

ок

сейчас попробую сделать другой мегакостыль

у fumufu86 вроде 3627

да

и не только

ну, здесь вопрос про тех, на ком get_interfaces перестал работать

на некоторых 3528 определяется только 6 портов

на некоторых 0

дайте костыль сделаю, а потом уже 3529 займусь

3526 та же проблема

пофиксил

fumufu86: доступ на 3528, на котором не определяются порты дашь?

сек

"8[13:56] evyscr: а ресет делается для всех"

подтверждаю, gte_interface стали периодически крэшится, без стабильного повтора в дебаге

TSergey, у меня так же

тысячи их :)

а я не обновлялся :P

я правильно понял, что Дима выложил патч?

да

теперь работает?

ребят помогите с автодискавери, настроил на двух свичах lldp, system_name соответствует названию свича в noc, через так получаю get_lldp_neigbors но в инветори не рисует линки

e_zombie: нок с зуавеями s9300 - Дружит? ты кажется issue создавал чтобы get_version дергал версию патча, его не реализовали?

через task в service activation получаю соседей

с патчами не порешали. поговорили как это хранить и забили.

ясно

придется самому дописывать

Илья, дружит. у меня их до фига.

а инвентори кто то делал, доделал ?

freenetwork: длинки?

да

задача построить топологию, карту. пришел на работу - так тут ни одной схемы, есть просто пинговалка, и база со свичами, думаю lldp включить на всех скриптом, и загнать в нок

у меня нок пустят в продакшен с первого апреля.

freenetwork: блин, кто там в Москве живет, дайте на тест Диме пару длинков

e_zombie: пробовал, не получается. отрубаюсь прежде, или жена разгоняет меня с кумом

жизнь боль

не просто боль, а попаболь

freenetwork: спасибо, возникла тема про get_version + patch, Хочу нок заюзать, пусть железяки работают

ой, freeseacher имел ввиду

freeseacher: а там все работает? и get_interfaces и конфиг и вообще?

получится ли qtech прикрутить к noc? кто-нибудь пробывал?

у меня пара тысяч есть

2800 8200

Дима пилил профиль для 2800

если не ошибаюсь

профиль для низ qsw2800

а логи нелья просто грохнуть? чето нок после апгрейда не поднимается :)

а, монго не поднялась чего-то

поучаствуйте: NOC-1562

есть такое дело

заплюсуйся, плс

уже

я подарок всем сделал в последнем коммитк

да?

про логсайз?

ахцуеть

да ты сцпермен

Коллеги, напомните, где крутить таймауты для медленных команд, запускаемых в run commands?

TSergey: про поиск в 1562 что-то неясное. там вроде вообще js поиск работает

если находится не в первой строчке конфига, то поиск не вызывается

*ноходиться

о, нет

точнее если не "ткнуть в конфиг", то поиск не перехватывается

lexus-omsk: смотри конфиги активаторов

а не в скриптах или профилях (которые init.py)?

а не. нок конф. в конфе есть примеры

народ, кто разбирался с nginx ? почему в noc-web.log я вижу такие строчки:

Файл: noc.conf Строка 639 Позиция 18132 байт 99%

[script_timeout]

# Script timeouts, in seconds

# Default timeout

default = 120

# Custom timeouts in form:

# <script name> = <timeout>

Alcatel.7302.get_config = 1800

Alcatel.TIMOS.get_arp = 240

Alcatel.TIMOS.get_config = 850

2015-03-25 11:45:36,795 [tornado.access] 200 GET /sa/managedobject/js/InteractionsPanel.js?_dc=1427276350202 (127.0.0.1) 1.98ms

e_zombie: ок, попробую... мне для прошивки длинков, что-то он совсем уж долго льётся

шей через рун коммандс там можно сделать таймаут

/noc cli-commands -d --timeout=900 @all.cisco.76xx -i $BASEDIR/command.sar.cisco.txt > $BASEDIR/out.sar.cisco.76xx.txt

о, точно... а я через вебку пытаюсь... спасибо

сейчас в вебке адаптивный таймаут и там вроде всё ок сейчас

Dmitry1 а в чём странность?

lexus-omsk: как бы nginx должен js файлы обрабатывать

у меня тоже проскакивают иногда подобные

но nginx (у меня - apache) обрабатывает же только статику, нет?

Dmitry1: как нжинксу сказали - так и передаёт

я настраивал из мануала

вроде как только location /media/ и location /static/ же по рекомендации? или уже поменялось?

https://kb.nocproject.org/display/DOC/nginx+setup

а, добавили

что-то новенькое, да

чойта я задумался, не надо ли там слеш в самом начале

типа location ^/(

поменял, у меня остался только /main/desktop/templates/About.js?_dc=1427279895311

(что логично)

если чо, поменял в location и rewrite

по идее это уменьшит нагрузку на noc-web?

ну да

для того же и апач за нжинкс содют

вот вам паста: http://dpaste.com/1NKBCXH

и увеличит на nginx

а где выхлоп

нжинкс не на питоне

или не увеличит?

и кеширует

не увеличит, конечно

всё и так через нжинкс идёт

сделай diff, чтобы было видно, где что поменялось

да, я как раз подумал что через nginx все и идет

evyscr: сделай diff

e_zombie: через web-ку по таймауту отваливается, Cancelled, попробую из cli, с явным указанием таймаута

Dmitry1: мой файл конфига для диффа не подойдёт

ванильного конфига у меня нет

http://dpaste.com/1NKBCXH - diff с оригинальным куском конфига, который в https://kb.nocproject.org/display/DOC/nginx+setup

"evyscr: если чо, поменял в location и rewrite" - я не телепат

лоль, там добавился слеш после ^

и перед скобкой

Dmitry1:

-location ~ ^([^/]+)/([^/]+)/(js|css|img)/(.+)$ {

+location ~ ^/([^/]+)/([^/]+)/(js|css|img)/(.+)$ {

-rewrite ^([^/]+)/([^/]+)/(js|css|img)/(.+)$

+rewrite ^/([^/]+)/([^/]+)/(js|css|img)/(.+)$

У меня IRC клиент не умеет diff'ы выделять синтаксисом

это не дифф :)

"^([" --> "^/(["

а что это тогда ?

ну скажем я попытался тебе написать чего поменялось

скажем что неуспешно

я и так очки ношу, но попытка в IRC клиенте разбирать регекспы я вно мне не по силам :)

Dmitry1: ну это-то тебе помогло? "^([" --> "^/(["

Привет Дима, видел вот эти косячки в FM http://upload.akusherstvo.ru/image764775.png

кто может переименовать модельки в инвентори

для соответствия реальности

zi_rus: Попроси у Димы коммит бит и переименовывай сам

zi_rus, а ты выроде делал массовое закрытие алярмов

и вроде даже где то описывал

не помнишь где ?

#./noc shell

from noc.fm.models import *

alarms = ActiveAlarm.objects.filter(managed_object=ManagedObject.objects.get(name="pe-1-nov41").id)

for a in alarms: a.clear_alarm("close")

<ArchivedAlarm: 54d4b5e84a5e68fd2cb54e27>

https://kb.nocproject.org/pages/viewpage.action?pageId=15630875

freeseacher: а ты в каком контексте спрашиваешь?

у меня маленький скрипт есть который по классу может их позакрывать

но он не под рукой

или да

по ссылке, это мой скрипт

ну ты же мне давал недельку назад)

zi_rus: ты тестировал валидаторы?

если бы они были

ну я на этой ветке

ну правила для цисок

но dvolodin не говорит что тестить

e_zombie: давай что-то конкретное, проверю

я только shutdown проверял

evyscr: твой дифф для конфига нгинкса ломает джанговские приложения

какие именно?

evyscr: все, ипам например

у меня сейчас народ озаботился вопросами аудита на агрегатарах сети. это около 300 хуавеев кутечей .

умвр

и мне интересно насколько это вообще работоспособно.

не работоспособно

ни хрена еще не реализовано

я вообще не понимаю что dvolodin просил протестировать

даже на цисаках?

да

ну дергает оно факты

ок. спасибо за инфу.

ну работают валидаторы

а выхлопа нет

t2me, спасибо

zi_rus: ну так как воспроизвести нерабочесть?

evyscr: открыть

открыл, что дальше?

evyscr: ctrl f5

evyscr: видишь?

а, так это не я сломал :]

я что ли?

как бы тебе сказать...

это же нок

можешь банально весь блок закомментить и вернуться к тому, что блыо

да я уже вернулся

я просто говорю о баге

но это надо не мне говорить

anyway,

location ~ ^/(?!(media))(?!(static))([^/]+)/([^/]+)/(js|css|img)/(.+)$ {

.

TSergey: я вижу, ты коммитить можешь уже ?

evyscr: это улучшенный регексп?

location ~ ^/(?!(media|static))([^/]+)/([^/]+)/(js|css|img)/(.+)$ {

вот улучшенный вроде как

и что там улучшено?

я просто документацию обновляю

а ты замем медиа и статик туда засунул

тогда уже полный вариант давай

в смысле, зачем?

та проблема - в обработке статики из предыдущих location.

ну вот все location: http://dpaste.com/342YX7T

вроде как по докам должно было хватить break; в предыдущих - но почему-то не хватило

народ, протестируйте

а я потом документацию обновлю

Dmitry1: вроде работает

т.е. документацию обновлять?

ты такие вопросы задаешь

evyscr: новый конфиг точно на что-то влияет? его вписывать в доку?

как минимум у меня он сработал

ну блин.

найдите спеца по нжинксу, спросите у него.

(но вообще у меня работает)

как было раньше: location не матчился никогда

как стало: location проверяется на не /media,/static и матчится на /js/ третьего уровня

вероятно, регэксп считается более длинным совпадением, нежели /media/, поэтому пришлось добавить исключение

ещё имеются /js/ четвёртого уровня, они в данный регэксп не попадают -> обрабатываются торнадой

обнаружил странность, когда открыл коммутатор в ноке с адресом 10.14.4.26, обнаружил в нём конфиги и интерфейсы от коммутатора 10.11.4.94

как такое могло пройзойти?

закешировалось в браузере

этот коммутатор не открывал с обновления системы

другие коммутаторы открываются правильно

эти конфиги в базе где нибудь к ID профиля MO привязываются?

ты дебажни, может он действительно это получает и все правильно

хм

дерьмо какое-то

something is rotten

интерфейс-дискавери запускается чуть ли не раз в полминуты

пиздец какой-то

так небось на разных железках

в файледах, разумеется, ни хера

хера, на одной

причём debug-script отрабатывает нормально

пиздец это вот

[inv.discovery] Job ip_discovery(SAE) is failed

das ist noc

а еще пиздец что на импортных железках не активировался version discovery пока я их не засейвил повторно

приче не на всех

а на половине

прям через однц

вот вот :)

zi_rus:это коммутатор snr, во вкладке discovery у него interface_discovery fail. тем не менее у него конфиг и интерфейсы от хуавея

амы тут в сае нашли подозрение на пиздетц. у меня сау сожрал 510 метров оперативки

dvolodin: не пропускай представление, мы тут нок опять говном поливаем :)

Tasks: 1 total, 0 running, 1 sleeping, 0 stopped, 0 zombie

Cpu(s): 10.4%us, 3.6%sy, 0.0%ni, 83.5%id, 1.6%wa, 0.2%hi, 0.2%si, 0.5%st

Mem: 36139984k total, 13668396k used, 22471588k free, 560036k buffers

Swap: 1015804k total, 0k used, 1015804k free, 9686916k cached

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND

9850 noc 20 0 526m 154m 12m S 0.0 0.4 13:33.17 /opt/noc/bin/python ./scripts/noc-sae.py launch -c etc/noc-sae.conf -i 0

обля

EXCEPTION: <type 'exceptions.UnicodeDecodeError'> 'utf8' codec can't decode byte 0x8f in position 45: invalid start byte

лолблять

:)

боян же.

тысячелетний

где боян?

я ещё год назад предлагал чекелку на utf8 делать везде

в issue поищи

от этой хуйни шедулер дохнет

хуй там год

уже 2 или три issue висит

NOC-1216

нок - говнище

verified

а еще я запустил сегодня version inventory, а у меня доступны только несколько, а остальных пока нет, по ним пинг файлед висят, но нок все равно до таймаута на каждой из сотни повисел

dvolodin: реквестируем нахуй новые фичи, провести фиксинг багов

боян. я перед новым годом предлагал это

ну и что, никто ничего не пофиксил, вот теперь я предлагаю

нок таки лютое говнище, которое влёхкую убьёт ваши свичи

блять, стартовать каждые 15 секунд...

дезигн!

evyscr: сомневаюсь что даже если нок будет раз в 15 секнд выполнять пару команд, это что-то сделает свичу

сафети коде!

пару?

few

посмотри, блджад, DxS/get_interfaces

оказывается это не единичный случай, и у многих коммутаторов, левые интерфейсы и конфиги

evyscr: да, это пиздец, а не скрипт. но это ничего не меняет

нок же не заходит в 5 консолей и не ебашит эти команды параллельно

если память на железке не течет (у меня такое было), то ничего страшного

а знаете на чём эта хуйня падает? на записи лога в файл

0_0

ахуеть

не пиздишшь?

и, что характерно, падает вовсе даже не interface_discovery

а lldp_discovery от другого свича

какого хуя interface_discovery рестартится?

висит задача что порт упал

блять, это же такой зашквар...

всем похуй/jpg

но придёт dvolodin и всем расскажет про бездельников, энтерпрайз и т. п. и настанет щастье.

спаскуха. не отвлекай его от глючного сае. пусть дофиксит а потом уже философию

да тут не кран надо менять, а всю систему! (q)

падение одного джоба, получается, ведёт к рестарту всех запущенных в этот момент.

и даже не падение джоба ведь.

это ж пиздец

это уже не игра, это да пошли они нахуй (q)

сука

это уровень переполнения буфера же

лолд

давай завтора это обсудим

думаешь, подостынет?

у меня ксожалению емть только смтараю фотка по этому поводу

https://pp.vk.me/c622321/v622321151/299e4/YPwYPB7xnR4.jpg

пизда всему (с)

я уш1ёл

я уже 100 раз говорил об этом. когда скрипт каждые 30 секунд ломится на свич

evyscr: там скорее всего другая проблема

нопе

не подходит согласование ключей или пароль ssh. оно пытается вывести traceback об этом. Но при выводе в traceback части ключа ssh встречает не ASCII символ, и вываливается в traceback из traceback'а

Кстати, об этом issue тоже есть

дык, нехуй всё подряд считать валидным юникодом

ага

и не эскапировать

у меня, к примеру, народ любит описания портов на русском делать

и NOC на этом вываливается

к примеру: "синий SFP"

это достаточно, чтобы NOC в даун ушел

и бесконечно пытался долбиться с get_interfaces на свич

здесь такая прелесть: http://dpaste.com/1709GNX

но я бы понял повтор данного джоба

но оно же ДРУГИЕ запущенные перезапускает

а что за скрипт так крешится ? длинк ?

да

нет

шедулер крешится, похоже

удаленный свич - dgs-3627g ?

нет

3420

скрипты не крешатся

обнови прошивку на dgs-3420

это не моё дело

и обновлять вряд ли будут

могу костыль попытаться сделать

нет смысла

тут надо сам принцип менять

хер с ним, пускай не находит

но, блджад, всё рестартить - это за гранью

да, трейсбек при записи трейсбека

и, сука, издевательское имя функции safe_rewrite

evyscr: ща костыль зафигачу

я уже сам пишу

но костылить надо демона, мать его

пробуй фикс

тупо не распарсился IP адрес

evyscr: покажи вывод debug-script теперь

я не обновлюсь

короче жопа

смотри: 'l\x8f#{'

ха

remote_port_subtype = 3

считаем символы: l, \x8f, #, {

это как бы мак

итого - 4

т.е. двух не хватает

должно вывалить traceback

и в выводе traceback натыкается на символ \x8f

и умииииииирает

вобщем есть куда копать

log_job

да

внутре должно быть .encode('escape-unicode')

вот поэтому я поотключал discovery на всех своих свичах

лично я не понимаю причину, по которой имя/описание порта/влана/MO нельзя задать русскими буквами

патамушта говнокод

Я подозреваю, что не ascii символами нельзя задавать и профили MO

т.е. у нас не будет профилей "Эльбрус", "Байкал", "Кроникс", "Гранч" и т.п.

есть ещё одна странность http://awesomescreenshot.com/09f4pxg158, на этом коммутаторе он выходит даже не пытался сделать interfaces_discovery

он не находил интерфейсы, потому что не пытался?

fumufu86: лечится нажатием кнопки "save" в MO

Dmitry1: почему на run discovery now не реагирует?

нажми кнопку "save"

почему так работает - не знаю

dvolodin принципиально баги не лечит, а только добавляет новые фичи

уже

не помогла

http://awesomescreenshot.com/0784pxkoc4

время следующего запуска, на секунду раньше текущего

хм

если я правильно понял - в job_log смесь string и unicode

бгг, выясняется, что ещё и питон говно.

и raw у него не чистые raw

"Paradoxically, a UnicodeDecodeError may happen when _encoding_."

на С значит пора переписывать

начинатьс с простого