nocproject.org

комрады, кто использует proxy?

noc.conf

[proxy]

http_proxy

https_proxy

ftp_proxy

как завернуть апгрейд через прокси?

dvolodin: привет

расскажи, плс, можно завернуть апгрейд через прокси

и

-exec &> $UPGRADE_PIPE

+exec > $UPGRADE_PIPE 2>&1

в 88:upgrade чинит заливку лога в upgrade.log

(решение подсказал evyscr)

только при условии, что это bash

#!/bin/sh ???

dvolodin: https://kb.nocproject.org/pages/viewpage.action?pageId=21233723

только исправь чтобы ngnix рестартовал в конце установки

dvolodin: подскажи про прокси

TSergey: он должен хавать https_proxy из окружения

teroni: спасибо, уже неплохо

dvolodin: порт нужно указывать?

TSergey: да

https://cp.nocproject.org/p/WYT8

Я дошел до SA

dvolodin: из окружения? или из noc.conf?

новая часть должна быть быстрее и устойчивее текущей реализацииъ

TSergey: да

из плохих вещей -- переписана низкоуровневая механика парсинга потоков

придется перепроверять на всех платформах

из хороших вещей -- скрипты не будут залипать

teroni: ты еще попробуй syslogcollector и trapcollector

проверь, что события в базу упадут и до классификатора дойдут

я щас попробую на несколько поставить компов

dvolodin: а можно пример? в окружении есть, но апгрейд не идет

что у тебя в окружении?

export https_proxy="http://78.140.*.*:3128"

и еще раз долгий молчаливый деплой на новый комп

и что, не хавает?

неа

teroni: почему он молчалилвый

он стримит прогресс ансибла сразу

declare -x https_proxy="http://78.140.*.*:3128"

10 минут на вебе ни чего не показывет

что у тебя за браузер?

хром

а tcpdump'ом посмотри

последний

потом пачкой выходит

ок

что в браузер летит

на сафаре он красиво в откно попадает

и светофор щелкает

dvolodin: прям upgarde должен понимать proxy?

dvolodin: нет, он апгрейду не нужен

его pip хавает

ну и чего делать-то

это правильно?

export https_proxy="http://78.140.*.*:3128"

да

сам проверь

./bin/pip search xxxxx

./bin/pip search https://bitbucket.org/nocproject/noc

так?

http://pastebin.com/0CjSKXRz

./bin/pip search six

например так

http://pastebin.com/UU3QpEM2

TSergey: ну вот он у тебя его подхватил

,,

ну вот исторический момент

отработал первый скрипт на новой платформе

ураааа

отработал неправильно и вообще вернул ошибку :)

это уже неважно )

2015-10-22 09:45:17,353 [script] [Vyatta.Vyatta.get_version] [172.16.222.101] Result: {'platform': 'VyOS', 'version': '1.1.6', 'vendor': 'VyOS'}

2015-10-22 09:45:17,353 [script] [Vyatta.Vyatta.get_version] [172.16.222.101] Complete (5270.63ms)

где тут ошибка?

тут может и нет

но откуда нам знать что это лог с новой платформы

ни один sa_maptask не пострадал

и вообще что это лог, а не ты руками набил

:)

старый нок такие же логи штампует

и вообще я набил, а не мой кот :)

да, котэ может

Failed to ping managed object (IP: ). All SA tasks to this object are temporary suspended

новый нок так же будет писать?

ты про IP:?

будь уверен

это письма alarm #5628756c4a5e68462c4f2e04: Ping Failed

да, мы все их видели

http://i66.fastpic.ru/big/2015/1022/87/d11074842108c3a2360d1d03de9c4887.jpg

кот глянул код и прифигел

кот умнее тебя

бояйся

ему вас жалко

он еще маленький, всего 6 кил

Привет! Может кто знает как почистить macdb?

чет у него 1 глаз даже вылез

mrDen1: совсем или выборочно?

http://i58.fastpic.ru/big/2015/1022/89/50341efe157dfe628cd4f712b2fcd489.jpg

совесм можно коллекцию в монге дропнуть

zi_rus: Совсем

бойтесь кота, он накодерит :)

накотерит, точнее

может и лучше

а то нок пока разрабатывался вот так

http://developerslife.ru/13737#comments

уже нашкодил похоже - судя по довольной морде

вполне может быть что как раз в процессе он

bee26: нет, это он попугая разглядывает

делает вид, что ему неинтересно

у меня амазон и британец

"8[12:28] dvolodin: TSergey: ну вот он у тебя его подхватил"

ну а чего тогда: "upgrade: : Failed to pull branch develop out of repo https://bitbucket.org/nocproject/noc"

на снимке между ними сантиметров сорок

даже не хочется загадывать, кто кому навешает при случае

но пока ставим на птицу, он боевитее

mrDen1: db.noc.macs.remove();

ну не remove, а drop

dvolodin: скажи, а прокси, указанный в noc.conf, где-то используется?

dvolodin: все, работает

да, использовался некоторыми скриптами

TSergey: лучше принудительно прописывай /bin/bash в шебанг

прикол в том, что теперь SA NOC'а можно использовать без самого NOC'а

и без его базы

в скриптах башизмов хватает

просто вытащить репо, прописать конфиг активатору и дергать его по http

evyscr: это про скрипт upgrade?

про любой ноковский скрипт, в котором #!/bin/sh

я не понимаю почему апгрейд через раз работает

и еще NOC умеет выполнять команды на железках, которых нет в базе

бля

можно вернуться к идее с discovery объектов

dvolodin: да мы же знаем, тот нок что у тебя --- он все умеет :) а у нас то коммутаторы не те, то дизайн сети :)

а я с этим что сделаю?

это же риторический вопрос? мне-то известен ответ

добавил в

https://kb.nocproject.org/pages/viewpage.action?pageId=20152336

dvolodin: а нод может быть много? на один Envir.....

teroni: нод должно быть много

:)

у меня новые ноды затирают старые

это как?

есть нода 1

говорю создать новую пишу внутрь фигню.

сохраняю

остается только последняя

или датацентр то-же должен быть новый?

нет

она должна просто добавиться

нетуть

только одна запись все врея

хорошо, перепроверю

а если отрефрешить страницу?

так как оно периодически дохнет - то постоянно полный рефреш

хорошо бы кто-нибудь помог подиагностировать

и поправить

не успеваю за всем

тама столько по наворочено....

да нет, там очент простой JS

TSergey: эй, ты в kb типа объединил два варианта решения-)

хватит только /bin/bash

оки

dvolodin: не понял прикола

с какого-то момента начал создавать новые записи

целительная фотка кота

:)

Приветсвую всех. После перехода на develop столкнулся с тем, что перестали работать Event Trigger. При наличии хотя бы одного из них классификатор отказывается работать и все ивенты копятся в new.

С Alarm Trigger вроде всё нормально, но насчет этого не уверен. Кто-нибудь еще с подобным встречался?

а в failed смотрел?

в failed не переходят

в new висят

странно

у меня такое только когда проц не справляется

либо срабатфывает либо в файлед

в new задерживаются из-за тормозов проца

тут проблема явно в триггере, без них всё отрабатывает как надо

а с ними классификатор даже не стартует

и в логах тишина?

лог идет по кругу - загрузил правила, загрузил триггеры, наткнулся на первый - сдох, начал заново

тригер без регексов ?

указание хэндлера в триггерах теперь обязательное?

проверь регексы. оно через веб сохраняет но потом БД крашится. смотри логипостгреса.

пробовал разные RE, в том числе просто текст без спецсимволов

kokozzi: NOC-1392 может у тебя что то подобное.

и может это NOC-1621

а трейсбеки не валяются где-нить?

http://pastebin.com/JGgRYSni вот такой трейс если запускать из скриптов

кто-то в монге отсутствует, походу

это нок (q)

Хотел проверить кривой RE через Alarm Trigger с таким же RE - к крашу не приводит. Хотя, возможно ими заведует не классификатор, в этом я не уверен.

у кого-нибудь есть RE, которое работает в триггере? поставлю для теста

а в support > crashinfo ничего не сваливается?

нет, там пусто

ну тогда совсем грусть печаль

жди когда к тебе придет dvolodin и скажет что пора ставить башню

ага, особенно жалко что до перехода на девелоп они прекрасно работали

а что унутре 'select * from fm_eventtrigger;' ?

толиещё будет. счас он затестирует у меня башню и пиздарикифанарики.

http://pastebin.com/M7zhSeRy

вольют девелоп

охтыжблин, кавычки

после добавления кавычек вокруг RE крашиться перестало

раньше не требовало =\

:-D

у меня и без кавычек не падает...

(пока)

event trigger?

угу

без пируля, though

а тебя не затруднит скинуть какой-нибудь из своих RE для теста?

я твой взял

je

оу

без пируля это через хэндлер?

безо всего

нотификейшн груп онли

сейчас попробую

эти триггеры рестарта нока не требуют?

требуют, как я понял

хм

опять через тернии к гландам

не, твой случай воспроизвести не удалось. RE без кавычех, без пируля с нотиф.группой - крашит. всё тоже самое, но с кавычками - работает

да, всплыло

#поравалитьснока

кстати про кавычки, кажется у кого-то это уже всплывало

evyscr: пора

а куда

либо говнонок либо 100500 систем за которыми надо следить

dvolodin: нода привязывается только к датацентру?

а сервисы к пулу?

нода - к ДЦ

сервис -- если глобальный -- к ноде

если в пуле -- к ноде и пулу

ааа точно

но у меня теперь сервисы не видит пул :-)

я удалил ноды на которые были галочки для глобала

ну так переставь галочки

там табличка с общим итогом есть

и табличка не пашел

вообще не нажимается

environment выбери

и смотри в js console

Uncaught TypeError: Cannot read property 'pools' of undefined

в самом js?

да в консоли

после выбора сервисы

рефрешь

уже много раз

и тут то-же какой-то жуткий однострочный js

на 1.5 метра..

evyscr: да-да, валить на микросервисы

они чудесным образом уберут все баги? hurray!

Добрый день. После апгрейда нока с default на develop перестали обрабатываться события сислога. Счетчик новых событий увеличивается, а активных 0. Как можно это поправить?

и сейчас ты скажешь что у тебя используются ивент триггеры

:)

нет

черт :)

смотри noc-classifier.log

смотрел

ничего аномального

на уровне дебаг, вообще не отличается от инфо

вот что постоянно там повторяется

2015-10-22 12:28:16,414 [noc-classifier] Using rule lookup solution: noc.fm.classifier.rulelookup.RuleLookup

2015-10-22 12:28:16,415 [noc-classifier] Loading enumerations

2015-10-22 12:28:16,423 [noc-classifier] 3 enumerations loaded

2015-10-22 12:28:16,424 [noc-classifier] Loading rules

2015-10-22 12:28:16,430 [noc-classifier] 0 cloning rules found

2015-10-22 12:28:26,309 [noc-classifier] 1060 rules are loaded in the 98 profiles

2015-10-22 12:28:26,310 [noc-classifier] Loading triggers

2015-10-22 12:28:32,763 [noc.lib.perf] Stats are disabled

а если запустить ./scripts/noc-classifier.py -f start

он так больше пишет

даже больше чем дебаг

из под юзера нока только запускай

а то права на файлы лога побьет

скорее всего триггеры 2015-10-22 12:28:26,310 [noc-classifier] Loading triggers

dkul: ну ребутится у тебя классификатор

во, выдал трайс

трейс

su noc -c "./scripts/noc-classifier.py -f start"

not trusting file /usr/local/noc/.hg/hgrc from untrusted user root, group wheel

2015-10-22 12:30:09,400 [noc.lib.perf] Stats are disabled

2015-10-22 12:30:09,401 [noc-classifier] Using rule lookup solution: noc.fm.classifier.rulelookup.RuleLookup

2015-10-22 12:30:09,402 [noc-classifier] Loading enumerations

2015-10-22 12:30:09,409 [noc-classifier] 3 enumerations loaded

2015-10-22 12:30:09,409 [noc-classifier] Loading rules

2015-10-22 12:30:09,412 [noc-classifier] 0 cloning rules found

2015-10-22 12:30:17,894 [noc-classifier] 1060 rules are loaded in the 98 profiles

2015-10-22 12:30:17,894 [noc-classifier] Loading triggers

2015-10-22 12:30:18,757 [noc-classifier] Trigger 'Refresh Config' for classes:

Traceback (most recent call last):

File "./scripts/noc-classifier.py", line 12, in <module>

Classifier().process_command()

лол

а говорил - не триггеры

как сказал kokozzi - бери Refresh Config в кавычки

Я его вроде не включал

спасибо, вырубил, понеслось

_dhjlt_

*вроде

какое удивительное совпадение

это встроенный

он просто тебя ждал

я понял, это была проверка, я ее не прошел :)

если даже я на develop обновился, то уже точно пора)

пора что, простите?-)

пора начинать его форсить)

а кстати

этого ивент триггера уже давно нет

его заменили хендлером

или какой-то другой ебалой

я давно и безуспешно пытаюсь понять, что есть хэндлер

этого никто не знает

это костыль

почему-то вспоминается классическое "из говна и палок"

ок, это колбэк!

evyscr: dvolodin же говорил, что каждый пишет свои костыли, а нок это попытка собрать все костыли воедино чтобы не приходилось их каждый раз заново создавать

единый API для всех костылей

пиши костыль правильно! :)

костыль не пишется правильно

в особенности, в ноке

если кто-то вдруг сумеет найти текст, в котором написано, как _правильно_ писать костыли для нока - дайте почитать

да, ещё можно поделиться ссылкой на текст "Debugging NOC"

./noc -h

это была неудачная шутка

вот, например, NOC-1468

kokozzi: а попробуй http://dpaste.com/0RRQFDG и убери кавычки

evyscr: помогло, без кавычек в триггере классификатор поднялся

спасибо

я не понимаю, почему поднимался с кавычками

он точно так же должен был вываливать KeyError

вывод: где-то есть ещё один баг

вообще, подобный подход с повторной инициализацией внутри except - зло

нецелевое расходование ресурсов

(я, конечно же, своровал приём из AlarmTriggers)

kokozzi: попробуешь ещё один патч?

такой механизм с try/except раньше был и в EventTrigger

http://dpaste.com/386NW4H

попробую

со вторым патчем тоже поднялось

с первым хоть раз отработало?

ну и, конечно же, отработало ли хоть раз с кавычками?

это отдельный вопрос, который я как раз собирался потестировать)

dvolodin: что-то не правильно работает пункте Services

не выдает при выбраном пуле сервисы

ты многого просишь

обещали же микросервисы - вот их и не видно

а зачем

я вот и не хочу их видеть

я хочу чтобы нок работал

тяжко жить во время революции и становления

ты многого хочешь (fxd)

teroni804: здесь так всегда

конечно всегда... замахнуться на такую глобальную фигню...

революция на революции

нок это украина

не, ну пункт "до основанья мы разрушим" выполняется лишь частично

нее в украине когда то было нормально..

то была УССР

в ноке тоже

и нок на джанге

evyscr: с последним патчем drop_event отрабатывает нормально

сейчас попробую вернуть как было и потестить с кавычками

вариант с кавычками не работает совсем

вероятно, валится на кавычках в re

а под это какая-то соломка подстелена без записи в логи

вернее сам классификатор работает, но триггеры не работают

а алармтриггеры у тебя есть?

там по-хорошему тоже надо на if-else переходить

./noc rpc sae.script 9 get_version

{u'platform': u'VyOS', u'version': u'1.1.6', u'vendor': u'VyOS'}

вот так веселее

:)

а трабл, что новый МО не дискаверится не пофиксили?

нет

всем насрать

наверное в башне будет пофиксено

sure thing

через кнопку save дискаверит

bee26: ?

,.

я думал умеешь запускать дискавери

жму save и дискаверит

достало уже

а как ты жмешь дискаверит?

ага - тут же

как? :)

скрипт создает - мне нужно нажать кнопку

а скрипт как создаёт?-)

я руками завел МО, дискавери назначено на время, которое прошло

МО сэйвил, профиль сэйвил, ран в дискавери пробовал жать

похрен

наверное дизайн подвел

ну да

статусы в Wait?

ага

ну, крути джобы по созданному тобой же топику

я давно нового не заводил, траблы такой не помню

да у меня уже вечер, поди до утра отлипнет

в скрипте mo.save

evyscr: у меня из техучета тянется скриптом и обычно я замечаю сильно позже

скриптами не отлипнет. или ручками скрипт из шела запускать

bee26: а если после mo.save() сделать mo.apply_discovery()?

не пробовал

ща спробую

хотя вряд ли поможет

там что-то другое ещё должно быть

я вот так делаю:

DiscoveryJob.apply_object_jobs(m)

какого хера вообще это нужно делать

это нок, детка

TSergey: да, так и надо

развесистое клюквенное дерево

чота сегодня день хейтеров, btw

и ведь ещё Dmitry1 не заходил

хейтерствро - это хорошо, но непродуктивно

всех забанить (с)

и калёным железом

некто at@ любил писать нечто вроде "Мужчинки! Вы пидорасы!" и прикладывать патчи

:-D

так вот, патч у меня есть.

кто возьмется поддерживать develop до слияния с микросервисами?

ну у вас и запросы

ну а что вы хотите

мы сколько-то там месяцев хотим, чтобы пофиксились баги pagerless

и что вы сделали для пофикшения?

лично я долго-долго читал доки по extjs

заводил ряд issue

несколько месяев кричал о проблеме, которую игнорировали

патчи?

ой, ни одного патча от меня никогда не было, конечно.

evyscr: аларм триггеров нет, могу завести на потестить

кстати, а в дискавери скрипты из Suspend через какой срок выходят?

kokozzi: попробуй с таким патчем: http://dpaste.com/3FPJN35

evyscr: ну так я тебе и предлагаю - проверять патчи и накатывать

я за всем не успеваю

ну можешь добавить. я там тоже evyscr

где там?

на битбакете

хорошо, добавил

можешь разгребать pull request'ы и накатывать патчи на develop

пидранутый рхел блять.

какого хера создавать виртуалку 32 битную если хост 64 битный изачальна

блять

я бы понял возмущения об обратном, но 32 бита временами очень даже нужны

по дефолту карл!!! по дефолту

и что, фридрих?

32 < 64

а то что ты пихаешь туда 64 битную виртуалку и она не стартует и не видно изза чего .

потому что стоит quiet

всё. всем пиздетц. я сделал виртуалку для тестов башни с микросервисами

БЕГИТЕГЛУПЦЫЫЫЫЫ!!!! (С)

один послушался

:)))))

evyscr: http://pastebin.com/4TncSX11 вот такой трейс с патчем

kokozzi: у функции должен быть один параметр -- event

kokozzi: а без патча прикидывалось рабочим?

evyscr: да вот хз, без патча не тестил, сейчас буду посмотреть

коррелятор вообще как-то тухло дебажится, инфы отдает очень мало

нок - это боль (q)

kokozzi: учти ещё, что в случае, например, алярма ping failed, нок благополучно теряет event

оный объявится только при появлении stop_event

я на Chassis | PSU | PSU Failed навесил drop_event

хотя

может это было неправильно как раз

если есть start_event/stop_event - есть шансы словить фигню

попробую без пируля

аларм приходит раз в час, такой вялотекущий дебаг получается)

положи свич на стол

и отрывай ему порты

зачем дропать отказ блоков питания?

я вообще поймал какую-то магию. есть ивент - Config | Config Changed. в ивент триггере для него стоит правило обновлять конфиг железки. он не работает. в тоже время, есть ивент Config | Config Corrected - для него триггера нет, но по нему конфиг обновляется.

более того, для этого самого второго типа ивентов до апгрейда был написан обновляющий конфиг триггер, который я удалил еще утром

т.е. удаленный триггер работает, а вновь созданный - нет

стукнись завтра во второй половине дня в приват, может подскажу чего

сейчас занят

хорошо, если ничего не придумаем стукну

evyscr: с патчем без пируля вроде как отработало

по крайней мере в логах чисто

в трейс ничего не упало

вероятнее всего проблема была в несовместимости аларма и пируля drop_event