nocproject.org

dvolodin: NOC-1094 - там последняя проблема актуальна, поглядишь?

и из бранча develop я так понимаю надо методично с остальными бранчами мержить?

а то вчера полезную фичу добавил ... а в том бранче где сидим ее нет

да, еще актуальна, будем фиксить

develop мержится по мере необходомости

да, нашел там проблему

disposition rules не сериализуется нормально

object id там отдается

вылезло после того, как сделал сериализацию ListField

Что у нас еще из ошибок осталось?

что мешает слиянию с fm-new-ui с develop

правый клик в картах? или это другой ветки проблема...

не имеет отношения к ui fm

отдельно зафиксим прямо в develop

правый клик почемуто не работает именно в ui fm

а в девелопе пашет

кнопка клонирования - не сохраняет в последствии

да там трейсбак идет

поле Duration как-то интересно отображается... как целое число

плюс не могу добиться сохранения настроек отображения столбцов в Alarm и Event...

вроде в базу при этом что-то пишется, но после закрытия вкладки всё сбрасывается

ну вот, не успел...

teroni: у тебя Event Classes работает?

неа

и новые правила, похоже, не сохраняются, несмотря на то, что кнопка Save теперь активна

это через Create rule в событиях

через креате - да

а если делать Add через Classification Rules - нету грида, где писать regexp-ы и прочее

lexus-omsk: test!

ыы

так что рано ещё сливать в develop, наверное

господа, кто нить уровень доступа в нок занес ?

мне интересно как будет работать run command на хотябы 5 тысячах объектов

у меня доступ есть, но до 5к ещё очень далеко

запускаю, как правило, по селекторам, поэтому редко больше 200-300 объектов получается за раз

я просто крикидываю имеет ли смысл запихать доступ.

а у меня больше чем 5 к.

ну и с целью run commands как раз

ну во первых на все 5к сразу же не пойдет команда

там вроде достаточно гибко настраиваются всякие параметры типа одновременного кол-ва скриптов на активатор и прочее, так что можно и 5к распределить

надо ставить несколько активаторов

и да, юзайте селекторы :)

ну самособой будут селекторы.

другой вопрос что класификатор помрет от такого потока

просто примерно однотивную команду надо выполнить на ~200 000 свитчах

опухнуть :-)

а вот когда они ломанутся на радиус будет весело, наверное :) кто-то уже наступал тут на такие грабли

их же все еще в базу надо занести...

конечно это будет раскидано по примерно 36 активтаорам

радиусы справятся.

справится ли sae....

а куда ему деваться??

teroni, занести в нок это не проблема. csv импорт

у sae может кончиться..... да всё у него может кончиться

и проц. и база данных и память(особенно память) и жетский диск под запись логов

в базе не реально будет что-то найти..

нее

нормально

sae же параллелиться умеет вроде

ждем володина :)

а зачем ему паралелиться..

он задачи активаторам отдал и все

он для них для всех таск создал.

а вот дискавери и класификатор ... может все попортить

ну вот есть там shards, как раз для масштабирования, правда я не пробовал

lexus-omsk, это загатовка.

т.е. никто не пробовал? :)

кода под собой не имеет вовсе

нечего там пробовать

ну тогда feature/shard - и вперёд :)

хм...

мне каежтся что в этой ветке появится какой нить тарантул. или еще чего то такого же характера

freeseacher: у меня доступ, 2к свичей. version_inventory отрабатывает. Долго, но отрабатывает.

дискавери работает не покладая рук. Не могу сказать, что успевает. классификатор пришлось разогнать, у него есть в коде константа ожидания, уменьшил - поток событий перестал копиться в новых

Dmitry1, ну как, займешься написанием правил?

погодь пока. у меня на работе проблемы

серваки дохнут от старости один за другим

Начал настраивать синхронизацию с DNS по http://kb.nocproject.org/pages/viewpage.action?pageId=7766132 =)

А куда делся скрипт “clone-sync” из директории . /scripts/ ? Вероятно он с чем-то интегрировался или все проще..

Этот clone-sync что делал? Как обойтись без него..

он подготавливает файлы, которые нужно переносить на dns сервер и там запускать

./noc clone -v3 --out=/tmp/

запускать от юзера нок

Вот спасибо!

lexus-omsk, внес в доку

Падает с ошибкой..

File "manage.py", line 44, in <module>

execute_from_command_line(sys.argv) ....

IndexError: tuple index out of range

полный лог http://pastebin.com/heTWe7bW

./noc clone --out=/.… sync

Просмотр классов событий починил

fixed again

ага, ./noc clone --out=/tmp sync вроде отработало..

http://pastebin.com/rDE69UTk

Что там у нас еще из багов fm-new-ui ?

или пора сливать ветки?

не-не-не... сейчас найду, на что я ещё утром жаловался

На duration в секундах?

да, и это тоже...

плюс не сохраняются настройки отображения столбцов в Alarm и Event... или опять локальное что-то у меня

сохраняются вроде

а, и новое правило так и не смог сохранить: кнопка save теперь активна, но не работает

настройки отображение вроде пишутся в монгу, но как закрыл вкладку - всё сбрасывается

> hg diff -r develop:tip | wc -l

2790

lexus-omsk: что пишет?

это опять же из неклассифицированного события делал правило, а если через Classification rules - то нету кнопок в гриде, где regexp вписывать

так, теперь по порядку :)

давай

про кнопку save - там была 500-я ошибка, там post запрос, как оттуда трейс-то выдрать...

я с утра про это напоминал

[09:01] teroni: dvolodin: NOC-1094 - там последняя проблема актуальна, поглядишь?

lexus-omsk: в js console

это оно и есть

teroni: трейс с сериализацией я пофиксил

не работает сохранение НОВОГО Classification rules

шустрый

да, сохранение нового правила - вижу

teroni: про сохранение настроек отображения столбцов в alarm и event не подтверждаешь?

не обращал внимания..

у мну в 3 разных окнах все.. двигается все время не поймеш куда

я, например, отключаю столбцы id и status, устанавливаю удобную ширину, а оно не сохраняется с закрытием вкладки

Event Classes - показывает список

а в Alarm Classes - опять трейс

Dmitry1, NOC-1100

Alarm Classes http://pastebin.com/gEJY3yQQ

lexus-omsk: убрал столбец status -вышел зашел, столбец опять есть

привет

teroni: я про то же

хочу нок перенести на centos 6.4, с этой ОС нок нормально будет работать?

http://www.sencha.com/blog/mzpivotgrid-a-pivot-table-for-ext-js

denix3: должен, ему на OS, в общем-то, наплевать

оке, спасибо

главное прорваться через установку монги, постгреса и PostGIS

советую записать все действия, нужные для установки на чистый centos

тогда можно будет сделать bootstrap и для нее

mzPivotGrid - это про что?

Уфф.. все что получилось после clone я скопировал на DNS, пришлось поставить gcc, pip, и c-json

Что именно там запускать в виде демона ?

noc-launcher.py ? или noc-sync.py ? из каталогв scripts

нок лаунчер

еще есть некий noc-launcher.conf в котором активна только секция [update] Там если я понял необходимо указать IP сервера NOC ?

в etc все конфиги активны

./scripts/noc-launcher.py: ./bin/python: bad interpreter: No such file or directory

Эхх еще и python по другой локации..

кстати virtualenv там наверное тоже надо?

дада

немного оффтоп: сегодня на такие грабли наступил: крэшился get_mac_address_table на циске, после падения, видимо, не отрабатывает нормальный выход

в итоге переполнились все vty, пришлось ехать в com порт цепляться

Dr01d: http://kb.nocproject.org/display/DOC/Manual+Installation читал?

Prepare virtualenv

Configure upgrade system

Run upgrade

Ага, что-то я запустался... сейчас я пытаюсь настроить синхронизацию DNS с NOCсевером, на NOCсевере сделал clone самого NOC, скопировал выдачу на DNS сервер..

Или мне нужно сделать полноценную установку NOC на DNS сервере. ?

нет, на серваке с DNS поставить клонированный sync

зафиксил создание правила

dvolodin, есть мнение что надо после клона выдавать ссылку на kb как этот клон развернуть

делайте статью в KB и давайте патчик

нам явно нужны какие-нибудь постоянные линки

угу.. pip indtall virtualenv сделал..

virtualenv --no-site-packages /noc

dvolodin: создание класруля с нуля - сохраняет

если создать на основе события - нет

в чем соль этого virtualenv ? Пока у меня Python явно не понимат, что хочет noc-launcher.py

virtualenv - свой личный питон с ....

Ага..

по мануалу прошел? все проверил?

dvolodin: в таблице Patterns: - в новой записи нету кнопок + и -

и да, при клонировании не вижу скрипта upgrade, он должен быть?

конечно

[12:37] <teroni> Configure upgrade system ... -- upgrade.conf тоже нету...

Хммм.....

чего-то у тебя не правильно .. :-)

Запустил по NOC ./noc clone --out=/tmp sync , полученное перекинул на DNS

а ну в этом варианте ...я пока не в курсе

т.е в по хорошему там после клонировния должен быть update скрипт и upgrade.conf? По сути останется только сдедать virtualenv на диркеторию с noc-sync, запустить update после и запускать лаунчер? ..

ты меня не слушай... я тебе про другое говорил

Аа... ты про полноценную установку.. понял..

к стати а кто-нить настраивал второй активатор?

teroni, у меня есть

штук 6

а инструкцию где брал?

вот в этом самом чате.

это жесть

teroni, у меня к тебе есть стандратное предложение

чуствую что не приличное

я тебя научу а ты запишь в виде доки :) ок ?

хм. задумался...

угу

писать сложно :-)

тогда "<teroni> это жесть" забирай обратно :)

впрочем мое предложние в силе ;)

Вангую, что проблема с настройкой синхры DNS-а всплывает тут часто..

Dr01d, нее. редко. раз в полгода где то

У меня почти все желаение испольовать NOC упирается в заявленное умение рулить DNS =) Функционал крутой, но мне особо применить остальные модули даже пока некуда...

File "scripts/noc-launcher.py", line 12, in <module>

from noc.main.launcher import Launcher No module named noc.main.launcher

А модуля такого нигде нету..

Dr01d, ./scripts/install-pth.py

ага, я логи порыл даже )) http://static.nocproject.org/irclog/2013.06.05.html тож советует )

Неа ./scripts/install-pth.py не помогает..

ImportError: No module named noc.main.sync.daemon

Вернее ./scripts/install-pth.py отрабатывает спокойно, но после того как сделал virtualenv на директорию.

в вот ./scripts/noc-launcher.py увы...

Dr01d: NOC должен быть установлен в каталог noc

:)

Починил отображение alarm class'ов

Проверяйте, что у нас еще осталось?

dvolodin: создание класруля с нуля - сохраняет

если создать на основе события - нет

сохраняет

если щас не исправил

фурычит

нету кнопок + и -

при создании класруля

Ага... дело двигается =) Теперь: No module named django.utils

и раздвинь таки таблицу Patterns - не влазят длинные мибы

а вот с раздвижением пока не понял

rom django.utils import simplejson

ImportError: No module named django.utils

simplejson через pip поставил, но что-то не цепляется..

https://bitbucket.org/nocproject/noc/src/4fc6ab1b60ad9029fa7e6859a9df00f51858d795/static/js/noc/ux/form/GridField.js?at=feature/fm-new-ui

хех

а я багу в ExtJS нашел

а бага где?

криво отрабатывает запрос к упавшему серверу

не анализирует код возврата HTTP, а пытается декодировать хлам, который подсовывает браузер

Dr01d: это самое... там в etc есть каталог с файлами того, что надо для запуска. Это надо установить в virtualenv с noc-sync. Делается это вручную.

про это тоже нигде не писалось...

freeseacher: вот так вот уедешь на дачу, приедешь, а у тебяч блог-пост отредактировался... Никаких гаттаровых с мизулиными не надо... =0

лучше бы взял и в faq забил исправленную версию, или в wiki

mikevlz, у меня давно крутиться идея что надо открызть доступ на запись в фак всем

не-не-не

а то там начнут травой торговать и грибами

этих мы выпилим.

к тому же точка зрения автора не всегда совпадает с написанным

сделаем пост модерацию и все

дык это и будет в блоге. а не точкой зрения автора

модерация будет тормозить процесс...

mikevlz, мы будет преодалевать это!

ну да... типично русский подход - создать себе трудности и героически с ними справляться...

и не будет никакого гримдарка

ладно... Тогда раз уже редактируешь мой блог, напиши там какую-нить новую статейку, что-ли... А то давно я себя не читал ;)

я знаю, ты сможешь

где еще надо исправить :) ?

там надо дописать, про ДНС, что после копирования надо установить Pip, virtualenv, проинициализировать virtualenv, запустить Pip чтоб он поставил зависимости все

а потом закрыть лицо и плакать

:)

:)

я в это в мае вляпался

лдано я кажется понял о чем речь :)

<mikevlz> По DNS вообще на ошупь иду..

прошу прощения что поправил твою статью

если что, вся инфраструктура nocproject.org - в UK

да ниче страшного, главное что писек каких-нить туда не понавставлял

dvolodin: реестру пох

мне тоже, в общем-то :)

Dr01d: там все на ощуп ходят

<mikevlz> Проинициализировать virtualenv ? Я верно понимаю, что это "virtualenv /noc" и все .

я из лучших побуждений... мне показалось что если стаья есть там то автор будет ахрененно рад если его статья будет актуальна

freeseacher: автор рад

не парься

;)

Dr01d, cd /opt/noc

virtualenv .

Dr01d: да, вроде так. Потом надо в этом virtualenv запустить Pip, чтоб он поставил зависимости по списку из noc/etc/чотатам

это на DNS в склонированной директории ?

после этого споткнуться об что-то еще

да

./bin/pip install -r etc/req*/sync.txt

на сервере ДНС, когда ты туда клон перетащил

ага... сейчас попробую ..

Dr01d, из вещей которые мне не удалось сделать это flush при обновлении

вот как споткнешься об что-то еще, можешь начинать плакать =)

там надо что т осистемное нактрутить с правами

Dr01d, не слушай mikevlz! не надо плакать. надо преодалевать!

<freeseacher> flush ? Сервера DNS чтобы он в зонный файл поправил?

да

там есть команды которые это должны делать

да, через rndc можно..

но надо понять от кого запускать лаунчер и синк

что бы им хватило прав вызвать rndc

от рута надо пускать

named:named =)

ну или так

я плюнул и от рута запустил

ну вот. а я забил.

на том серваке низя от рута запускать малознаеомые демоны :)

freeseacher: а чо ты тогда делаешь? по крону намед рестартишь?

вашпе, если порноднс запустить, то все изменения в БД пойдут и дергать ваще ниче не надо

с паравами я разберусь, вот просто сам сервис запустить , вот это задача невероятно сложная как оказалось

ой да ладно...

если обновлятор не отключишь, то споткнешься, на том, что оно не нашло сервер обновлений и свалилось с трейсом

<mikevlz>обновлятор.... тот что в шедуллере ?

не... Тот который в конфигах

тут или включать обновления и на основном сервере или отключать на склонированных демонах обновление

mikevlz, у меня очень тестовая схема. хватаеет таймаутов через которые сервер перезапускается.

уже два раза за полгода.

так

пофиксил я GridField

теперь при создании новых classification rules все красиво должно быть

и плюсиком, и через create rule

что-нибудь еще осталось?

о

zi_rus не поверил, что получился "FM new UI" и вышел

:)

чуть не рехнулся, пока разобрался, почему поле так колбасит

пришлось копаться в исходниках ExtJS

итак, дружно тестируем fm-new-ui

шо, о5 ?

это фигня

Вот у меня - жесть

Есть куча железяк, которые должны видеться через маршрутизацию В их сторону смотрит интерфейс с двумя алиасами

На всех железяках настроено, что ходить надо через 10.114.0.5

Но одна, особо упертая ходит только через алиас этого интерфейса

у нас тоже все хорошо

После кучи танцев с бубнами плюнул, и пропимал маршрут /32 на эту желехяку. Пусть ходит как хочет.

В файле с правилами маршрутизации сделал комментарий "Do not change! This is a magic!"

afromagic :)

не отвлекайтесь, тестируем

нужно закрывать fm-new-ui

и до релиза нужно проверить еще две ветки

feature/notification-center

feature/ranged-chassis-id

и слить все вместе

потом -- несколько дней на тесты, подготовку дистрибутивов, виртуалок и release notes

аккурат под первое сентября отрелизимся

feature/NOC-1036 -- кто-нибудь еще посмотрите

Я бы потестировал ) По предвижу мучительную установку опираясь на гороскопы и соседскую помошь...

Dmitry1, к релизу issue с сислогами перехерачишь?

дожить хотя бы до того, что ветку feature/fm-new-ui сольют в develop

Ну так допроверьте ее, и сольем

я не против

А что это в алармах за магическая кнопочка "expand" ?

по умолчанию показывает только root cause

при нажатии на expand в списке будут все alarm'ы

А почему не так: http://docs.sencha.com/extjs/4.2.1/extjs-build/examples/build/KitchenSink/ext-theme-neptune/#grouped-grid ?

Это чтобы запутать вероятного противника?

оно только по одному уровню группирует

А сейчас вообще не видно группы

и не надо

сейчас видно количество вложенных alarm'ов

В какой колонке их смотреть, это количество?

Alrm

dvolodin, тебе религия не позволяет слова полностью писать?

у меня нет такой колонки

не влезет

2 буквы

zi_rus: ты громче всех хотел новый UI

столбец пошире сделать

тестировать кто его будет? :)

В том то и дело, что для того, чтобы тестировать, нужно разворачивать новую инсталляцию, и забивать туда все MO, старые настройки и т.п.

я сегодня полдня на флеку пытался фряху залить

не хочет

какая-то заговоренная

делаешь на нее dd

выдернул вставил

а она опять пустая

Я бы еще был согласен на ветки stable и current, но иметь кучу бранчей, в каждом из которых работает что-то свое - это уже слишком

зачем кучу

тестируй то что интересно

я ОАМ вот проверю, когда таки заряжу новый сервер

а потом ФМ

zi_rus: В конце dd делаешь conv=sync

не первый раз флешку заливаю, никогда такого не делал

zi_rus: так тебе нужно ставить ДВА сервера. Один для тестирования OAM, а другой - для FM

zi_rus: dd if=чего-нибудь.img of=/dev/da0 bs=10240 conv=sync

dvolodin: А можно без всяких flow и т.п. сделать? Тупо два репозитория. Один для разработки, а второй - для релиза

Dmitry1, зачем, я тестирую ОАМ. протестировал, все работает, его отправили в девелоп, я перешел на ветку ФМ, и тестирую его

а оам из девелопа у меня тоже остался

все нормально

zi_rus: А в это время в ветке develop какие-то другие изменения происходят, которые не попадают в ветку FM

ФМ же для тестирования, когда закончил, оно вливается

а зачем тебе изменения из девелопа если ты тестер и тестируешь конкретную фичу

и если я правильно понимаю то изменения из девелопа должны отражаться в ветке

независимо от того когда их сделали

а может не должны, но тогда так неудобно

Потому как мне НАДО https://bitbucket.org/nocproject/noc/commits/c09132e1537f45736fd7d1ebc002b287cfa2ce9f

в любом случае я для себя проблем не вижу

Как по мне, так реально удобнее просто два репозитория

Dmitry1, сделать два репо это как сейчас, есть stable 0,6,4 и разработка

а когда ты дотестируешь OAM?

это вопрос, эээ... какой ответ подразумевает?

dvolodin: Сливай все в develop - не ошибешься

ошибется, кривой ФМ нафиг не нужен в ветке на которой все сидят в продакшене

ибо на stable сидят извращенцы

ты посмотри на 0.6.4

что там можно делать

там же ничего нет

зато фидбаки быстрее дойдут.

Как показывает практика, 90% глюков вылавливается после релиза

вот это и надо ломать

Так для этого и есть ветка develop

dvolodin, если ты хочем ответ по времени, то он неопределенный, не выходит сервер поднять, постоянно что-то не то

Древний, как говно мамонта, stable - мало интересен

Из нее уже переносить оттестированные вещи в stable

Дим, фокус в том, что develop также должен быть относительно стабильным

чтобы не блокировать выходы релизов

Тестирование feature branch перед слиянием только позитивно скажется на общем качестве

dvolodin: при обновлении девелоп, например влили фичу1, в фиче2 это отразится или она до слияния остается в том состоянии в каком был девелоп когда ее создали? судя по диаграмме - остается в состоянии, когда ее создали

изменения из develop можно донакатывать в feature

там, где они необходимы

Уфф, скажите, на самом DNS какие конфиги править? Вот исходя из примера на http://kb.nocproject.org/pages/viewpage.action?pageId=7766132 Это для серверной части или для клиентской там пример ?

zi_rus: вобщем, если пойдешь тестить фичи, будь готов к трудностям

На самом DNS в etc лежат {noc-launcher.conf noc-launcher.defaults noc-sync.conf noc-sync.defaults}

Dr01d: эти + конфиг намеда, чтоб подключился файл автозон

Про Q&A поговорим заатрва тогда

пойду

стартую noc-launcher.py, он из ./etc/noc-launcher.conf по идее должен конф брать? Но судя по всему не берет..

а чо говорит?

файл автозон в named?

сейчас..

не, его не надо редактировать, надо в конце конфига намеда его заинклудить, и то, когда уже sync запустится

не берет в том плане, что я там к примеру указываю путь до LOG другой, а он по прежнему фигачит по дефолтовому /var/log/noc/....

cd /opt/noc && ./scripts/noc-launcher.py start ?

или прям из каталога со скриптом запускаешь?

http://pastebin.com/sty7QeLM

да, да еще и под рутом , т.к пока разбираться кому и какие права дать нет желания.. запустить бы пока просто..

это Log noc-launcher.log

отключи обновление в конфиге ланчера и синка

noc-sync.log - пустой ..

до синка не доходит, тк нет связи с сервером обновлений.

или настрой сервер обновлений на сервере с ноком

только как это делать я не разбирался

http://pastebin.com/k1CF8LZ4

это noc-launcher.conf

апдейт выключен похоже..

эээээ... Зачем ты туда кусок конфига sync присобачил?

[stomp] и [dns/zone/ch1] ?

да

это от синха?

это надо в конфиг синка добавлять

убираю..

ну и у ланчера, как у всех демонов нока есть ключ -c который задает путь к конфигу

Ага... теперь конфиги хватает.. отлично..

но порт не биндит...

какой порт?

19705

клмент же stomp на нем слушает ..

*клиент

клиент стомпа не слушает, а сам коннектится

к стомпу

ага...

а что это за магическая строчка ? database = db=dns user=user host=127.0.0.1 passwd=pass

в Ааа, нет не то..

Вот, root = <zone files directory>

тут путь до моих файлов зоны?

A и in-addr.arpa у меня по разным файлам..

т.е root = /var/named/dynamic/

угу, когда там появятся файлы заинклудишь конфиг в намед

только наверное не в динамик, там вроде динамически обновляемые самим биндом файлы должны лежать

ну да, там и лежал *.jnl от named, я просто не пойму , что нужно sync от named..

сейчас запушу, посмотрю какие файлы появятся..

синку нифига от намеда не надо. Он6 будет класть файлы в каталог и обновлять их. И если скажешь - будет релоадить с помощью rndc нужные зоны

Вот... замечтельно, noc-sync на DNS наконец достучался до NOС срвера.. судя по логам..

Только я не пойму, как NOC стучится к sync DNS-с.. или там тоже необходимо поднять stomp..

Обратной связи то нету..

выходи, что на самом DNS тоже должен быть открыт порт 19705 на ктором висит stomp

нет, не так

sync цепляется к stomp

т.е sync постоянно стучится к stomp на NOC сервере и если видит апдейт пушит его в файл ?

Т.е если я сделал апдейт зоны в NOC, мне нужно ждать пока sync сам не стукнется и не заберет апдейт..

он за него цепляется и висит :)

постоянно

А какой процесс должен постоянно висеть?

сейчас висит ./bin/python ./scripts/noc-sync.py -c /home/support/noc/etc/noc-sync.conf start

но судя по логам активности нету..

зато в noc-launcher.log активно сыпется : [UpdateClient] Failed to get updates: <urlopen error [Errno 111] Connection refused>