nocproject.org

Кажется получилось у меня

теперь тушенка у нас хранится в отдельных репо и в JSON

не пугайтесь

dvolodin, есть только доно замечание

ась

пусть оно там будет prettyprint

я морду для просмотра сделаю

нее. морда и набитбакете норм

в JSON нет многострочных строк

тока притипринт туда не помешал бы :)

это будем еще думать

но, в целом, можно делать свои репо, в том числе и приватные

и ошибки проще будет обрабатывать

что за приватные репо, где они будут располагаться?

а где хочешь

например, ты можешь награбить тушенки со своих железок и хранить их у себя

или отрыть доступ на время кому-нибудь из разработчиков

диверсифицируем оборот тушенок в природе

в них могут быть сильно приватные данные, не все в общий репо можно класть

dvolodin, а новая пинговалка из веба то пингует ?

с ипама :)

неа

:)

у сервачников пичалька :)

у них от ипама тока в этом выхлоп был.

пофикси плиз :) ?

ok, делай issue

NOC-939

я даже не представлял что она вообще работала

оно работала. когда небыло дискавери выхлоп от нее был клевый

да даже с дискавери работала хорошо

сейчас чуть меньше ибо все не занечсенные выглядят как тупо забитые маки :)

вот не помнит никто, живой еще префикс на стыке или его разобрали уже

ксати я же правильно понимаю что активатор теперь надо от рута пускать ?

да

или можно какой то sysctl включить ?

zi_rus: показывала, какой IPшник в IPAM пингуется

или на rawsockets права дать

freeseacher: или дать ему возможность делать raw sockets

:)

запуск от рута оказался проще

благо я знаю эту граблю с icmp

но увидел толко на втрой день при перезапуске. в виде трейса...

как на счет отображения админ/опер статус в inv.interfaces?

да надо бы

dvolodin, get_arp snmp, какие у тебя еще сомнения? его как минимум парсить проще и с минимальными затратами можно портировать на все профили, нужна элементарная проверка что нужный MIB есть

zi_rus: а с VRF что?

dvolodin, а что с врф? у тебя в инветори лежат все l3 интерфейсы для каждого записан ifindex и для каждого записан vrf

даже не знаю какие тут могут быть вопросы

я не уверен, что по snmp быстрее будет и меньше нагрузка на CPU

про тушенку -- чтобы вытащить ее себе: ./noc beef --pull

попробую провести эксперимент

ты учти, что надо извлекать таблицы ifName

далее - соответсвие ifindex и vrf

далее arp-кеш

итого 3 таблицы

зачем, если у тебя все это уже лежит в базе

скрипт должен быть самодостаточный

dvolodin: Привет. Расскажи, куда ты дел тушенку и как с ней теперь работать.

Дима все проспал :)

вынес тушелку в отдельные репо

теперь она в json

вытащить ее

./noc beef --pull

доступные репо - в etc/beef.conf и beef.defaults

можно доку с примерами?

Мне тушенки поприсылали, а куда ее запихивать - не понятно

управления ACL нехватает... :(

для конвертации у меня скриптик есть

https://bitbucket.org/dvolodin/noc-sa-beef-public

выкинул ее пока сюда

можно либо переделать ее - новый debug-script сразу json выдает

либо сконвертить

а всякие reuse-db, test? scrit-test и т.п. ?

Как с ними работать?

Как отправлять новую/имправленную тушенку в репозиторий?

все работает как работает

сейчас доделаю ./noc test, попробую доку нацарапать

hello!

здорово, коли не шутиш

Можете помочь? Установил NOC на последний LTS ubuntu. Столкнулся с проблемой - не удается сохранить изменения в созданных учетных записях

UNHANDLED EXCEPTION (2013-02-05 12:04:47.949928)

Working directory: /opt/noc

<class 'django.db.utils.IntegrityError'>

null value in column "password" violates not-null constraint

это уже у кого-то было, кажется даже фиксили

попробуй обновиться

пофиксили это

Dmitry1, dvolodin тушенку то для config будем собирать ? и наверное надо не весь get_arp собиать а первые 20 строк нее?

freeseacher: теперь можно и весь конфиг

пофиг

да понятно

просто смысла в этом нет вовсе

задача же тушенки проверить работу скрипта

в 20 первыз строках точно уже будут маки из arp и точно будет остальное

собственно у меня даже более долгоиграющая цель -- тушенки с event'ами

что касается больших конфигов - тут есть проблемка

тушенка пока грузится сразу при запуске ./noc test

надо научить ее прогружаться и выгружаться при запуске runTest

а то в память можем упереться

Можно ещё немного нубских вопросов? ))

Пытаюсь получить конфиг с ericsson se-100. В Mabaged Objects поставил для него профиль Ericsson.SEOS, но при выполнении скрипта get_config отваливается с ошибкой "Task failed: RPC Call to script failed"

активаторы в мониторе есть?

SA->Monitor

Dmitry1: http://kb.nocproject.org/display/DOC/Canned+Beef

поправил доку

а commiter guide для тушенки?

может pull request на bitbucket?

mikevlz|2, да активаторы есть

http://kb.nocproject.org/display/DOC/Commiters+Tutorial

как я себе вижу

есть основной публичный репо

есть основной приватный

у каждого разработчика есть свои репо

Для локальных инсталляций могут быть еще и местные

в основные репо изменения попадают через pull requests

сейчас сделаю еще полезные команды вроде ./noc beef --import

еще тудаже clean перед pull надо

при клине открывать редактор.

а как скрипт выполняешь?

не уверен что даже в приватный репо на битбакете буду готов лить конфиг алика на 15 метров :)

dvolodin, а фиксили же удаление ip_prefixbookmark при удалении префикса ?

интересно, конфиг чего может весить 15 метров

мне тут опять его прислали. по датом врое сегодняшний

ufir, в сетке qinq. на каджый влан надо повесить 15 строк конфига. + exit через 2 строки...

freeseacher: что мешает свой репо делать?

не обязательно bitbucket

ufir, так вот примерно http://pastie.org/6051481

дык а выхлоп то какой ?

ну будет у меня приватная репа с тушенкой

и при обновлении я в лучшем случае смогу сказат ьчто скрипты по сбору не сломаны

н-да. а что за железяка-то ?

SR7750

у меня самый большой конфиг 700 килобайт ;)

mikevlz|2: жмакаю на значек ключа в поле "status", а потом http://noc.yartv.ru/sa/managedobject/2/scripts/Huawei.VRP.get_config/HTML/

определись, хуавей или смартэдж

блин, не то вствил. get_config на ericsson там

13374415 байт. вырезаны частоменяющиеся секции или то что накатывается биллингом. ну там не много не больше 10000 строк.

я много мучался с аликами и ноком.

dereiff, тебе не кажется, что выставлять такую систему голой жопой в сеть не разумно, я вот уже могу начинать пароли подбирать

да никто ничего не выставляет. вместо названия ссылка вставилась. долбанный Adium

dereiff, закрой фаерволом срочно

или хотябы http сервером

ufir, 700кб это что вы такое с железкой сделали, у меня самый-самый 206кб, и это надо ревизию провести, мусор вычистить

zi_rus, это на цисках такие конфиги ?

dereiff, дело не в ссылке, а в доступности

freeseacher, да

эх.

ну с другой стороны у алика конфиг иерархичен

в какой доступности? система на сером ip. во внешку просто веб-морда проксируется

zi_rus а там всякие школьные врф, почты и прочая корпоративная лобуда из сотен vrf

ну морда доступна,я пароль подберу и все железки что у тебя там есть смогу контролировать

dereiff, послушай дяденек.

на канале сидит демон noc-logger он в паблик выкладывает логи чата.

Пусть лучше дяденьки пояснят, почему get_config на H3C работает, а на cisco, huawei, ericsson и edge-core вылит ошибками. Хотя до обновления такого не было

эм... текст ошибок целиком на pastie.org

ну или пароль дай от морды. сами посмотрим :)

так он кроме "Task failed: RPC Call to script failed" ничего не говорит

тогда смотри логи.

tail -f /var/log/noc*

freeseacher, за идиота не держи, пароль ему. Да, я случайно ссылку засветил, ну чтож сделаешь

да пошутил я.

dereiff: ./noc debug-script пробовал?

dvolodin: это дебаг определенного скрипта? Не совсем понимаю, какие аргументы тут нужны

./noc debug-script get_config <object name>

dvolodin: если object name на руссском, поймет?

там вроде и Id можно было

dereiff: поймет

mikevlz|2: не вижу поля ID в списке

Мда, похоже дело именно в русских названиях. При переименовании объектов на английский get_config начинает работать

хм

Можете пояснить, с чем связано то что поддержка русских названий вдруг отвалилась?

dereiff: exception где-то должен быть

либо в логах SAE, либо в логах активатора

dvolodin: там exception как грязи разных. Может ты скажешь как вернуть поддержку русских названий?

доктор по фотографии не лечит

что в exception?

dereiff: на pastie.org/pastebin.com или еще куда в похожее место закинь и ссылку

http://pastebin.com/bmm8Hxta

а заголовок где?

Ну давай вот так

http://pastebin.com/nXnPxgzX

Я так понимаю главное здесь "'ascii' codec can't encode characters in position 25-32: ordinal not in range(128)"

да, именно

dvolodin: не подскажешь, как вернуть всё на место?

dereiff: попробуй http://pastie.org/6051866

dvolodin: exception больше в лонах не сыплется, но и скрипты виснут "Processing script. Please wait …" и всё

dvolodin: *в логах

dereiff, запускай с консоли

./noc debug-script get_config <mo-name>

а оно давно умеет без указания профиля скрипты запускать?

он по названию мо все узнает

профиль надо указывать только когда ты не мо пишешь, а ip с логином/паролем

mikevlz, это не то что давно, это так всегда было, сколько я им пользовался

./noc debug-script get_config с русским названем MO вылится в ошибки http://pastie.org/6051984

с англицкими в консоли запускается, а с морды - "Processing script. Please wait …" и всё

в sysname девайса есть пробелы ?

да

убери ;)

да, детка, ты сделал нок

практически все что можно придумать чтобы он не мог работать

да что с пробелами, что без них - одна фигня

zi_rus: почему же до обновления русские названия работали?

а хз, я не слежу, я просто называю их по-английски

не так давно SAE начал проталкивать на активатор имя объекта

dereiff, когда из интерфейса запускаешь get_config посмотри в noc-activator.log что он там пишет

чтобы в логах писать не только адрес, но и имя

dvolodin, в некоторых местах он пишет не ip или name, а id

не, пока не все... Надо еще несовместимые версии того, что в контрибе, поставить в систему

глюки могут быть волшебные

dvolodin, если конечно твоя проталкивалка имени этого еще не учитывает

Dmitry1, ты тут? сильно занят?

zi_rus: после того как внес правки от dvolodin в логах чисто

zi_rus: Немного

чисто не значит хорошо

должно быть что-то вроде running и completed

Dmitry1, NOC-923 забыл или забил?

я сейчас немного другим занят

zi_rus: Если MO по английски, то есть строка типа "Script H3C.VRP.get_config(H3C.VRP.get_config(multicast-2lvl, 10.30.0.10)) is completed", если по русски, но нифига

ну completed это хорошо, сдернул он его значит

у меня на экран выводит

может конфиг слишком большой

или еще какая проблема подобного рода

Конфиг не особо большой. completed есть когда запускаю ./noc debug-script get_config из консоли. когда из веб-морды - нифига

попробую потестировать

dvolodin, NOC-940

dvolodin: Я так понимаю, что автоматический сбор конфигов теперь не будет работать тоже?

если он в ручном режиме не работает, то и в автоматическом будет также

работает один и тот же скрипт

dereiff: пофиксил, можешь откатывать патчик

python не любит, когда ему вместо имени thread'а подсовывают unicode

красота

dvolodin: спасибо, заработало

dvolodin, посмотри NOC-923

сам дорисовал как смог

dvolodin: А может get_config отваливаться из-за слишком большого конфига??

На всём оборудовании всё хорошо, а на эриксоне валится по таймауту http://pastie.org/6052200

с дефолтного профиля снял Raise alarms, создал профиль для транков, с alarms - повесил на несколько десятков транков. ан нет - с коммутаторов доступас клиентских портов продолжают лезть алармы, мало - но есть

dereiff, он может валиться из-за таймаута, но таймаут может быть из-за железки

у меня на паре железок конфиг большой и железка очень долго отдает show run

я поменял в скрипте на show conf кторый железка отдает на много быстрее и нет проблем

dereiff, когда ты на железке команду выполняешь, он быстро конфиг показывает?

freeseacher, ты тут?

zi_rus, частично :)

freeseacher, NOC-923 посмотри, я там патчик приложил

zi_rus: конфиг выводит быстро. Таймауты со стороны оборудования у меня отключены

dereiff, я смотрю он у тебя зависает на этапе connecting, те даже команду не вводит

на железку точно есть доступ с ip сервера?

zi_rus, нее пока не буду. работаю

zi_rus: сорри, зря на NOС качу, походу это у нас косяк с маршрутами

freeseacher, бросай эту плохую привычку :)

гм...

а на карте линков ща отображается только то, что было на момент сохранения или должно отражаться актуальное состояние?

zi_rus: в sysDescr у них разное бывает

mikevlz: refresh нажми

dvolodin, там sysName

жал, видать еще интерфейсы не снялись с железки

Доброго дня

есть желающие помочь? =)

не всегда

dvolodin, Description:

System name.

An administratively-assigned name for this

managed node. By convention, this is the node's

fully-qualified domain name.

>>>>> fully-qualified domain name <<<<<<

без вариантов

axule, ты задай вопрос, если ответа не будет, значит желающих нет

ок

поднял, настроил, запустил, заработало

повезло

:)

импортнул из все ip flhtcf

адреса

ещё из того в котором импорта с железок не было

делаю импорт адресов с железок

и оно падает в трейсбеке смог разобрать что он не может на железке найти vrf который в нем есть

и это совпадает с реальностью

вопрос можно как то эту проверку отключить?

импортировал ip из старой dthcbb тщсзкщоусе

емаё

спешу =)

отключить нельзя, можно правильно нстроить

так

что именно нужно крутить?

но я не понял что у кого нет, и где реальность

в таблицах nocproject есть vrf в котором есть алокейшены

а на маршрутизаторах этого vrf нет

в каком смысле нет

почему нет

не создан он на реальном маршрутизаторе

почему не создан?

axule, на сколько я понял, крути в свойствах МО параметр vrf, какой укажешь, в такой он и будет записывать адреса с этой железки

есть только в nocprojecte, он для тестов совместимости с другой самописной приблудой

в свойствах объекта выстави руками нужный врф

ссори с терминологией еще не до конца знаком , что такое МО?

sa > mo

managed object

на маршрутизаторе не один vrf

там где добавляешь свитчи роутеры и т д

их там много

ну тогда переименовывай врф как на железке

axule, вот про это и был вопрос

что у тебя отличается

на железке какой врф?

как оно должно узнать в какой из врф пихать адреса если на железке нет такого врф

а в ноке какой?

или проблема только с глобальной таблицей

шлем письмо на деревню дедушке

гадаем по врф

у меня vrf в базе nocproject создан руками vrf для тестов, на маршрутизаторе есть много разных vrf

но нет такого который я в юазе создал руками

нок соотносит врф по имени

axule, какой врф создан, чему он соответсвует на железе

адреса всмысле

на железе он не чему не соответствует

ну кроме дефолтового, куда льется все остальное

не может быть такого

ты хочешь импортнуть с железки дефолтовый врф в нок в созданный тобой левый врф?

почему не может?

мы говорим про адреса на железе

на железе они где? в врф? или глобале?

где они болжны быть в ноке?

в твоем левом врф?

загрузил

=)

давайте с начала

или у тебя адреса из одного врф с ноке раскидываются на 2

так нельзя делать

=))

да постойте уже

бррррррррр

стоп

балагана

axule: давай по порядку

я руками через веб интерфейс в ноке создал vrf test-ip-allocation 65001:001

что есть, что получилось и почему это тебя печалит

dvolodin, NOC-923, не отвлекайся, все с тем oid в порядке

zi_rus: на всех проверил железках?

в нем всего один префикс 192.168.1.0/24

sysname возвращает fqdn, это стандарт, на своих проверил

axule, с железа адреса из какой таблицы хочется в этот врф запихать?

новые вкусные тушеночки давай

врф какой то или из глобальной таблицы?

такого vrf и таких IP в реале на маршрутизаторах нет

dvolodin, все или хватит одной?

такого vrf и таких IP в реале на маршрутизаторах нет

щелкни по префиксу

axule, и что ты пытаешься импортировать

все просто должно работать

он там показывает - если нок автоматом импортировал адрес - где он его видел

потом я сделал obgect selector для своего маршрутизатора

zi_rus: разные виды ios'а желательны

приватные можешь пометить

ios он и в африке ios

сдерну с катлиста и 7600

и а adress space -> setup

делаю import connected

выбираю свой селектор

и говорю run

оно думает а потом выдает длинный traceback

axule: есть давно более прямой метод - через discovery

и ни чего не импортирует

трейс на пасту выложи

ну и давай traceback, посмотрим

http://pastebin.com/r7By2yZK

ага

;)

rd 0:0 на глобальной таблице трогать не надо

печалька ему будет

да вроде нет таких rd ни где

дефолтовый врф есть?

вот и плохо что нет

должен быть

очень плохо

угу

короче, для глобальной таблицы должен быть VRF

как он называется - пофиг, но rd должен быть 0:0

его надо в ноке создать?

он был

он там по дефолту если не удалил

или не изменил

возможно

могу я создать сейчас в ноке vrf с rd 0:0

&

?

должен)

jr

ок

да, создавай

dvolodin, к issue приложил beef, ничего не замазывал, нечего там мазать

маслом надо)

покорнейше благодарю, помогло. =)

видимо при импорте черей sql из старого чего то поломал

zi_rus: тушенка в новом формате?

axule, прими за правило делать issue на сайте

и трейсбэки чтобы были

dvolodin, нет, я не обновлялся

axule: скорее всего - руками снесли

а то растянули резину

тут тоже спрашивай, но доноси конкретней проблему опять же с трейсами если они есть в пасте

ок

буду вживаться

еще раз спасибо

кстати вот мы храним конфиги железок, а не думалосб ли сделать то же самое для сервисов на серверах?

т.е. снимать конфиги апачей там скажем, /etc/rc.conf и т д

только это каталог сервисов надо

HaLVeR, ты не первый кто про это вспоминает

но мне думается это неформат

оно конечно сбоку, да

если только в виде плагина организовать

мейби отдельным модулем..

каталог сервисов все равно надо будет делать только другого толка - услуги и т д

HaLVeR: не стоит распыляться

сервера - это пока не наше

максимум на что я готов - влезть в настройки distributed switch'а на ESXi

HaLVeR: это другое дело

dvolodin, что-то еще надо? к issue?

zi_rus: в json бы тушенку

dvolodin, может ты закоммитишь, я обновлюсь и ты расскажешь как по новому тушенку собирать

так же, как и по старому

сейчас проверю

все то же, просто у нее формат другой

а что нужно включить чтобы в inventory интерфейсы устройств появились?

zi_rus: проверил на 3845, работает он по snmp

axule: interface discovery

в noc-discovery.conf

ну а дальше все зависит от того, работает ли get_interfaces

dvolodin, я бы сильно удивился если бы не взлетел, тут скорее надо проверять, как на других вендорах полетит, и сразу всем его сделать

dvolodin: get_interfaces работает, в noc-discovery.conf сказанно WARNING: Do not edit this file directly!!! =)

в object profile опрашивать интерфейсы сказанно

axule, noc.conf посмотри

там вконце есть секция дискаверинга

[interface_discovery]

failed_retry = 900

classification_pyrule =

initial_submit_interval = 900

enabled = true

success_retry = 86400

save = true

initial_submit_concurrency = 20

как я понмаю всё включено

noc-discovery запущен?

можно в sa > managed object's выбрать галочками несколько железок и запустить Run discovery now

dvolodin, файлы так же выложить с тушенкой или иначе?

dvolodin, к issue новые приложил

а вот вопрос - если в скрипт добавляется новая команда, старая тушенка ломается. Пофиксить раньше можно было ручным добавлением вывода в файл тушенки

а теперь как?

ручным добавлением в файл тушенки

а вообще раньше фиксили через --fixed-beef-base

в тушенке не поменялся только формат, и доработан сам процесс оборота тушенок

axule, ты кстати еще тут? если не сложно проголосуй на форуме http://forum.nocproject.org/index.php?topic=162.msg566

HaLVeR, а ты голосовал на форуме? я правда чувствую что один два голоса картины не изменят, но а вдруг

что характерно, джуниперы идут на уровне малопользуемых вендоров, а кроме цискодлинков, у людей популярны зуксели и эдж-коры, вот какие профили надо тащить

ну ежиков я и так стараюсь поддерживать

dvolodin: run discovery now отработал в мониторе видел как изменились счетчики запущеных/отработавших скриптов

ну

в inventory в выпадающем списке могу выбирать маршрутизаторы

а вот вкладки c интерфейсами мак адресами не активны

как буд то что то не включил

из дебага скритп запусти

get_interfaces

работает

вижу интерфейсы в xml подобном виде

сделал еще в Saervice Activation -> Task -> Mac Report

тоже работает

и Show Swichport работает

должны тогад появится

интерфейсы

axule ништяк, у тебя всё работает

ник обязывает)

а, ну да

zi_rus: проголосовал

вот и правильно

ну как то не совсем все =)

а мне вот натрейсило кучу

вкладочки не активны, прям как в windows =)))

"RuntimeError'>\u000adictionary changed size during iteration\u000aSTART OF TRACEBACK"

_4ePTeHok, а как обстоят дела с еджкорами, в плане скрипта EdgeCore.ES.get_lldp_neighbors? он вообще рабочий? а то у меня выдает пустой результат

_4ePTeHok, плохо поддерживаешь, видишь

а у меня все работает

ты не в счет :)

у меня на 3510МА не работает.

не знаю как ещё объяснить заскриншотил http://i54.fastpic.ru/big/2013/0205/be/9f210e977dc62075b98227d45defa6be.jpg

регулярки не совпадают

ApmeM 3528 нормально работает

правда пришлось софт чуток обновить

да впрочем я это и раньше хотел сделать

у _4ePTeHok, насколько я знаю, как раз 3528 много. вот поэтому и работают ))). будем смотреть

axule: mongo noc

db.noc.interfaces.count()

mongo noc

MongoDB shell version: 1.4.4

url: noc

connecting to: noc

type "help" for help

> db.noc.interfaces.count()

3

8-\

хха

ApmeM причем вроде даже корректно все рисует http://postimage.org/image/6p0xumqep/

у меня еджкоров мало, тысячи полторы

ufir, что у тебя за монитор, у меня скриншот на экране не помещается

HP ZR30w

это тема

таки регулярки не совпадают. буду ждать <_4ePTeHok>-а

ufir: красота

картомерство?

=)

раскидывал железки руками - а линки оно само нарисовало

добрый день

здаров

как произвести поиск по атрибутам объекта

?

в частности в атрибутах есть серийный номер, хочу найти объект с этим номером

sa_managedobjectattribute

dvolodin, он у меня как--то нашел линк, вернее 4 параллельных линка, но если скрыть интерфейсы, они все сливаются в одну линию

zi_rus а это со всеми похоже так

у меня аналогичная ситуация

и нет характерного элипса ибо там портченел

а кто писал скрипты для хуавеев ?

dvolodin: по веб морде нельзя ? если нет, то поподробнее :)

ufir, оно так у всех потому что еще не сделали

скажите, а что теперь файла ./scripts/caninstall.py нет? или это у меня такой глюк?

не нахожу у себя в noc-е

Тут dvolodin с тушенкой эесперемнентирует. Теперь в формате JSON оне будет. Соответственно и работа с ней немного изменится

и как теперь поступать?

интересно, а ./noc test работает.

http://kb.nocproject.org/display/DOC/Canned+Beef

там уже поменяно немного, но пока не все работает

в тесте все работает

ApmeM, у меня много 3526.3528

они почти одинаковые по выводу

в кли

у тебя ллдп скрипт глючит на последней прошивке?

ApmeM, поправил регулярки которые ты засылал, должно работать