nocproject.org

Привет и с началом трудовой недели :)

dvolodin: есть срочные два вопроса

привет

давай

1. каким параметром комманде пинг передавать адрес? python manage.py debug-script ping 8 address=(192.168.4.19)

2. Писали тут о новой возможности, скриптования:

python manage.py shell

from noc.sa.models import *

у меня в интерактивном режиме с баша всё работает, а с питона я не знаю как выполнить "python manage.py shell"

Заголовок файла покажите...

python manage.py debug-script ping <name> address="'IP'"

из питона шелл выполнять не надо :)

надо только пути правильно выставить

либо через PYTHONPATH

либо в скрипте

примеры - все демоны в scripts/

То есть manage.py shell указывать не надо?

нет

shell просто выставляет окружение

для своего скрипта можно позаимствовать обвязку из scripts/

Победил я многоколоночный вывод в jsTree

правда совсем грязным хаком - передавая HTML в качестве строк

но работает все

grid plugin не рабоатет в нашем случае - он не дает по клику переходить на URL

dvolodin_ хай, не смотрел http ?

сейчас гляну

Спасибо, получилось и с пингом и с скриптом. Вопросов много но остальные потом :)

не стесняйся

Мне некогда, сначала функционал наклепаю, а потом буду спрашивать как его в приличьный вид привести... через пару дней :)

Какой функционал?

http://redmine.nocproject.org/boards/3/topics/2082

Сейчас перепишу ти скрипта и их надо мне присобачить один перед Topology Discovery второй после неёб, а третий после выполнения cm.config_pull

как поселе:

Topology Discovery

Running topology discovery

Writting topology into /tmp/topo.dot

добавить линки на картинки :)

Всем привет!

На счет построения картинок: http://links.sourceforge.net/

Смотреть примеры http://links.sourceforge.net/network/js/examples/

Ребят, вы не забывайте, что применения могут разные быть

в сетях доступа - по одному линку на свичик, ну или два

а в датацентрах по триста на свич и еще port-channel'ов с пол-сотни

текущий layout в graphviz как раз связан с тем, что так хоть как-то видно portchannel'ы

хотя либа хорошая, да

Гугля делала

Там еще и графики оно рисует хорошо

да, я понял

Мне нравится этот http://links.sourceforge.net/network/js/examples/example05_groups.html Только порты свича должны номироваться как в графвизе

графики нам еще пригодятся

для performance management я делал плагин для jQuery

Кстати о портах свичей: Я там патч для сортировки по ним кидал

Path #129

Сортирует порты вида XX:YY - Актуально для некоторых типок железяк

Народ просит.

Сделано, как ты и просил, не трогая оригинальный jquery.tablesorter.js

dvolodin новая версия галочки "показать пароль" сделанно через widget http://redmine.nocproject.org/boards/3/topics/2171?r=2179#message-2179

Смотрю я на эту "инвентори", и мне абсолютно не понятно, как туда данные можно заносить. Логику json файлов, которые идут вместе с ним я понять не смог :(

А я пока даже боюсь смотреть.. Непонимаю 90% того что было до нового инвентори :)

как в питоне правильно разгребсти констукцию: <ManagedObject: 10.2.2.4>

Возможно дальше будет лучше, но текущее исполнение (jtree) абсолютно мне не понятно. Например, я не нашел, где можно описывать количество слотов в железяке или модуле. На примере Force10 | S | S25N я не понял, почему "copper" слоты называются "Electrical | RJ45"

Предидущий вопрос разгрёб. Как правильно в скрипте свормировать список всех устройсв?

ManagedObject.objects.get(administrative_domain=1)

матерится: noc.sa.models.MultipleObjectsReturned: get() returned more than one ManagedObject -- it returned 134! Lookup parameters were {'administrative_domain': 1}

get - это одна запись должна быть

filter()

тебе нужен

а результат в цикл или еще куда

Да для цикла надо последовательность...

фильтр и есть та последовательность

фильтр в конце пишет: , '...(remaining elements truncated)...']

защита от спама на экран

а-а-а ну сей час попробую :)

Dmitry11: Пока закоммичены только модели

это описания железок

Dmitry11: количество портов задается в поле range

Очень страшно и ужасно :( Неподготовленному человеку смотреть категорически запрещается.

при этом переменные подставляются в name

например, для MX'а может такое быть

В name: ge-?/{{i}}/{{j}} в range i:0..3,j:0..9

А если у меня в половину SFP воткнута оптика, а в половину медь. Где это посмотреть можно?

Забадяжел пинговалку http://pastie.org/1908849 в баше оно выполнялось паралельно, в питоне что лучше в данном случае multiprocessing или threading?

Честно говоря, хотя я и не люблю эту прогу, но в данном случае самым лучшим решением я видел D-View от D-Link.

Там уже "забиты" с картинками все возможные модели коммутаторов от D-Link + возможные модули к ним.

Но самое главное - там есть модель, называется "Generic switch"

Туда можно "засунуть" абсолютно любой свич, и D-View худо-бедно сам нарисует его переднюю панель со всеми слотами и портами.

Сейчас смотрю страничку в инвентори, относящуюся к Force10 | S | S25N. Глаза разбегаются. По неизвестной причине часть портов находится в разделе "Inner sockets", часть портов в разделе "Connection sockets"

Причем, модули питания тоже в двух разделах. Абсолютно не вижу логики.

Dmitry11: Если есть дырка, в которую втыкается SFP, то она имеет тип сокета Transceiver | GE | SFP

сами трансиверы - отдельные модельки

может быть с TX, может быть с оптикой

Если хотябы хоть первый модуль питания был слотом с разъемом "мама", а второй - с разъемом "папа", то я бы понял. А так два модуля с разъемами "мама". Как они втыкаются друг в друга - загадка природы.

модель свича от этого не меняется

где два модуля с разъемами мама?

По типам сокетов, смотри

Outer - это разъем, через который железку можно воткнуть внутрь другой железки

например, у линейной карты - разъем в сторону свича

1. "Inner sockets" - "DC Power Module" - "Force10 | S | DC Power Module" - "Female"

у SFP - электрические контакты

Inner - слоты, в которые можно внутрь этой железки воткнуть другую

2. "Connection sockets" - "Power DC" - "Force10 | S | DC Power" - "Female"

то есть слот под модуль, дырка под SFP etc

connection - когда втыкаешь кабель и он идет черти куда

то есть интерфейсы под патч-корд

DC power там - 3 болта

0. -48 и земля

погоди, я схемку сваяю, чтобы понятно было

Рисунок свича, и к нему подписи, какой разъем к какому пункту в инвентори относится.

Я вот например не представляю себе, как сделать такую вещь: http://www.dlink.ru/ru/faq/65/789.html

http://files.nocproject.org/inv.pdf

вот схемка

на ней два свича, блок розеток, одна SFP TX

два шнура питания и один патчик cat5

Модели - прямоугольники

сокеты - надписи на стрелках

ромбики - связь

dvolodin: У меня на свичах DGS-3100-24TG порты очень хреново сортирует: 1:1,1:19,1:2,1:24,1:3.... добафь патч #129 от Dmitry1 для исправления проблемы!!!

показал соседу по столу. обещал разработать формат в трое более сложный чем приведенный.

добавлю, как просмотрю

free|wk: ты про схемку?

это в базе так

на практике все проще будет

берешь железку, берешь порт

с одной стороны

то же самое с другой

говоришь - соединить

оно тебя спрашивает - взять готовый патч со склада или сделать новый

и соединяет

Посмотрел схемку... Пошел биться головой об стену и думать, как помтавить D-View на FreeBSD :(

типы сокетов и признаки папа/мама позволяют показывать в списке только то, что действительно может использоваться

или выбираешь слот и говоришь - воткнуть в него SFP

Вот мне интересно. Если я эту схему покажу нашему бухгалтеру, что она мне скажет?

ты покажи ей структуру базы 1С

скажет то же самое :)

Dmitry11, не смотри на схему.

схема показывает, как связаны модели, сокеты и типы сокетов

dvolodin, страшные картинки. пугают людей. заставляют патчить кде под фрибизди

IMHO выходной документ из Inventory должен быть понятен бухгалтеру или монтажнику с 8-мю классами образования. Хотя в принципе, уровень подготовки у них один и тот же :)

обычная бумажная таблица на выходе

какие вопросы-то

зато если припрет тебя посмотреть, в какую розетку воткнут свич - увидишь

Можно хоть издалека поглядеть, как будет выглядеть эта таблица?

как захочешь, так и будет выглядеть

отчеты будут

В общем случае - связи inner/outer образуют дерево

что во что воткнуто

корень дерева - объект inventory

А как заполнятся это дерево будет? Надеюсь не вручную?

Связи connected задают горизонтальные связи между узлами дерева

и образуют физические топологии

нет

будет так

памятный наш интерфейс get_inventory выползает

это радует.

он в карантине построит объекты, которые образуют свичик

шасси, модули, трансиверы и так далее

то есть кусок дерева уже будет

плюс нарисует некоторые виртуальные патч-корды на основании L2 topology discovery

Ты из карантина закидываешь его в нужную стойку или шкаф, это автоматом ну никак не определить

а далее либо тупо говоришь, что виртуальные патчи вполне реальны

а связь с SA, FM будет?

либо строишь трассу руками, если она составная - это тоже автоматом никак

некоторые объекты будут иметь связь с managed object'ами

и все узлы дальше по дереву тоже будут относиться к этому объекту

FM также привязана к managed object'ам

Тут, понимаешь, хотелось бы интерактивности чуть чуть. Если у нас появится объект модуль или порт, то мы сможем протестировать какие-нибудь его параметры. та же циска умеет тестировать свои модули.

патч-корды - это все L1, в базе так же будет L2 топология, натянутая на L1

будет тебе интерактивность

Интерактивность нужна пользователю, который будет работать с NOC.

это уже UI

найдет свич, получит менюшки

Я то могу вручную зайти по ssh на свич и в CLI все посмотреть.

по факту будут те же скрипты

только запускаться со схемы

виды можно будет переключать

деревом, картами вложенными

показывать L1 или сразу L2

Хм. Может тогда реализуешь сразу Feature #121? Там немного интерактивности для SA.

Там вполне нужные и реальные вещи.

не все сделать можно в лоб

В igetcdpneighbors.html и igetlldpneighbors.html возможность перейти на страницу SA скриптов указанного neighbor'а

как найти managed object этого neighbor'а?

В скрипте выдавать шаблону.

предлагаю это наварить на javascript

3-е тоже не сделать сейчас

дабы подсветка железок не тормозила вывод

Т.е. в шаблон django уже будет каким-нибудь параметром передаваться нужный адрес.

Понял, что я хочтел сказать?

да это можно сделать хотя бы по IPAM

если у этого адреса есть привязка к managed object'у - давать ссылку

Тебе виднее. Я бы добавил одним из тэгов для SA объекта его MAC адрес. Тогда из интерфейсов igetcdpneighbors.html и igetlldpneighbors.html можно будет делать ссылку на него.

Аналогично IPAM

Кто имеет желения глянте http://pastie.org/1909280 почему не распаралеливает и выдаёт "AttributeError: _Thread__target"

Опять же. В интерфейсах get_mac_address_table и get_arp возможность перехода на объект ЫФ

к стати а почему igetcdpneighbors.html имеет такой ограниченный список полей. там как минимум у циски выдаются ип адреса соседей..

ммм

gnu-linux: А зачем тебе вообще thread'ы

t=ReduceTask.create_task([object], ...., "ping", ....)

И еще. Ошибка о которой я уже давно говорил.

t.get_result(block=True)

В html выводе команды get_mac_address_table попробуй нажать на ссылку "Run again" - будет ошибка

Мда

в результате своих и чужих пожелалок набралось 93 штуки

отож...

:)

Моя самая главная пожелалка - доделать парсинг CLI, чтобы я смог скрипты для D-Link и Mikrotik написать.

Ну нет у нас Force10 :(

Всерьез задумались над предоставлением нормальной поддержки

http://files.nocproject.org/NOCService.pdf

примерные наброски

за основу брали заббикс и request tracker

кстати, как вопрос - насколько востребован хостинг?

есть куча бесплатных хостингов. их не переплюнуть.

хостинг нее...

страшна. логины и пароли от всей активки на сторне то...

dvolodin, дополни договором о неразглашении.

А прежде, чем выдавать NOC в продакшн - недо подкрутить юзабилити и документацию

Dmitry11: хостинг исключительно NOC'а

то есть тупо нажатием кнопки получаешь готовую к работе виртуалку

Ну очень страшная юзабилити. Плюс нет перевода на наш великий т могучий.

перевод на великий и могучий в планах

А. Понял. Круто наверное.

например, ты не хочешь использовать SA вообще, а только IPAM

или ставишь у себя только активатор

естественно, это не для операторов, но для банков всяких

free|wk: NDA в любом случае делается на основании требований заказчика

Я вообще пользуюсь только CM. Остальное считаю пока не пригодным для использования сторонними людьми.

они у всех разные

Dmitry11: IPAM непригоден? ;)

Dmitry11, зря. вполне.

BTW, IPAM у нас, наверное, лучший вообще

по usability и функционалу

CM тоже вполне законченый

в SA пока не хватает внешнего SOAP/REST/whatever для интеграции с другими продуктами

и собственно сценариев активации

Думаю список хочух по каждому направлению отнюдь не мал. но имеющегося уже вполне. и заставило глубоко задуматься о своей нужности пару тройку програмеров в оранжевой компании.

там есть заморочки, но уже достаточно простуй

api да...

IPAM "оторван" от реалий. Я так и не нашел, как можно сделать переход из одной сети в другую. Т.е. что-то типа static_route.

Для меня это актуально, потому как у меня каждый свич имеет как минимум 3 интерфейса в разных сетях. А в IPAM я не могу узнать, какие сети с какими префиксами подключены к SA объекту

эээ

Отож

привязка к объеку

Ну да

ну так есть она

вяжи не хочу

Объект то есть, а как посмотреть, какие сети к нему подключены?

мммм

Managed Objects

Выбор только по сетям.

в списке объектов в строке есть выпадающий список

жмешь там Addresses

где?

в просмотре списка объектов видишь Combo-box в строке?

А. Нашел.

колонка Action

вот

Только опять же. Все не кликабельно :(

сколько еще твоих хотелок не нашел ;)

Сеть есть, а перейти на нее не могу

Или наоборот. В IPAM объект есть, а перейти на него не могу

в плане "перейти" ?

Нажать мышкой на сеть и перейти на нее в модуль IPAM

Или наоборот, в модуле IPAM нажать мышкой на объект и перейти на него в модуль SA

а

ну это доработки по usability

вечная тема

Я уже писал об этом в Feature #121. Иначе приходится на столе кучу бумажем плодить, куда записываю такие вещи "на один раз"

Кстати, неплохо было юы добавить столбец description в выводимую табличку с IP адресами.

ok

dvolodin, есть какие то подводные камни для обновления до текущего релиза? mongodb сама должна подцепиться?

После часа игор с Reduce Task мне таки впервые за месяц удалось получить результат для result_report, get_arp через веб

запустить тоже в скрипте не удалось. Запустить ping даже через веб не удалось. Документации не нашол.

Вот ссылка на скрыпт: http://pastie.org/1909589

какой параметр передать для ping? Я угадывал для скрипта ping параметры но address="'IP'" не есть очевидным и врядли можно угадать...

dvolodin: Вот Reduce Task принимает 6 параметров: task = ReduceTask.create_task(1,2,3,4,5,6)

1: список ID селекторов, вводить в форм списка: [1] - выбирает селектор с id=1

2: Reduce script, в вебе я получил результат выбрав result_report в каком формате ввести его в скрипте не угадал!!! http://pastie.org/1909589

3: Reduce script params не знаю что вводить и хочу оставить пустым, в вебе ошибки не дало в скрипте поставил '', не знаю правильно или нет

4: Map script с пердидущего ответа понял что надо вводить название скрипта в кавычках: "ping"

5: Map script params припомнив что параметр для ping скрипта address="'IP'" я особых попыток угадать не делал, это не реально!!!

6: Timeout время в секундах: 60 - оставил в скрипте 60 также как и в вебе.

У кого "Reduce Task" запустилось для ping? Напишите формат параметров.. Когда мне удастся запустить напишу доку...

_4ePTeHok: да, сама подцепится, надо только в конфиге указать, куда цепляться

gnu-linux: параметры так передаются

{"address": "IP"}

6. Вместо TImeout можно подставить None

dvolodin, а нагрузка на нее большая будет? имеет смысл выносить mongodb на отдельный хост?

3. Можно указывать {}

_4ePTeHok: пока небольшая

дальше видно будет

в нее будет fault и performance писать

ага, значит лучше таки вынести

когда будут, тогда и можно будет выносить

хоть master и slave

2: в скрипте? result_report как написать?

тебе что с него надо на выходе?

"pyrule:result_report" - вот так, если это pyRule

5: формат для пинг: {"address": "192.168.4.19", "count" : "1"} - прошол нормально :)

2: "pyrule:result_report" я бы недогадался :) Это надо описыват в документации иначе толку никакого, пользоватся и так не можешь ибо не знаешь как!!!

1: список имен объектов, для селектора с id=1 можно получить так: tuple(ManagedObject.objects.filter(administrative_domain=1))

Вся комманда для вывода get_arp со всех объектов селектора 1 в скрипте имеет вид:

task = ReduceTask.create_task(tuple(ManagedObject.objects.filter(administrative_domain=1)),"pyrule:result_report",{},"get_arp",{},40)

print task.get_result()

Для ping работает команда:

task = ReduceTask.create_task(tuple(ManagedObject.objects.filter(administrative_domain=1)),"pyrule:result_report",{},"ping",{"address":"192.168.22.3", "count":"1"},60)

Надо бы доку написать...

dvolodin: как там моя дока по написанию скриптов для оборудования? может выложить на вики что есть, а там можно будет править и дописывать...

1: если есть селектор, можно передать instance

ManagedObjectSelector.objects.get(id=<id>)

он умный

можно передавать список объектов, список ID, селектор или по именам

в коде много примеров для create_task

Да, для пинга

task = ReduceTask.create_task(ManagedObjectSelector.objects.get(id=1),"pyrule:result_report",{},"ping",{"address":"192.168.22.3", "count":"1"},60)

сработало тоже... А вот в цикле параметр "IP" передать не могу http://pastie.org/1909908 :(

for ad_id in [8, 19, 14]:

.....

так не хочешь?

что должно быть в IP?

адрес объекта?

тогда у тебя будет i.address

Галочку show password закоммитил :)

dvolodin, на 2.4.3 питоне не взлетит да ?

не взлетит, не мучай птичку

там нет with

и вроде как list comprehensions не было еще

Dmitry11: Посмотри r3667

немного переделал список адресов, теперь там есть ссылки

щас гляну

Да есть. Cпасибо. А обратную операцию? Из IPAM увидеть объект SA ?

Объект отображается, но не кликабельный.

Кстати, а что в IPAM означает столбец "GW" и где его редактировать можно?

что адрес привязан к объекту имеющемуся в MO

автоматом проставляется как я понимаю

А не gateway ? Для подсети это вроде актуально.

вот только если их нескольк в одной подсети - то какой именно будет gw хз)

Несколько и рисовать. Плюс сделать кликабельными с отсылкой на объект SA

у меня рисует только один

хотя объектов там штук сорок

У меня вообще ничего не рисует. Вот я и спрашивал.

к объекту привязан адрес?

может там какое условие - типа первый или последний адрес в подсети должен быть

в IPAM не тот адрес, который у объекта.

ну это не суть

главное привязка в ипам в поле Managed Object:

Я в SA завожу адреса внутренней сети для управления, а в IPAM - рабочие адреса.

И толку от этой привязки? Не кликабельна.

ну dvolodin сделает)

обратное же сделал уже)

Т.е. я должен на бумажке выписать имя объекта, потом зайти в SA, найти его там, а в нем уже выбрать "Adresses"

GW - это шлюз

ну это понятно)

выставляется автоматом если объект присутсвует в нескольких сетях

А.

аа, вон оно как)

кликабельным сделайте пожалуйста) чтобы на обджект попадать

Не кликабельным, а выпадающий список, как в SA. Мало ли что я хочу с этим объектом сделать.

ну да, я имел это ввиду) оговорился

 вы только учтите, что далеко не все юзеры IPAM имеют доступ к SA

:)

ага, значит скрывать это дело от неимеющих прав..

Или формировать выпадающее меню динамически.

Все таки XXI век на дворе :) Статические html странички ушли в прошлое...

Dmitry11: неужели придется выкидывать gopher интерфейс?

:)

Ты еще pop2 вспомни...