nocproject.org

присоединяюсь к тестированию sa-managedobject

долго же он импортировал репо...

dvolodin: обновился на ветку sa-managedobject - есть пара замечаний:

каких?

не нашёл возможности линковать / разлинковать интерфейсы вручную

и поиск в интерфейсах

когда много сабов очень выручал

ok

по линкам пока не доделал

и вопрос - нормально, что после миграции посыпались пустые письма с темой config has been changed?

нет, не нормально

хм... думал, это особенность миграции репо

Линки, наверное, лучше в панели Links крутить

сделать кнопочки link и unlink

ну да, логично... хотя если создаёшь новый линк - то как?

кнопочка Add

ну да тогда, просто добавится ещё один комбо с выбором локального интерфейса

хай

потестил щас репу

очень хочется кнопку сравнить а не по выбору из списка

на аликовском конфиге вкладка солидно так подвисает

при нажатии на кнопку day/week/month с нехилой вероятностью генерятся фантомные правки. точного алгоритма пок ане понял

freeseacher: как именно должна работать кнопка "сравнить" ?

выбираешь две ревизии

нажимаешь сравнить

выбор из списка в данном случае не может быть действием

ибо отклик не быстрый

сложно сказать

на juniper'овском конфиге на 12k строк все летает

лишнее действие

эм

я просто сегодня оказался в ситуации с этими формачками когда я все уже выбрал

а никакого изменения на экране не произошло

в этот момент я не знал как действовать

быть может система чего то ждет или грузит

это никак не ясно

кстати, по поводу config has been changed

как можно сделать так, чтобы по одному из MO мне эти письма не летели?

а то бляха-муха при каждом перестроении ацл прилетают :)

config diff filter

rfr hfp lkz 'njuj bpj,htkb

как раз для этого изобрели

круто

надо найти

пируль это

примерв правда дать не могу

а, я думал штатные средства

ну штатные средства как бы

но пируль то тебе писать :)

ох. всё же придётся мне познать, что это за чудо

пируль ?

ну

дык все ка кобычно просто :)

кусок кода на питоне

это уже не просто

на входе дифф на выходе дифф без строк которые надо отправлять тебе.

если выход пустой слаться ничего не будет

так, а настраивается хотя бы это где?

полазил, не нашёл

main -> setup -> pyrule

там оно пишется

а, оно централизованно в одном месте

потом в свойстввах MO привяязывается к железяке

интерфейс IConfigDiffFilter

dvolodin, у тя есть право менять топик ?

их же можно тестить как-то отдельно?

да

прям качай pycharm и делай функцию

dvolodin, надо туда http://wombat.org.ua/AByteOfPython/frontpage.html добавить

ой

куда качать, откуда качать?

pycharm это ide для разработки на питоне

очень клевая и новичкам сильно помогает

а есть какая-то дока по написанию пирулей?

откуда берётся инпут там, и т.д.

что доступно

какой-то шаблон что ли

ой. там же встроенные есть

был.

шас не могу найти

Unbeerab1e, а ссылка чуть выше для тебя как раз :)

freeseacher, ну я уже открыл, да

но для пирулей же всё равно специфика ноковская нужна

неа

ну как неа. вот у меня чистое поле редактора. из него я не узнаю, что нужно написать @pyrule

из специфики надо что бы перед функцией была строка @pyrule

и все

ну вот

дальше во что мне поступает инпут

откуда его читать

или это уже нужно интерфейс читать

соответствующий

он поступает тебе как кусок текста

ну мне же нужно к нему как-то обратиться

он мне поступает в виде какого-то параметра функции?

я про эти мелочи

буду сейчас сравнивать готовые пирули встроенные с их интерфейсами, чтобы уловить взаимосвязь

ipam поломалсо немного... трейсит, когда тыкаешь на любой адрес

http://pastebin.com/5NJqnGy2

да, вижу

это в sa-managedobject поломалось

делай issue

заменил его пока на обычный комбобокс

freeseacher: проблема с аликами в том, что долго строится diff?

нужно на это время отображать что-то вроде loading?

чем бы мне тебе записать скринкаст

индикацию активного действия надо

у меня совсе мне быстрый сервер и по этому все может происходить долго.

впрочем сервер под нормальной нагрузкой будет вести себя так же

он быстрее выдирается, чем из mercurial'а, или медленнее?

у меня нет ответа на такой вопрос

"складывается впечатление" что медленно

ибо когда страница с дифом грузилась было понятно что грузится страница с дифом

а щас ничего не понятно :)

а объективно?

предлагаешь засечь ?

неплохо было бы

бенчмарки меня сильно интересуют

в новой интерфейсе на новой вкладке 7,65 секунды

а в старом?

на старом страницу увидел через 3,62 секунды

тот же самый конфиг

ok

железо разное?

только тут еще и список дифов

да

сильно разное

а полная загрузка страницы с боевого сервера сколько идет?

3,77

думаю это погрешность моей реакции

конфиг и там и там одинаковый

размер какой?

32793 строк на новом, 32817 на старом.

ok

будем тюнить

в принципе, результат объясним

hg cat тупо читает файл с файловой системы

GridVCS -- извлекает полный снимок из GridFS

как показывают бенчмарки того же nginx, раздача статики с GridFS примерно в 2 раза медленнее раздачи из файлов

teroni: попробуй посмотреть реализацию кнопок day/week/month

гребаный дслам, присылает сислог для падения линка как link down, и для поднятия динка тоже link down

dvolodin: ты в смысле диапазон дат пытаешься прописать ?

там суть в том, что проходится store с ревизиями и находится крайняя по интервалу времени

не сколько диапазон

а нахожу первое изменение в диапазоне

хотя, наверное, нужно первое изменение перед диапазоном

за день ... от кекущего момента?

то есть от вчера до сегодня?

кто знает SA-Run commands сохраняет текущий контекст команды ? можно например создать аксесс лист ?

vovan888, я не понял вопроса

а как можно запретить ip_discovery привозить 192.168.0.0/16 ?

никак, сам хотел бы

пробую через Run commands создать аксесс лист на хуавее

но скрипт висит минуту и ничего не выполняет

нет

смотри как

данные в store отсортированы по убыванию

если мы хотим изменения за день

то берем 0-ю запись в первом комбо

и бежим по store, пока дата ревизии не станет меньше текущего значения времени - 24h

и следующую

ну да

вот тут я явно на одну ревизию промахнулся

можешь алгоритм проверить и потестить

количество дней я задаю в свойствах кнопки, обработчик у них один

и там еще нужно при любых изменениях в комбо и при использовании стрелок отжимать кнопку выбора дня/месяца/года

vovan888, а он висит для любого набора команд, может попробовать по одной их добавлять, сначала одна команда, потом две, на какой заткнется, смотреть что при этой команде в живой консоли происходит

zi_home: висит на команде "acl 2009", видимо не опознает приглашение ком строки, хотя регексспы вроде правильные в профиле

vovan888: нужно полный debug-script смотреть

по фотографии тяжело

vovan888, ну да, я на это и намекал, чего-то с regexp-ами

а как запустить дебаг для run commands ?

скрипт Generic.commands ?

хотел бы я знать

добавить "{'commands': ['my command']}"

ну и сам профиль покажи

чето ошибка - ValueError: need more than 2 values to unpack

dvolodin, а за notification center можно сейчас поругаться, или подождать пока ты SA доделаешь

vovan888: просто commands

без указания профиля Generic, но с указанием имени устройства из НОКа.

vovan888: или так commands="['my command']"

он сам всосет правильный профиль, регэкспы из него и выполнит скрипт

dvolodin, кстати vovan888 очень хотел помочь с инвентори

12:02:49 - vovan888: висит точно на acl 2009

12:03:08 - vovan888: http://pastebin.com/SGBMQFYe

12:04:57 - vovan888: профиль Huawei.VRP

ну нормально вполне

dvolodin: это откель взял? t1 = t0 - button.diffRange * 86400 - число

народ, а кто-нибудь здесь с АДСЛ плотно работает, я плаваю в теории и не могу понять кое-что, вот дслам, в логах он записывает link down, а в сислог приходит loss of frame, а на другом дсламе приходит loss of frame, loss of signal и line is down

diffRange -- количество дней

перевожу в секунды

а, блин

store.getAt(0).get("ts")

Wed Sep 18 2013 18:58:31 GMT+0600 (Уральское время (зима))

store.getAt(1).get("ts")

Tue Sep 17 2013 14:02:11 GMT+0600 (Уральское время (зима))

store.getAt(0).get("ts")-store.getAt(1).get("ts")

104180740

там же в милисекундах вроде в js

один день... 100 лямов

плюсик поставь перед store

там дельта..

в ms?

я доки не читаю наверно да...

Интересно, почему сайт fias.nalog.ru до сих пор не заблокирован за пропаганду наркотиков?

и гомосексуализма

dvolodin: будем с ними адресную базу синхронизировать?

мы сейчас причесываем штук 5 разных адресных баз

разной степени запущенности

наших биллингистов бы туда потыкать, чтобы тоже причесали....

dvolodin: да elapsed = end - start; // time in milliseconds

ok

то есть минимум 86400 нужно переделать в 86400000

и поиск правильной ревизии проверить нужно

lexus-omsk: у нас масштабнее -- запускаем централизованный адресный реестр

пока - на макрорегион

dvolodin: к стати... день - неделя считается всетаки от текущего момента или от последней записи конфига?

должна считаться...

у тебя от последней записи..

86400000 - помогло..

или всетаки смотреть это как дельту от даты указанной в поле Version

нет

ufir, ты тут? кажется у вас есть дсламы

ты все ищешь как инвентори и ГИС в базе хранить?

я про это говорил

что надо считать от текущего открытого конфига

zi_home: неверное так

неверно

кнопка -- изменения за день

как она выглядит я считаю ее кнопка сравнение с те что было вчера/неделю/месяц назад

ну вот такое у меня видение

dvolodin, правильней будет у людей спросить, что они думают, как ты или как я

это опять вопрос юзабилити

простонапример в 90% случаев у меня будет открыт сегодняшний конфиг, и нажатие этой кнопки даст одинаковый эффект по моей и по твоей схеме

а оставшиеся 10% по моей схеме получат результат, а по твоей только мат

но это ты как бы сам смотри

я бы еще хитрее завернул...

день неделя месяц - это переключатель для стрелок... :-)

zi_home: наверное, можно и от базовой ревизии крутить, да

знаешь в чем засада

по твоей логике выходит, что будет браться день от последней ревизии

а не от текущего момента

или получится странное

если выбрана последняя ревизия, то день от текущего момента

если любая другая -- то день от нее

[v

хм

господа, я когда хочу узнать дифы за поеледнюю неделю хочу увидеть не конкретику по ревизиям

у меня есть железяки которые по полгода не менялись

я хочу ответить на вопрос "я ничего не пропустил?"

тоесть имею ввиду физическое время

а не в ревизиях

и ответ из разряда ничего не менялось полностью устроит

freeseacher: не получится...

эм почему ?

два диапазона

dvolodin, я про это и говорю, я открываю или у меня уже открыт какой-то конфиг, я нажимаю на эту кнопку и расчитываю на что? на то что он отсчитает 7 дней назад и сравнит с конфигом на 7 дней старше относительно того что у меня открыт

сначала ищем все которые были за неделю находим начало выборки находим конец. отображаем в виде дифа

стрелочки которые вы там еще прикрутили, лично для себя я не встречал для них use case

но это я, вам может быть и надо

стрелочки как раз логичны

просто пройтись по изменениям

zi_home, все просто надо найти когда "это" появилось

а по том по аккаунтингу найти "какая су.."

dvolodin, я не говорю что они не логичны, я говорю что они бесполезны, по крайней мере для меня

freeseacher, если выполнялся скрипт из нока, то в аккаунтинге ты только увидишь логин нока

так "не принято"

[15:03] teroni: день неделя месяц - это переключатель для стрелок...

teroni: нет уж

это немецкий диафильм будет

teroni, не логично

зато можно будет ходить по дням - и т.д.

как раз логично

когда много правок за день..... лучше листать день... чем все 10 правок

freeseacher, а ведь для твоей ситуации, нок должен не каждодневную копию записывать, а только когда были изменения тогда все нормально, так ведь раньше и было

он и хочет увидеть ответ - нету версий..

zi_home, у меня опрос раз в день

более частые себя не оправдали

у меня тоже

я про то что если за неделю не было изменений

а по эвентам?

то в ноке должна быть одна ревизия а не семь

она и есть одна - ей уже 3 месяца...

а нет, все правильно, нок и сейчас так ревизии записывает

16 число, 12 число, 10 число, но собирает и сверяет каждый день

dvolodin, тебе lexus-omsk уже говорил, но я повторю, зачем нок присылает письмо config changed, если изменений в конфиге не было и тело письма пустое, это плохо

он вообще всегда так присылает?

да, каждый день

по каждому конфигу

собрал

прислал

я только сегодня перешёл на эту ветку, поэтому думал, что это баг переезда в GridFS

а каждый день по нескольку сотен пустых писем - это совсем не айс

dvolodin: для чего в noc/sa/script/cli.py сделано # Refine adaprive pattern prompt ?

у меня в тесте с десяток железок, не сильно напрягает, но это баг, а с сотен тысяч, это нагибалово

щл

ok

нашел, да, косяк

пофиксил

vovan888: как для чего?

запускай commands как ./noc debug-script Huawei.VRP.commands …….

и все будет

ну или просто ./noc debug-script commands <железка>

я нашел где проблемя

в pattern_prompt в профиле

только вот для чего этот регексп меняется в процессе выполнения скрипта ?

проблема в том, что после выполнения команды acl 2009 приглашение меняется на приглашение вида [pe0-acl-basic-2009], тоесть добавляется через дефис текущий acl

dvolodin, а тебе не сложно вот то что ты сейчас написал про debug-script commands отразить в доке, а то http://kb.nocproject.org/display/DOC/noc+debug-script не изобилует подробностями

и после преобразования ( # Refine adaprive pattern prompt) этот регексп перестает матчить приглашение и висит ждет

ну.. у меня на каких-то железяках вообще не работали скрипты, из-за того, что в имени железки мои гавайцы поставили пробел

а у меня есть дефис в хостнейме, вот теперь думаю как регексп извратить

ufir, за такое стерелизовать надо

у меня почти везде дефисы. я все железяки именую так - префикс определяющий оборудование, город/населенный пункт - площадка

так что без дефисов мне никак ;)

дефис не проблема, у меня у всех железок 1-3 дефиса, и все ок

да, простого решения проблемы походу нет...

vovan888: да, понял про что ты

пока сделал issue в трекере, попробую придумать решение

-acl-basic-2009 это кто добавил?

huawei блок приписал сам?

hostname у него какой вообще

ага сам

hostname pe0

патчик в issue

помог!

проверьте кто-нибудь хуавеи с патчем

http://pastie.org/8335548

я немного уже поправил регэксп

в issue

dvolodin, так вот по поводу get_interfaces. какая там структура, я смотрю на вывод цисковского, и мне это взрывает мозг

допустим список физических портов, дескрипшен и админ статус я вытащу легко

а как сабы к ним привязываются?

xnj nfrjt ащкцфквштп штыефетсу

что такое forwarding instatce

для dslam он один

default

один из частных случаев fi -- VRF

такая дикая структура взрывает мне мозг, даже не представляю как это все формировать

mikevlz, ты тут?

тут есть кто-нибудь кто в питоне разбирается?

freeseacher, может быть ты?

сам разобрался

хотя вопросы остались

zi_home: структура как раз вполне прямолинейная

покажи, что получилось?

dvolodin, посмотри http://pastebin.com/gSADd6py

порнушка такая

нормально

думаю чего еще не хватает

концовка вполне достаточная

что на выходе получается?

ну на выходе чего-то получается, дискавери сработал, базу щаполнил

description = parse_table(phy_ports[1])[int(phy[0])-1][1] + " " + parse_table(phy_ports[1])[int(phy[0])-1][2]

это ты сгоряча

это да

покажи выход, проверим

и почитай PEP8

вывод чего?

вокруг бинарных операций - пробелы

вывод скрипта

что он тебе в итоге отдал

parse_table(phy_ports[1])

несколько раз у тебя вызывается

запомни результат что-ли

t = parse_table(phy_ports[1])

и дальше используй t

http://pastebin.com/w8CY6K0n

[int(phy[0])-1]

да, надо бы, я просто не про это думал, поэтому сделал как проще, я знаю что надо подчищать

это у тебя последняя запись должна быть?

[{'forwarding instance': 'default',

'forwarding_instance': 'default',

подчеркивание забыл

в смысле последняя

а, нет

и еще -- для профиля функция convert_interface_name определена?

нет наверное

чего там конвртировать, одни номера

номера или enet

да

да, у тебя DSLAM по ip управляется?

да

я не вижу ни одного адреса

ip в смысле?

там как бы нет интерфейса управления

есть ip и влан по которому он доступен

нет его у тебя

не вижу SVI с IP в выводе

ATM и бриджовые порты - все пучком

надо?

я помню про него, просто подумал, что он нафиг не нужен

надо, конечно

у тебя вкладка L3 пустая будет

и хрен с ней, у меня на них собственно только л2

лучше сделай

ладно, пририсую

потом в ipam в management сетях будет хоть видно, что адрес занят этой железкой

ты атм информацию покажешь где-нибудь

оптимизируй вызовы parse table

да, покажу

да, займусь

давай только решим где

либо вкладкой ATM

мне подумалось столбец просто подошел бы

в switchports и в л3

там не все будет

скрывать его автоматом если железка не атм

тот самый случай, когда у тебя несколько vpi/vci на порту

а так -- годный скрипт для начала

таблицы маков с него еще выдирать научись

как раз занимался, ты меня выдернул

ok

dvolodin, вот вопросик, как лучше сделать

> statistics mac

Port: 2

1 : 00:22:15:21:4b:e2

2 : 02:19:5b:c6:ac:6b

Port: Enet1

1 : 00:11:93:d5:33:c0

2 : 00:16:76:c7:f2:49

Enet с большой буквы

как ее уменьшить?

или это пофигу

dvolodin, и еще по регекспу

(?P<mac>[0-9a-z:]*)

то что в [] как-то можно заменить проще?

да, для DSL еще полезно будет по порту annex.a, annex.b и прочую ересь

s = "Enet"

s.lower()

на самом деле проще сделай

нужен convert_interface_name

и просто выдавай из скрипта то, что прочитал

оно само сконвертит

маки лови либо \S+

либо совсем уж

(?:[0-9a-f]{2}:){5}:[0-9a-f]{2}

думаешь это проще?

неа

я по \S+ делаю

попробую, сейчас подчищу остальное

\S+ сработал, да так красивее

dvolodin, имя для svi имеет какое-то значение?

никакого

ясно

stp на них есть?

теоретически да, но у нас не используется

это ему бы с топологией хорошо помогло

у нас они с сетью динамически никак не взаимодействуют, только ручная линковка

я не парюсь по этому поводу

dvolodin?

а

dvolodin, вопрос, это баг что под селектор не попадает МО при фильтрации по vc domain

если в домене не вся железка, а только 1 интерфейс

хм

пиши issue

решение, правда, будет совсем чудовищное

issue сделаю

dvolodin, есть функция для конвертации маски? 255.255.255.0 в /24

угу

lib/ip.py

IPv4.netmask_to_len()

как бы еще строку в ip преобразовать

какою строку?

a = "255.255.0.0"

из вывода команды у меня на руках только строка

а какой там может быть ip?

в смысле?

> ip show

interface ip netmask

--------- --------------- ---------------

Ethernet 10.0.0.82 255.255.255.0

default gateway: 10.0.0.1

вот и все что есть

а

тебе нужно 10.0.0.82/24 ?

ну не мне, а ноку

я бы и так влил, если он схавает

IPv4("10.0.0.82", netmask="255.255.255.0").prefix

ммм, сейчас еще одна дикость родится

dvolodin, такая тема годится? http://pastebin.com/QH8MDqLA

да

ok

dvolodin, вот полностью http://pastebin.com/5HMwQpb0, если ок, завтра с тушенкой к issue приложу

r = [{"forwarding instance" : "default",

forwarding_instance

или можно вообще его убрать и оставить только interfaces

ok, уберу

ладно, пойду я