nocproject.org

всем привет

ку

dvolodin: Дмитрий, подскажи, как увеличить таки время ожидания отклика устройства в скрипте? Я все со скриптом get_fqdn для Brocade.IronWare маюсь...

ну или другой знающий пусть подскажет

См. sa/profiles/DLink/DxS/get_config.py

Строка 18

name = "Brocade.IronWare.get_fqdn"

implements = [IGetFQDN]

TIMEOUT = 900

не помогает :(

перезапускал нок?

хм. Поставь на вскидку 9000

дебаг-скрипту не надо перезапускать, я им тестирую

не уверен

проверил на опыте - поправил скрипт - валится, безе перезапуска еще поправил - получил в дебаг-скрипт нужное, рестартанул нок

там именно команда сама долго выполняется ?

поставил 9000, рестартанул - closing stale socket

Или нужно просто подождать какое-то время после выполнения команды?

сложно сказать. Ходить туда приходится по ssh, т.к. телнет не может договориться почему-то. Пробовал сам заходить с той же машины на этот шассик проблемный. без разницы протокол - ответ выдается сразу, сразу заним промт. То есть не больше секунды.

Если нужно просто подождать какое-то время, то попробуй что-то типа этого: time.sleep(5)

а по дебаг-скрипту - между командой и результатом куча времени проходит. После результата еще куча времени до промта(даже на тех шассях, где все-такие успеваем получить промт)

10:51:37,404 - отправлена команда. послан \r\n

10:52:00,874 - в дебаг-логе первый ответ. Ответ сразу по всей кманде(там две строки - хостнейм и домен)

10:52:31,192 - закрытие висящего сокета.

таймаут 9000 стоит, а сокет закрывается через минут. И чихал он на таймаут...

через минуту

попробуй все-таки через telnet. Возможно ssh сильно нагружает процессор.

Для доработки telnet обращайся к dvolodin

telnet negotiation покажи

поправить надо в любом случае

http://pastebin.com/rkKFTwip

да все нормально там

господа скриптик для старта нока http://pastie.org/private/zfeamwd998fmakasvfx9wg

как лучше сделать stop в размышлениях.

может и нормально, только вот оно прибивает сокет

логин скармливает, приглашения на пароль ждет минуту, убивает сокет

User Access Verification

Please Enter Login Name: user

Please Enter Password:

User login successful.

это телнетом если лезть

привет

Dmitry1: я тебе в NOC-631 ответил, нужно что-то еще от меня?

подправлю.

Убери из get_interface_status переменную "adminstatus" и переделай тушенку

Я потом вручную ее поредактирую

Dmitry1, глянь на стартуп скрипт

где?

давай сравним и добъем. мне для фрехи тоже пригодился бы

хех

чут ьвыше от меня

Это под какую систему? Под FreeBSD отлично работает штатный скрипт.

Если под какой-то хитрый дистрибутив линукса - закиним в "share"

это под хитрый дебиан

штатный скрипт бывает не убивает нок.

да, иногда в дебиане когда рестарт делаю - не убивает, а старт / стоп обычно отрабатывает нормально

plhfcnt

добрый день

такой вот глюк/непонятка с дискавери

адреса определяются и внужный врф и в дефолтный

ну и еще точно глюк, в ДНС файл эти адреса пишутся дважды

Dmitry1: тушенку пересобрать для get_interface_status ?

да

И пообзывай файлики нормально. Времени потерял много, пока их переименовывал.

а как нормально?

lexus-omsk: лол, у меня в restart прописан sleep 1 :)

ага

прописал и это тоже.

а это - в opensuse для status: /sbin/checkproc -p $PIDDIR/noc-launcher.pid /usr/bin/python

нок у меня рестартует раз в 3 часа. забадался ловить уже. по 3-4 нока за раз запущено. память капут. почтовая очередь капут.

а зачем его рестартить ?

иначе выжирает все сосединения mongo

хм

у меня не бывает такого

аналогично - нет такого

там есть малоуловимый баг. который проявляется только у меня. дима пока его ловить не будет. а я в такие дебри не лезу

хотя я нок раз в день обновляю

а система какая ?

debian 64

там где то есть утечка соединений.

а я и не спорю :)

тока не знаю где его искать

монга какая и pymongo?

поломали ./scripts/about

http://pastie.org/private/btfvisnvqwisgo3o9n4ylg

где поломали-то?

dvolodin, http://stackoverflow.com/questions/4814970/subprocess-check-output-doesnt-seem-to-exist-python-2-6-5

в питоне 2,6 нет функци которая используется в нем

Dmitry1: ответил

evyscr, есть идеи ?

монга 2.0.4, пимонго 2.1.1, суся x64 - полёт норамльный

обновляться вниз ?

даже не знаю...

дима вроде признавал системную граблю

но питон у меня таки 2.7

простите, пайтон.

в дебиане нет :(

нет нет. питон. я настаиваю :)

squeeze что ли?

ога

хм

откуда тогда такая монга?

от 10gen

брр

deb http://downloads-distro.mongodb.org/repo/debian-sysvinit dist 10gen

попробуй обwheezy'ться

авторы софта в большинстве случаев не умеют его паковать

страшно. наши сервачники от него волосы на жопе рвут

и вряд ли прогоняют все дистрибутивные тесты

а чо, виртуалок нема?

:))) "донема"

просто на тестовом ноке ошибка себя не провялет. ибо там нет боевого железа.

а на боевой инсталяции эксперементировать страшно :)

хм

нее evyscr оно меня не настолько анноит что бы перекопать все.

объяви maintenance day, заведи на это время всё на тестовую.

:) да понятно это все. нихачу.

тем более дима говорит знает про утечку.

господа а по json-у с ноком кто нить общается ?

хочу рыбу скрипта для общения с ноком на питоне. а то urllib будит во мне зверя. а requests с собой таскать не хочется

freeseacher: нужна либа для клиента NOC ? :)

неа. нужен код на батарейках.

по хорошему -- python, php, perl-клиенты нужны

заточенные под NOC

я боюсь слова клиенты.

Одним из аргументов перехода на ExtJS был тот, что клиент ExtJS получает от сервера данные в формате JSON.

хотелось бы скрипта наколенного да.

Т.е. часть серверных скриптов уже отдают данные в формате JSON

ага

Это справедливо для VC. Больше у нас никто не умеет ExtJS

IPAM

он умеет json

и я сильно боюсь перехода на EXTJS в IPAM

вплодь до форка.

Откуда? Зайди в его отчеты. Ты хоть один на ExtJS видишь?

:)

freeseacher, а вдруг будет лучше?

без дизайнера ?

не верю.

текущий тоже без дизайнера сделали

текущий делали дизайнеры из djando-admin. а дима впиливал фичи.

на EXT же целиком надо рисовать. шаблонов по факту нет.

Я пока загруз в SA+FM. Один добрый человек прислал километровую простынь ивентов без форматирования.

freeseacher, можно для начала просто попробовать скопировать

dvolodin, будет ли возможность выделять и копировать содержимое ячеек прямо в основной таблице, не переходя в редактирование?

это относится ко всем новым приложениям, а vc в первую очередь

Добавил кучу правил в FM отлавливайте глюки

Dmitry1: эт в меня ща камнем кинул? :D

Dmitry1, NOC-258,260,261,263,264

и тд

mikevlz|2: да. несколько часов потратил на форматирование

чувствую себя плохим парнем :D

zi_rus: Погодь. сейчас разгребусь со своими TODO

зато теперь есть уверенность, что если снесу монгу - меньше придется восстанавливать правилов

Надо новые классы посоздавать. А на основе всего одного ивента это стремно делать.

mikevlz|2: Я там еще и попеределывал кучу.

если будет правильно классифицироваться - это хорошо

у меня еще ругань на мультикаст в непонятно куда класифицировать, и так, по мелочи появляется

Eng126-cc3550-1-1 Current Config Changes from 3 months to около 1 месяца

как бы это понять...)

dvolodin, помнишь, ты делал чтобы в vc.vc когда применяешь фильтр, тебя кидало на первую страницу? можно сделать чтобы кидало ТОЛЬКО в этом случае, а то зайдешь во влан, ничего не сделаешь, возвращаешься и тебя опять на первую кидает

это как?

это так, открывашь любую страницу, берешь первый попавшийся влан, заходишь в режим редактирования, копируешь дескрипшен (да можно вообще ничего не делать), жмешь close, и ты опять на первой странице

mikevlz|2: Для мультикаст штормов у нас есть класс

не, у меня бывает ругань в духе "у миня на интерфейсе igmp v2, а прилетело igmp v3, че за хня?"

О как!

Кинь, что тебе присылает, а я создам класс

Чем больше будуте присылать, тем более точно сможем классифицировать события и находить проблему

пофиксил ./scripts/about для python 2.5/2.6

офигенный коммит-лог

офигенный коммит :)

некоторые проекты из коммит-логов changelog'и генерируют.

evyscr: удобнее все-таки через issue

А что означает:

%./scripts/about

Не доверяем файлу /usr/local/noc/.hg/hgrc от недоверенного пользователя root, группа wheel

гг

ну не доверяем мы ему :)

это hg пишет

dvolodin: в коммит-логе также принято указывать bug number

кто-нибудь завел issue? :)

Про недоверие ?

пгастите, что вгываюсь...

решили начать управлять ДНСом. Такая незадача - стандартный порт на SSH возвращать не хочется. Как обойти?

lsnat ?

Dmitry1: встречу в очередной раз такое уведомление - скину

эммм...

mikevlz|2, в параметрах MO же есть порт

_4ePTeHok: ДНС-сервер в МО не вписывается :)

mikevlz|2: Кидай все, что находишь - потом разгребем

или для управления днс с другого места параметры берутся

с другого, своего отдельного

тогда актуально

mikevlz|2, так в настроках сервера не получается прописать нужный порт?

там где провиз идет

_4ePTeHok: там можно строку полностью указать

%(vcs_path)s push --remotecmd /usr/local/bin/hg ssh://noc@%(ip)s//etc/namedb/autozones/

да

ну какбе указал. ssh://noc@%(ip)s/:port/path не прав?

аааа

там флаги vcs-а своего надо указать...

вроде вспомнил

dvolodin, увидел где в vc.vc проблема?

_4ePTeHok: ssh://[user@]host[:port]/[path][#revision]

агу. я просто DNS еще не использую

таки вот так урл указывается. Только вот нифига у мну не появляется в autozones

кто хочет потестировать производительность stomp-сервера

как дебажить?

mikevlz|2, я для дебага выполнял эту команду прямо с консоли

у меня была проблема что он пароль спрашивал

потом победил

dvolodin, я готов обновиться если это ничего не сломает

я алень :)

zi_rus: а из какого каталога делал?

/var/repo/dns

там где .hg по днс лежат

*лежит

remote: abort: there is no Mercurial repository here (.hg not found)!

abort: no suitable response from remote hg!

hg init в автозонах делал?

угу

.hg not found - тогда почему это?

[root@ns8 /etc/namedb/autozones]# ls -lh

total 8

drwxr-xr-x 3 noc noc 512B Aug 27 15:46 .hg

drwxr-xr-x 2 bind noc 512B Aug 27 15:34 slave

ЧЯДНТ?

хз

может path неправильно в команде указал?

твою медь...

<remote-hg-path> - это чо?

/etc/namedb/autozones/

я а я указал путь к hg :)

а нет

все правильно

путь к hg

тогда все правильно...

покажи команду какую вводишь

hg push --remotecmd /usr/local/bin/hg ssh://noc@10.200.200.19:2223/var/named/etc/namedb/autozones/

путь пробовал к /etc/namedb/autozones - пабарабану =(

/etc/namedb/autozones - это /var/named/etc/namedb/autozones/ ?

eue

угу

а там аутентификацию по ключам настраивать надо?)

да

эх..

это больно только в первый раз :)

ls -lh /var/named/etc/namedb/autozones/ - точно .hg есть?

[root@ns8 /etc/namedb/autozones]# ls -lh /var/named/etc/namedb/autozones/

total 8

drwxr-xr-x 3 noc noc 512B Aug 27 15:46 .hg

drwxr-xr-x 2 bind noc 512B Aug 27 15:34 slave

ну я не знаю

и я не знаю :(

раньше делал, получалось...

как именно - история умалчивает...

а юзеру нок туда есть доступ

?

su noc

cd /var/named/etc/namedb/autozones/

ну кагбЭ он хозяин самого каталога, его подкаталогов, кроме slave

самого каталога да

а пути до него?

у меня было такое, нок хозяин, но добраться до папки не может

zi_rus: закоммитил ./scripts/stomp-benchmark

а у тебя вон какой путь

прям как в россии)

хозяин, но не получишь, ибо бюрократия)

ну если пытаться в каждый каталог зайти - да, не получит доступ. Если сразу к каталогу лезть - получит

тока вот нахрена в каталоги уровнем выше лезть, если путь прямой?

а права у юзера нока на удаленном хоте к самому hg есть?

хотя ошибка наверно по другому бы выглядела.

dvolodin, обновился, куда смотреть?

./scripts/noc-stomp.py start

потом запускаешь consumer'а

./scripts/stomp-test -c /tmp/s1.out

потом параллельно запускаешь генератор

./scripts/stomp-test -p 10000

./scripts/stomp-test: Command not found.

stomp-bench

./scripts/stomp-bench -p 10000

потом:

./scripts/stomp-bench -p 10000 -s

consumer 2 раза выдаст статистику

ладня, я домой

от нока запускать бенч?

или рута хватит?

dvolodin, в любом случае http://pastebin.com/DpiwZ0z5

от нока

тоже самое

ok

новый nbsocket, похоже, надо тащить

File "/usr/local/noc/lib/stomp/client.py", line 31, in __init__

self.factory = factory or SocketFactory(write_delay=False)

TypeError: __init__() got an unexpected keyword argument 'write_delay

чего-то недокоммитил

закоммитил новый nbsocket

kevent и select должны работать нормально

если что-то не работает, то polling_method = select в noc.conf

epoll и poll надо подебажить

с богом

=)) самое врмя под конец дня)

_4ePTeHok: кто же продуктив апдейтит под конец дня? :)

я :)

зато посмотрите, какая красота вышла :)

и сравните с twisted

да я давно не апдейтился вообще) как начал писать get_interfaces..

обычно в пятницу вечером самые главные коммиты делаются

а для чего планируется stomp у нас?

STOMP-Specialized Training of Military Parents

гг

:)

dvolodin, ERROR:root:[STOMPClientSocket(0x80252ec50)] Connection refused

1. обмен сообщениями между компонентами

даже сайт созвучный

2. notifications

3. DNS provisioning

4. транспорт для нового performance management

dvolodin: http://pastebin.com/HYT3sN7s

5. серверная сторона push

Dmitry1, zi_rus вытаскивайте еще фиксы

6. обмен между классификатором и коррелятором

в общем -- во многих местах

короче полная перестройка механизма взаимодействия)

эх, а когда же инвентори..

не перестройка, добавление общего механизма

которого нет пока

%./scripts/noc-stomp.py start

%./scripts/stomp-bench -p 10000

%./scripts/stomp-bench -p 10000 -s

%

Что я должен был увидеть?

=)

не так пустил

смотри

%./scripts/stomp-bench -c /tmp/s1.csv

и параллельно ему -- с -p

ты сообщения генерируешь, но нигде не потребляешь

Performance: 10000 messages in 8.27478694916 secs (1208.49032869msg/sec)

ага

а с -s ?

xtuj relf&

чего? куда?

./scripts/stomp-bench -p 10000 -s

да

ну вот

polling method какой?

select

там две строки выдвает, давай обе

Synchronous: True Polling: SelectPoller

Performance: 10000 messages in 8.27478694916 secs (1208.49032869msg/sec)

Synchronous: False Polling: KEventPoller

Performance: 10000 messages in 7.04132986069 secs (1420.18627132msg/sec)

так

давай без -ы

-s

без ы? :)

Synchronous: False Polling: SelectPoller

Performance: 10000 messages in 1.78783106804 secs (5593.36963026msg/sec)

ок

ну чудно совсем

linux?

а как оно вам выводит этот самый Performance: 10000 messages in

8.3-RELEASE FreeBSD

без пуллинга шустрее в 4 раза?)

У меня молчит как партизан

нет, без синхронизации

а, тьфу, точно

с синхронизацией он ждет RECEIPT от сервера на каждый SEND

%./scripts/stomp-bench -c /tmp/s1.csv

STOP: 10000 messages in 3.18555784225 secs (3139.16761057msg/sec)

STOP: 10000 messages in 11.8421218395 secs (844.443262408msg/sec)

Ничего не менял

проапдейться

dvolodin, у меня был поллер poll я его сейчас на select поставил, может лучше kevent сделать?

разлет в 4 раза

у тебя фря?

да

да

да, делай kevent

на макосе но нормально работает

dvolodin, как остановить ./scripts/stomp-bench -c /tmp/s1.csv

cnjbn ctqxfc j,yjdkznmcz &

^Z

kill %

только kill от рута

стоит сейчас обновляться ?

misak: пока нет, надо на разных платформах поллинг опробовать

Dmitry1: разлет это нормально

у меня пятничная сборка

в асинхронном случае producer тупо льет сообщения на сервер

в синхронном - на каждый SEND фрейм он ждет ответ в виде RECEIPT

естественно, что это медленнее

5k сообщений - это очень хорошо

zi_rus: попробуй запустить 2 consumer'а и один producer

dvolodin? jcnfyjdrf jxtym ytelj,yfz

*остановка очень неудобная

root@noc /opt/noc# killall python

root@noc /opt/noc# ps aux | grep python

root 19562 0.0 1.0 100112 41268 ?? I 5:12PM 0:05.36 /usr/local/bin/python ./scripts/noc-activator.py launch -c etc/noc-activator.conf -i 0

noc 55112 0.0 1.2 121116 50864 ?? I 3Aug12 0:02.43 /usr/local/bin/python ./scripts/noc-notifier.py launch -c etc/noc-notifier.conf -i 0

noc 55686 0.0 1.2 121116 50864 ?? I 3Aug12 0:02.62 /usr/local/bin/python ./scripts/noc-notifier.py launch -c etc/noc-notifier.conf -i 0

zi_rus: это нормально для теста

root 19645 0.0 0.4 55352 16120 4 T 5:13PM 0:01.30 python ./scripts/stomp-bench -c /tmp/s1.csv

root 20401 0.0 0.3 51256 12564 4 T 5:20PM 0:00.16 python ./scripts/stomp-bench -c /tmp/s1.csv

оно вообще не выключается

по пидам поприбивай)

у меня еще нотифиры висят

и активатор почему-то не прибился

root@noc /opt/noc# kill 19562

root@noc /opt/noc# ps aux | grep python

root 19562 0.0 1.0 100112 41268 ?? I 5:12PM 0:05.36 /usr/local/bin/python ./scripts/noc-activator.py launch -c etc/noc-activator.conf -i 0

_4ePTeHok, не хочет умирать

в syscall'е?

dvolodin, ась?

какое живучее

процесс в syscall'е висит, говорю

kill -9 ему сделай

ок

dvolodin, сделал пулер kevent, опять рефьюзды иду

ERROR:root:[STOMPClientSocket(0x80252eb50)] Connection refused

он у демон поднялся?

в лог ему глянь

сделал селект и нет проблем

логи смотри

можно пустить демона как ./scripts/noc-stomp.py -f start

dvolodin, в логах http://pastebin.com/w3phj9tQ

ой как забавно :)

сокет в listen у него может быть только write?

ты у меня спрашиваешь? :)

включи дебаг ему

давай полный лог

ладно, завтра пофиксим

мне нужны будут еще линуксоиды с poll/epoll

хотя poll можно и на фре врубить

попробуйте, если что - кидайте traceback'и