nocproject.org

tardoe, hi

you should use put instead of post.

post is only for create action not for an update

I am creating a new VRF record

but I'll try that and let you know!

oh, i see

so can you try to do it with your browser ? look at browser debug console and copy cUrl link

and doing a PUT to /ip/vrf gives a 404 anyway

/ip/vrf/

i'm using the Advanced REST client plugin within Chrome

ok, doing a POST gives an application exception

can you put in on pastie?

sure

http://pastie.org/private/5xfitrc0uwihx5sdm5prxa

hm

heres the request

http://pastie.org/private/a42u7jtoai00wfgmsgag

my JSON might be a bit invalid...

{"name":"my","state":2,"vrf_group":3,"project":0,"rd":"44:3","afi_ipv4":true,"afi_ipv6":false,"description":"","tt":0,"tags":[],"style":0,"allocated_till":null}

yeah, that should do it

gimme a sec

that json looks good, yours can't be deserialized

does null need to be "null"

?

you're example worked

it was my dodgy JSON

,,

доброе

dvolodin, почему у меня inv.interfaces не работает? выбираю любой мо, ничего не показывает, только через sa mo получается интерфейсы посмотреть

сейчас обновился

у меня показывает

как править конфиг файлы через веб морду?

Если смотреть конфиг через веб, то там больше параметров, чем если через консольку, почему так?

и после внесения изменений, нужно перезапускать нок?

речь идет о конфиге нока?

i_a, да надо перезапускать

больше потому что еще показываются дефолты

из файлов .defaults

да конфиге нока

т.е. если через консольку править, то нужно ковырять еще и .drfaults

а чере веб менять можно?

да

даже нужно

дефолтны ковырять не надо

ммм а мне чет не дает

проверь права

etc должна принадлежать ноку

/opt/noc должна принадлежаться ноку

да ну

вот в тему вчерашних графиков..

Через веб глянул на конфиг pmwriter и увидел там

Udp listenet false

а править этот false не даёт...

пойду права смотреть

zi_rus у меня такая же шляпа была, пока вчера не обновился

кстати есть у кого идеи, почему еще пробы могут не писаться? pmwriter.log пустой, трафика на lo нет

поменял юреза для opt/noc/etc но править не даёт

походу я не умею читать названия колонок

-\

я ка краз писал комментарий на эту тему

править можно только одну из двух колонок :)

нашел еще такую строчку в логе pmwritera

[noc.lib.perf] Stats are disabled

че эт он дисаблед... где его включить?

в конфиге же :)

э(

Pmwritera?

да

зовется он enable_reports

очень очевидно ))

ну если это какие то репорты, то для создания графиков он вряд ли нужен...

а в PM/Setup/Metrics по прежнему пусто

а в монге появились ts.* коллекции ?

куда смотреть?

в монгу же

mongo noc

с ней пока не знаком

show colelctions

uncaught exception: don't know how to show [colelctions]

наверное collections

noc.ts.metrics

noc.ts.p2015.p02.p11

noc.ts.p2015.p02.p12

не пустые?

а как проверить?

у меня вообще только noc.ts.metrics

там какая-то команда в монге размер показывает

я не помню

.stats()

> noc.ts.metrics.stats() Thu Feb 12 10:39:34 ReferenceError: noc is not defined (shell):1

db.noc.....

"ns" : "noc.noc.ts.metrics", "count" : 0, "size" : 0,

анологично

Night_Snake походу мы с тобой без графиков останемся ))

еще Dmitry1. Счастливчики

я буду ждать новой реализации PM

i_a: у тебя же есть партиции за два дня

новой реализации pm не будет

dvolodin: Дим. Я два дня промучился. Не смог построить ни одного графика.Вывод - не работает

https://www.evernote.com/l/ADnYqx9uZG1G8JcG2XSUgZzeAIFlMgibM-8

freeseacher помучался 5 минут и построил

Пока не будет так, чтобы _обычный_ человек, без подсказок со стороны смог интуитивно построить графики - оно не рабочее

это не система для домохозяек

обычный человек графики не строит

это не выход супа из скороварки

dvolodin, нормальной доки все равно нет, моя статья только наводка

На cacti и mtrg обычный человек без напряга построит графики

На cacti я смог, на mrtg смог. На NOC не смог

на миллионе интерфейсов

dvolodin я очень рад за него. А у нас вот не получается. Вывод - либо есть тайное знание, либо что-то поломали

:)

Night_Snake: чего там может не получиться-то/

?

результат, вестимо

Метрик нет

у меня снимаются данные, пишутся в базу, а метрик нету

pmwriter запущен, порты слушает?

запущен. слушает

я из трёх мест информацию черпал, чтобы настроить

пишет в базу

а метрик нету

проба конфиг получает?

% ./noc probeconfig --list | grep CONFIG | wc -l

167

%

сама проба получает?

юзера ей настроили?

юзера настроили

./noc probeconfig --list | grep CONFIG | wc -l выдает 5к проб

2015-02-11 10:46:07,968 [noc.pm.probe.task] [cca6d5e0-00a7-573c-8182-7e256c5b7d31] Running

2015-02-11 10:46:07,968 [noc.pm.probe.io.base] SNMP GET [10.116.0.2] {'Interface | Discards | In': '1.3.6.1.2.1.2.2.1.13.1', 'Interface | Discards | Out': '1.3.6.1.2.1.2.2.1.19.1'}

во-во, такая ж фигня

2015-02-11 11:11:53,139 [noc-pmwriter] Register metric object.cat6509.interface.gi_2-23.interface.load.in 12126539.19 1423645913.0

2015-02-11 11:11:53,139 [noc-pmwriter] Register metric object.cat6509.interface.gi_2-23.interface.load.out 296452.741405 1423645913.0

хорошо

тока noc-probe.log пустой, а pmwriter говорит тока что запустился

в pm > setup > metrics метрики видны?

нету метрик

нету метрик

нету

Дим, я вчера только узнал, что оказывается нужно не только в web что-то клацать, а и в конфигах.

Точно уверен, что обычный человек сможет это настроить без общения с разработчиками?

обычному человеку там делать нечего

не согласен

не, ну логично же

нок - маргинальная поделка

+3.1415326

ну у меня тоже есть поделки, которые ползают по коммутаторам, заливают конфиги, строят графики..

короче нок - это для упоротых ноков.

ОК, проехали. Делать-то что?

> db.noc.ts.metrics.count()

что показывает?

"ns" : "noc.noc.ts.metrics", "count" : 0, "size" : 0,

мы по кругу ходим?

а коллекции вида ts.p2015.... есть?

неа

что-то вы мне голову морочаете

tcpdump на портах pmwriter'а что показывает?

ничего не показывает

Night_Snake, у тебя проба на том же сервере что и весь нок? или на выносе?

на том же

в noc-probe.conf в секции autoconf должен быть прописан правильный URL NOC'а

и ноковский юзер, которые имеет соответсвующий доступ

проба получает конфиг по http

вот это имя пробы должно совпадать с именем пробы в настройках

url верный. юзеру аж супера дал, дабы не было затыка с правами

hi there

https://kb.nocproject.org/display/DOC/Logging is empty :|

чем логи ротейтить? системой?

Night_Snake: имя пробы какое?

у меня noc.ts.p2015.p02.p11

"count" : 3,

"size" : 132,

> db.noc.ts.p2015.p02.p12.stats()

{

"ns" : "noc.noc.ts.p2015.p02.p12",

"count" : 5,

"size" : 220,

тспдамп на 2003 порту показывает трафик

эм. default?

ты спрашиваешь или утверждаешь?

zi_rus в PM->Probes тока default

других нету

а в конфиге?

в котором?

а их много?

noc-probe.conf

тоже default

ну норм

ты бы дебаг включил в пробе и врайтере

чтобы посмотреть

это в смысле где секция дебаг, или что?

где уровень логирования настраивается

etc/noc-probe.conf тут?

там все вкрючать? Manhole timing reports

[main]

logfile = /var/log/noc/noc-pmwriter.log

loglevel = info

дык стоит

поменять на debug

да

http://pastebin.com/knZazp7N

noc-probe пустой

Night_Snake, плохо что пустой

su noc

./scripts/noc-probe -f start

./scripts/noc-probe.py -f start

http://pastebin.com/azy3frH5

ну а почему лог пустой?

дык а я почем знаю?

права проверь

и пути

putty

-rw-r--r-- 1 noc root 0 Feb 12 11:41 noc-probe.log

logfile = /srv/noc/log/noc-probe.log

присоединяюсь к тем, у кого не работает pm) не может стянуть конфиг - 403 форбидден. Пользователя создал и в конфиге прописал

Как увидел 403 ? в логе ?

в noc-probe.log

интересно, что у меня пользователю noc не присвоено прав

а, он суперпользователь

TSergey, так сбее практика

но на запуске я тоже так сделал

что ыб с правами не париться

я вот запутался, проба конфиг тянет с сервера, который tornado? 8000 порт

она должна тянуть его от туда где у тя noc-web

на pm.probe: config + read ?

он у тя за nginx ?

за апачем, но так как машинка та же, то апач можно и оботи... или нет?

я б не стал.

кстати, как с заглавной страницы kb.nocproject.org найти нужную заметку (которую zi_rus писал)?

zi_rus, у тя проба и писатель на одной машине предполагаются да ?

хочу ещё раз сверить, вдруг что сломал, когда пытался разобраться

403 обычно когда юзер не настроен и url. и проба стучится на 127.0.0.1:8000

хехе

нет

давайте по честному

пусть проба стучиться на 80

или 443

там с именами каналов

туда же где морда

ок, исправлю сейчас

ну так и прописано

freeseacher, дв

кстати, 127.0.0.1:8000 Это вроде как из .default

*да

раньше выносил

все работало

lexus-omsk, да. прописано

даже в два места научил писать

думаю dvolodin не прав.

проблем никаких

zi_rus, write_concern =2 ?

ya

отметь в статье плиз

о

2? а не 1?

у тя там написано хуй знает что это

а что это вообще за опция?

а это параметр как раз отвечающий за то на сколько писателей надо послать `обязательно`

А оно должно совпадать с количеством инстансов проб?

нет

с количеством хостов на которые надо послать

lexus-omsk: в поиске набери grafana

ок

повторюсь: как найти с заглавной страницы эту заметку? навигация замудрённая с этими пространствами, имхо

ок

lexus-omsk, согласен.

сайт надо переделать

lexus-omsk: или "пространства\блоги\" и слева "Как готовить новый Performance "

freeseacher, а ты случаем ен знаешь, если у меня настроено 5 писателей, а концерн задан 3 - как он выбирает какие из них?

я добавил тэг и проще найти по grafana или pm или probe

что за фраза при апргрейде сегодня? ожидаем снятия блокировки рабочий каталог /opt/noc удерживаемой 'noc

что делать?

и не апдейтит?

значит не удален *.pid в run каталоге

не апдейтит

бывает

у меня run в \srv\noc\run

в секции update noc-probe.conf что должно быть?

не докопировал .... 'noc:25999'

bee26: ну и проверь что процессов запущенных нет

zi_rus, я не знаю. когда писалось прдполагалась логика "оба"

тоднако теперь это не так от слова совсем

http://pastie.org/private/fenm9seais1wfcywlghna

lexus-omsk: 1. я написал не 127 а "внешний"

и с :80

пробовал и так тоже

lexus-omsk, 8000

проверь user

зайди под ним из вэб

или заставь nginx слушать на лупбеке

у меня через nginx

zi_rus у тебя в доке вообще без порта, т.е. подразумевается 80

про 8000 freeseacer сказал, что неправильно

lexus-omsk, локально у меня 8000, не знаю почему он говорит что неправильно, просто это будет мимо nginx напряму в noc-web

а если 80 - j 'nj xthtp тпштч

то это через nginx

могу скинуть рабочий костыльный вариант

и он должен слушать на этом порту

вот я о чём и писал выше... так и было 8000 и 127.0.0.1

[autoconf]

name = default

url = http://127.0.0.1:8000/

user = noc

lexus-omsk, ты хоть нетстатом глянь что у тебя происходит

может и не с портами дело

может ты в вебе не завел пул

какой пул?

проб

о

pm - setup - probes ?

я вначале настроил удалённые пробы для днс. остальное по доке подцепилось быстро

поэтому не через 8000

name - default, storage - default, выбран user

значит должно работать

2015-02-12 12:30:44,757 [tornado.access] 200 GET /pm/probe/default/3/config/?last=2015-02-12T12:25:41.735021 (127.0.0.1) 3041.12ms

в логах веба подобное есть?

расскажите, что такое проба, метрика и конфиг метрики

метрика --- данные?

конфиг метрики --- какие данные собирать?

метрика - это измеряемый параметр

вот кстати меня это тоже смутило, ни в апаче, ни noc-web - никаких упоминаний, что кого-то пинают по 403

кофиг метрики да

проба --- как и куда собирать?

проба это то что добывает метрики

демон сам

ага, проба это процесс

метрика --- данные

конфиг метрики соответственно чего собирать

ну а сторадж это очевидно

метрик сет?

набор метрик

а, это набор а не установка

оченно гут, теперь почти все понятно

сможешь доописать это в статью ?

и в tcpdump на Lo по 8000 порту глухо (если браузером не лазить в этот момент)

я начал свою, с примерами по монге

но конечно могу

lexus-omsk, плоху, че

zi_rus: не против? я добавлю термины в статью

добавляй, че

zi_rus: я кину в комментарий, а ты вставь в статью как считаешь нужным

в смысле

пиши в комменты, люди там и прочитают если че

ок

да, а дашбоард, это то, что умеет забирать данные и рисовать их

так?

да можно и прям в саму статью

вики же как бы

freeseacher, а он сможет отредактировать мою статью?

по идее да

freeseacher, а еще тогда

https://kb.nocproject.org/pages/viewpage.action?pageId=18382889

смотри, она в дереве сбоку засунулась не в то место

можешь ее подвинуть?

подвинул

хотя ты мог и сам

я не нашел

... -> move

а дашбоард, это то, что умеет забирать данные и рисовать их, так?

нет

панель управления?

https://translate.google.ru/?hl=ru&tab=wT#en/ru/dashboard

отливная доска? :)

наверное это типа монитор

ты не до того слова доебался

dvolodin, и таки есть возможность посмотреть список портов по которым были errors за последние сутки?

смотрите комментарий, если согласны, я это добавлю в начале статьи, или лучше zi_rus, там где посчитает нужным

https://kb.nocproject.org/pages/viewpage.action?pageId=17858564

zi_rus, видел кстати http://grafana.org/blog/2015/02/10/Grafana-2-Alpha-and-preview.html

теперь видел

TSergey, половина неправильно или некорректно

zi_rus, там есть экспорт

freeseacher, и сейчас есть

в pdf

а

а в png?

как я pdf в ворд вставлю?

ога

я бы на твоем месте в ворд вообще ничего не вставлял.

да, вижу

как бе не я выбираю

tex с принтом в pdf

у нас есть один файл отчета, и каждый заполняет свою часть

так что док

и я с этим ничего не поделаю

а с учетом что я совсем скоро собираюсь увольняться, мне вообще похер

По поводу PM, как заставить его дёргать пару Castom |SNMP | OID на железке?

Раньше было где IOD прописывать, теперь найти на могу...

metric config

freeseacher: "половина неправильно или некорректно" а ты говоришь вставить в статью :)

в metric config не вижу поля oid. Но хендлер noc.pm.probes.generic.snmp.get.probe.SNMPGetProbe и в Metrics выбрал Castom |SNMP | OID в поле Metric можно прописать oid. Оно?

кажись понял, что у меня не так: локальная специфика виновата, urllib видит в переменных прокси и лезет туда, и пофиг, что 127.0.0.1

Ошибка noc.pm.probes.generic.snmp.get.probe.SNMPGetProbe.get_oid говорит: Cannot get required variable 'oid'

xetle, тысячи их. это норм

Где прописывать OID для Custom |SNMP | OID

после включения в профайл некоторых дискавери внутри железки они стоят в состоянии дисаблед и файл хотя профиль и железка 100% рабочие. пока не нажал Рун - не запускались.

xetle, предполагается что сделать пробу для метрики долвольно не тривиально.

для этого надо делать пробу и указывать где она сгодиться

и все-таки интересно, где может быть косяк. Ладно бы я один такой счастливчик был. Нас же трое :(

https://www.evernote.com/shard/s57/sh/d8ab1f6e-646d-46f0-9706-d97494819cde/00816532089b33ef67fe7a35ca4b3156

тут есть подробности реализации

у меня тоже пропало это поле в Metric Configs, ранее при создании и выборе Custom SNMP появлялась формочка

freeseacher: подтверждаю слова t2me раньше было куда вставить oid в вебе для Custom |SNMP | OID вчера уже пропало...

freeseacher: "[v] сделать демку cubism" --- где такое?

TSergey, кубизм выпилили :)

ибо графана

И, да написать свой хендлер можно но тогда зачем функция noc.pm.probes.generic.snmp.get.probe.SNMPGetProbe

Откуда она oid параметр берёт???

"Probe: instance демона noc-pmprobe или любого коллектора graphite"

аааа, ну а что такое инстанс или коллектор...

пропала дня 3 назад, Дима сказал посмотрит

Ждём...

TSergey, коллектор это то что собирает метрики

инстанс это экземпляр коллетора

probe --- экземпляр собирателя метрик (демона noc-pmbrobe)

?

да

слово экземпляр из програмерского словарика

freeseacher, freeseacher --- а теперь?

https://kb.nocproject.org/pages/viewpage.action?pageId=17858564

уря, пофиксили Custom SNMP, формочка появилась.

Night_Snake Завились графики?

а с чего бы? "фары пинал, колеса протирал"

в смысле что по совету бывалых все должно работать

но не работает

у меня в проб.лог нету записей со словами tornado

цу--web.log

а не в там смотрю, в логе веба есть записи вида

2015-02-12 15:35:40,310 [tornado.access] 200 GET /pm/probe/default/0/config/?last=2015-02-12T15:30:40.198488 (127.0.0.1

дампом есть трафик на 2003

ну значит работает

во всех профилях нарисовал метрики

дык в PM/Setup/Metrics пусто

если работает до там должны быть записи???

zi_rus: ?

да

у меня есть

noc-probe.log

http://pastebin.com/AanfLEph

тут все нормально?

кстати, вопрос, почему все время обсуждается просто noc-probe а не noc-pmprobe

?

да

куда еще копнуть?

в землю

у тебя все собирается

и в базу кладется

я не знаю почему у тебя нет графиков

zi_rus: ясно, спасибо

freeseacher: нет идей ?

i_a, потому что noc-pmrpobe давно deprecated

я сейчас пока не могу помочь. быть может завтра

freeseacher: ok, буду ждать

А это нормально, что лаунчер постоянно пишет:

2015-02-12 15:58:37,647 [noc.main.launcher] Launching 2015-02-12 15:58:37,650 [noc.main.launcher] [noc-probe#0] Daemon started as PID 754 2015-02-12 15:58:38,652 [noc.main.launcher] [noc-probe#0] Terminated with status 1

нет не нормально

может потому и не пишет?

да

но странно почему -f start у тебя работало

причем ps ax показывает их аж 3

http://pastebin.com/3aSX6YCf

убей лишние

убей всех

а?

убей всех человеков

грохнул

сейчас висит один

5994 ? S 0:00 ./bin/python ./scripts/noc-probe.py start

СЛАВА РОБОТАМ!!!

Что самое забавное - я вижу метрики в настройках МО

коллеги, трабл!

обновлял нок

выдал ошибку

теперь не работает....

и апгрейд матюкается

в /srv/noc/log/upgrade.log ничего нет

а ошибку мы должны угадать? :)

)

куда выложить?

доходит до синхорнизации баз и там затыкается

Synchronizing database Traceback (most recent call last): File "manage.py", line 45, in <module> execute_from_command_line(sys.argv) File "/opt/noc/lib/python2.7/site-packages/django/core/management/__init__.py", line 443, in execute_from_command_line utility.execute() File "/opt/noc/lib/python2.7/site-packages/django/core/management/__init__.py", line 382, in execute self.fetch_command(subcommand).run_from_

я даж Metric set пересоздал для чистоты эксперимента. хрен там был. весь лаунчер засран перезапуском probe

File "/opt/noc/sa/models/__init__.py", line 14, in <module> from noc.sa.script import script_registry File "/opt/noc/sa/script/__init__.py", line 10, in <module> from script import Script, script_registry File "/opt/noc/sa/script/script.py", line 181 <<<<<<< working copy ^ SyntaxError: invalid syntax upgrade-user: : syncdb failed

Dubridze выложи уже на пасту

pastebin.org

да, лучше пастебин, там хоть форматирование какое сохранится

Night_Snake, запускай через -f start и из-под юзера нока, там точно будут ошибки

не могут не быть

или логи или пид не может записать

http://pastebin.com/y8Tqp22h

Dubridze, ты /opt/noc/sa/script/script.py - руками что ли правил? верни как было

hg revert sa/script/script.py

ничего руками не делал

как этот реверт запустить?

root@noc:/opt/noc# hg revert sa/script/script.p sa/script/script.p: no such file in rev b2515e1d0128 root@noc:/opt/noc#

py

py

py

py

py

py

py

py

О

сделал

просралось

кажется

запустил апгрейд опять

тоже самое

В Metrics по-прежнему пока нифига, но хотя бы в лог стал писат

<<<<<<< working copy - ну вот что это за строчка?

это неправильная строчка

ее не должно быть

откуда она у тебя

если я правильно понимаю она в этом файле

File "/opt/noc/sa/script/script.py", line 181

Короче картина маслом. В probe и pmwriter куча всякого

в FM сообщения в духе Out of Thresholds

тока в метриксах по-прежнему нет нихрена0

Night_Snake, таки запустилось у тебя или чего?

ну похоже что да

я грохнул pid

ты кстати обновись, я видел коммиты от dvolodin что он там что-то правил сегодня

грохнул логи

грохнул вообще все что было похоже на noc

и перезапустил

так вот, что писать в трешолдах, чтобы он не срал в FM?

ничего не писать

а ты что-то написал?

нет

ну должно быть норм

посмотри probeconfig

Night_Snake, Thresholds : -/-/-/- так выглядит когда там ничего

./noc probeconfig -l

ага

ога что?

не должно тогда гадить out of thresholds

у меня норм

гадит только при превышении тех порогов что я указал

перезапустил, отпустило вроде

вот он, живительный ребут

дооо

тока один хер в метриксах нет ничего ЖВ

починил

левые строчки были в файле

а вот это нормльно

# tail -f /var/log/noc/noc-probe.log

2015-02-12 17:45:45,057 [noc.pm.probes.generic.network.snmp_interface] [ab5cdc44-8e31-557f-b054-5f1b3224435d] Disabling missed oid None

2015-02-12 17:45:45,057 [noc.pm.probes.generic.network.snmp_interface] [ab5cdc44-8e31-557f-b054-5f1b3224435d] Disabling missed oid None

2015-02-12 17:45:57,679 [noc.pm.probes.generic.network.snmp_interface] [27f2673b-dc1b-5118-952f-72215d9ff87b] Disabling missed oid None

да

у меня тоже

надо разбираться почему они возникли

но это нормально

Night_Snake, ну я вообще не знаю что у вас происходит, должны быть метрики. то что вас уже трое таких, наводит на мысли что кто-то что-то сломал

посмотри в вебконсоль

может там ошибки валятся

и метрики есть просто не показываются

ну вот http://pastebin.com/anmXGWSK собственно

первый Disabling missed oid None примерно понятно похоже, Se 0/0 ему не нравица

похоже все мои связанны именно с Serial..

zi_rus не, обновление не помогает. все равно метрик не видно

А как в графане метрику рисовать? я так, чиста проверить

идёшь по ссылке с имеющейся дашборды и читаешь хелп

там с картинками и видео

а вообще, кто-нить с графановскими динамическими дашбордами развлекался?

Кстати тут dvolodin спрашивал, нужен ли кому-то inv->interfaces

так вот, нужен чтобы линки ручками делать. потому что из mo->interfaces линки между железками не показываются