nocproject.org

..

e_zombie у меня теперь новая тема: "Activator pool 'default' is not available"

причем неважно, сколько инстансов активатора и сколько в каждом max_scripts

Night_Snake1: а Inventory \ Reports \ Discovery Summary чего говорит?

вроде как свежие патчи это должны править

вроде как даже правят и работает.

insert query update delete getmore command flushes mapped vsize res faults locked db idx miss % qr|qw ar|aw netIn netOut conn time

138 27 3 5 0 19|0 0 22.1g 44.6g 4.09g 0 noc:100.2% 0 7|0 0|1 44k 17k 29 09:51:16

3 43 8 7 0 30|0 0 22.1g 44.6g 4.09g 0 noc:93.1% 0 6|0 0|1 14k 27k 29 09:51:19

61 51 7 9 0 29|0 0 22.1g 44.6g 4.09g 0 noc:96.9% 0 9|0 0|1 29k 23k 29 09:51:21

56 45 5 11 0 31|0 0 22.1g 44.6g 4.09g 0 noc:95.0% 0 5|0 0|1 27k 61k 29 09:51:22

68 49 6 10 0 30|0 0 22.1g 44.6g 4.09g 0 noc:93.5% 0 6|0 0|2 31k 23k 29 09:51:25

классификатор лагает . правда там в очереди 13 400 событый

вернее 144 00

140 000

https://pp.vk.me/c622630/v622630151/3fd61/mrQFopg5jG4.jpg

https://pp.vk.me/c622630/v622630151/3fd57/9ATRl9ewM2I.jpg

https://pp.vk.me/c622630/v622630151/3fd11/4LD1yE3qqhs.jpg

TSergey: а у меня такого нет

отчета такого нет?

патчился ты давно? и делал ли логаут из нока?

ага

обновлялся вчера, логаут сделал.

16 июля уже был такой отчет

Night_Snake1: ты на develop?

да

но когда я вчера обновлялся, он сказал что 0 изменений в 0 файлов

���� �����������,

�������� noc � ������� ������� ��� ������ �� 14.04, ��� ������ �� ���

Guest96647: UTF-8 psz

test ����

nope

2015-07-30 10:28:44,916 [noc-classifier] REPORT: elapsed: 75.2200s, speed: 13.3ev/s, events: 1000, lag: 244.916256s, failed: 0, deleted: 68, suppressed: 1, unknown: 18, classified: 5, disposed: 24, duplicated: 3, unk. duplicated: 881

2015-07-30 10:29:21,657 [noc-classifier] REPORT: elapsed: 36.7406s, speed: 27.2ev/s, events: 1000, lag: 254.657479s, failed: 0, deleted: 80, suppressed: 0, unknown: 15, classified: 21, disposed: 34, duplicated: 14, unk. duplicated: 836

TSergey: там ничего случаем опять шаманить не надо?

неа

тест test

pass

всех приветствую

поставил noc с помощью скрипта для ubuntu на 14.04, все прошло успешно

захожу в Main-Setup-Users (или Groups или Reference books) вываливается 500-я ошибка, в логах такой трейс http://pastebin.com/VgXNbYF4

ругается на отсутствие admin/search_form.html

Вот! ВОТ, блеать!

Они мне тут хором пели, что я криво поставил. :)

Хотя, может ты скриптом тоже криво, я х/з.

Ща чуть раскидаюсь, расскажу, как фиксил.

На самом деле, я ставил последовательно выполняя команды из скрипта, чтобы пошагово все проверять

сути не меняет

бгг

abyrvalg: ну-ка, повтори, что я тебе хором говорил

поскольку ответ будет задерживаться, повторю сам: см. bootstrap0.sh и bootstrap.sh из vagrant

evyscr: Вон давай у Джонни спросим, каким скриптом он ставил.

John-eak: Ты последовательно выполнял команды из скрипта - вопрос, из какого?

bootstrap.sh

в нулевой как то даже не заглянул

веб-сервер nginх?

Куда направлен location /media/?

пишем, если есть находки

https://kb.nocproject.org/pages/viewpage.action?pageId=20152823

веб nginx

media

media /opt/noc/lib/python2.7/site-packages/django/contrib/admin/static/

static не существует

хмм

this

alias /opt/noc/django/contrib/admin/static/;

Но это еще не все.

видел?

https://kb.nocproject.org/display/DOC/nginx+setup

Там та-же херня.

Такого пути просто не существует.

да, в доках то же самое

Двое нас.

abyrvalg, поменял alias, то же самое

Я ж говорю, что это еще не все. Это только исправляет форматирование на некоторых страницах. Не заметил, что оно поменялось?

да, поменялось, 500-я выводится с учетом css :)

Вот, а было без.

у меня "/opt/noc/lib/python2.7/site-packages/django/contrib/admin/static/" есть

какая ось?

что вы django ковыряете? там старых приложений почти не осталось

TSergey: Это здорово, но я так и не понял, почему у всех есть, а у меня нет. И у Джонни вон, тоже.

Я ставил по мануалу ручной установки, а Джонни - скриптом, который evyscr рекомендовал. И ему недоверять основний нет.

dvolodin: Все просто - мы не знаем, что тут вообще надо ковырять. Надо ли объяснять, почему так?

"Надо ли объяснять, почему так?"

ну есть очень простой путь, нужно оформить правильный таск в джире

с конфигами и ошибкой и проблему поправят

TSergey: Надо документировать - может, и таски создавать не понадобится, как думаешь?

ты прав, чего ты уже задокументировал?

TSergey: Прости, я погорячился. Ты мне на больной мозоль наступил.

Я несколько лет техписом отработал, так что да, кой-чего задокументировал.

Только не в софте.

документировать нужно не интерфейс, а скрипты использования или настройки, энтузиасты это делают:

https://kb.nocproject.org/pages/viewrecentblogposts.action?key=BLOGS

https://kb.nocproject.org/display/FORUM/Forum+Home

https://kb.nocproject.org/questions

и каждый кто заново ставит --- веллком делиться тем, что было трудно

Я с тобой не согласен в корне. Но тут не место для подобных дискуссий, ИМХО.

с чего бы? именно здесь и место

тебе нравится проект, ты используешь софт, будь добр быть полезным

как-то очевидно, на мой взгляд

а доки не хватает, с этим никто не спорит

abyrvalg John-eak установка нок в Gentoo https://bugs.gentoo.org/show_bug.cgi?id=366051 и всё работает нормально Main-Setup-Users и Main-Setup-Groups

TSergey: так а что делать-то?)

xetle: У меня тоже все работает нормально. Уже.

dvolodin: почти да не совсем, например в джанге ипам и готовься к потоку какашек когда за него возьмешься

это да

нужно бы его проредить :)

Night_Snake1: в плане доки или пользы?

Ниписание доки для НОКа и польза НОКу - это синонимы.

в плане что делать с активатором

Мы думали о общественной пользе, а ты нам о своих проблемах..

Night_Snake1: ты завел таск в джире?

с логами, с описанием проблемы

John-eak: ls -l /opt/noc/templates/admin покажи.

Чем могу дополнить этот таск в жире? NOC-1652

http://pastebin.com/G9M39D0m

Вот тут он почему-то ищет ту самую search_form и еще несколько других файлов.

http://paste.ubuntu.com/11965092/

хотя должен искать в /opt/noc//django/contrib/admin/templates/admin ?

John-eak: приложи файлик, паста протухнет

Я недостающие файлы копировал из /opt/noc/django/contrib/admin/templates/admin

Где должен - мне сие неведомо. Я не представляю себе, как это узнать. Поэтому я цеплялся strace'ом на процесс нок-веб, и смотрел, где он файлы ищет. Оказалось, что там. Я их

ему туда сложил, и все.

Вместо пасты апдейтнул сообщение , логи кинул в [code]

dvolodin:

NOC-1652 Ubuntu 14.04

NOC-1605 CentOS 6.6

abyrvalg, в будущем после такого копирования при обновлении не сломается опять?

Пока не ломалось.

И, кстати, кажись такая бага уже есть.

напишите, чего он не находит в "/opt/noc/local/lib/python2.7/site-packages/django/"

Вот такая-же бага:

NOC-1605

вот это?

"/opt/noc/contrib/lib/django/contrib/admin/static/"

abyrvalg: ну я же выше написал уже

Я проебал.

скажите, может в конфиге бинда view и acl называться одинаково?

Я вьюшки только собираюсь делать, не знаю.

да, может

John-eak: спасиб

таки где должен noc искать недостающие файлы типа search_form.html? в /opt/noc/local/lib/python2.7/site-packages/django/

или в /opt/noc/django/contrib/

или в /opt/noc/templates/admin

Есть вопрос крутым питонщикам понимающим что такое класс и глобальные переменные в питоне.

Вот новый профиль: NOC-1437 для NAG.ERD

Эти глобальные переменные, наверное, откуда-то берутся. Вряд-ли они захардкодены. Вопрос - откуда.

Впрочем, этот вопрос я уже задавал. :)

он теперь использует стандартный HTMLparser из python

Профиль лежит в архиве в каталоге NAG_SNR_ERD/sa/profiles/NAG/ERD

Глобальная переменная которую надо ПРАВИЛЬНО задать и изменять есть dat это список.

Клас который надо ПРАВИЛЬНО задать это MyHTMLParser

Счас всё задано"правильно" ибо работает :) но не красиво.. клас определяется в КАЖДОМ скрипте.

Я хочу определить клас MyHTMLParser только один раз в __init__.py

Со скриптов его потом достать могу. Но как и где определить переменную dat в этом случае, не знаю.

TSergey: NOC-1653

а вресию нока?

*версию

и еще :

Inventory \ Reports \ Discovery Summary

Service Activation \ Reports \ Failed Scripts

SA \ Monitor \ Pools

xetle: определи этот класс в профиле

Night_Snake1: и noc-launcher.conf, блок [noc-activator]

+ noc-activator.conf

TSergey: а где смотреть? версию

Main \ Reports \ System Version

Inventory \ Reports \ Discovery Summary нету такого

а сделай "hg tip"

Night_Snake1: вот это почитай https://kb.nocproject.org/pages/viewpage.action?pageId=20152612

dvolodin:

NOC-1652 Ubuntu 14.04

NOC-1605 CentOS 6.6

одинаковый трабл

TSergey: добавил

dvolodin: http://pastebin.com/zzZHf1sR если так то матерится на 33 строку __init__ не знает глобальной переменной dat

xetle: зачем тебе global там?

Night_Snake1: и как давно ты обновлялся? 11419 это от 22 июля, у тебя 11378

Night_Snake1: иначе объяснить отсутствие отчета не могу

abyrvalg: не надо меня перевирать. bootstrap0.sh не использовался.

Прости, я не нарошно.

Надо использовать оба?

Или именно который 0?

dvolodin: http://pastebin.com/0MZGVU1R так не могу достать переменную dat c результата self.profile.MyHTMLParser().feed(self.http.get("/ipconf=1"))

freeseacher если есть время, глянь выше вопрос по питону.

abyrvalg: bootstrap0

сделай там метод для отдачи

evyscr: Вопрос в развитие - почему именно его, и как узнать, что именно его, кроме как спросить у тебя?

TSergey: я вот только сегодня утром делал ./scripts/upgrade

или там уже как-нибудь по-другому обновляться надо?

Вот такого ни у кого нет?

<class 'noc.sa.interfaces.base.InterfaceTypeError'> DictParameter: {'interface': 'Gi 1/0/25', 'in_speed': 1000000, 'admin_status': True, 'out_speed': 1000000}. Attribute 'oper_status' is required in {'interface': 'Gi 1/0/25', 'in_speed': 1000000, 'admin_status': True, 'out_speed': 1000000}

Возникает на разных интерфейсах и на разных устройствах.

dvolodin: спасибо за совет, так и сделал.

abyrvalg: бывает такое, банальный snmp race, характеризует качество кода

Night_Snake1: сделай-таки hg tip

abyrvalg: у меня на des-3028 подобное встерчалось, но несколько дней не вижу

root@noc:/opt/noc# hg tip

changeset: 11423:1215b77e950f

branch: develop

tag: tip

user: Dmitry Volodin <dv@nocproject.org>

date: Thu Jul 30 08:52:26 2015 +0300

summary: main.csv: Fix csv import of ManagedObjects

Night_Snake1: ок, тепреь сделай в интерфейсе нока логаут

*теперь

Night_Snake1: справа вверху

=)

ну не может не быть отчета, у тебя что-то с кэшами

Night_Snake1: а в отчете будет видно что у тебя с джобами

а fix ты делал?

dvolodin почему при каждом запросе html срабатывает "TIKCS TO EXIT" и больше 3 не сделаешь?

Night_Snake1: ты все? ушел?

Как результат db.noc.log.sa.failed_scripts.find() направить в файл?

щаща

TSergey: Inventory\Reports

нету

где-то dvolodin писал запуск через echo

есть Object Summary

Main \ Reports \ System Version по-прежнему показывает NOC15.05.1dev11378

у тебя в Inventory\Reports сколько отчетов?

Night_Snake1: есть на машине другой браузер?

5

и у меня 5

второй как называется?

ff / chrome

тоже самое

Link Method Summary

а запусти его

1 cdp 200 2 24 3 mac 9

внезапно

ок

тогда так

https://kb.nocproject.org/pages/viewpage.action?pageId=20152612

# psql

SELECT status, count(*) FROM sa_maptask GROUP BY status ORDER BY 2 DESC;

noc=# SELECT status, count(*) FROM sa_maptask GROUP BY status ORDER BY 2 DESC;

status | count

--------+-------

F | 20

W | 1

R | 1

(3 rows)

./noc fix

Checking collections UUID

... done

Checking inventory Root

Checking inventory Lost&Found

Checking pm.MetricSettings

... done

Checking fm.Outages

Restarting wipe process: wiping-546

Suspending/Resuming discovery jobs

Fixing *DB | Interfaces* capability

Optimizing sa_maptask

логаут сделал, репорта не появилось

а апгрейд у тебя лог пишет? (у меня нет)

Night_Snake1: ну кэши браузера почисти

-rw------- 1 root root 0 Jul 30 12:05 /srv/noc/log/upgrade.log

файл-то у меня есть, но писать он в него не пишет

ну и у меня не пишет

У меня тоже не пишет.

я даже ажмина на помошь звал, говорит как-то нок не так пайпы юзает

*админа

evyscr: если запустить bootstrap0.sh , это исправит NOC-1652 ?

Ну не может же он в двух браузерах глючить одновременно и одинаково, правда7

правда

есть другая установка на другой машине в другой сети

там все ок

у меня отчета не было, но это было пару минут, после манипуляций с логаутом и кэшами он появился

в том же браузере

John-eak: лично я тестировал центосевский, убунтовский тестировал кто-то ещё. Так вот, у меня проблем не обнаружилось.

и кстати опять начали задваиваться нотификации от discovery

Добавил в таск

Также при установке через скрипт не хватает apt-get install smitools

dvolodin: NOC-1437 можна уже наверно закомитить, потдержка устройств NAG.ERD

TSergey: ребут животворящий рулит

Эм... Какие совершенно очевидные действия нужно сделать, чтоб запустился нок-коллектор?

2015-07-30 16:08:07,525 [noc.main.launcher] Launching

2015-07-30 16:08:07,526 [noc.main.launcher] [noc-collector#0] Daemon started as PID 5203

2015-07-30 16:08:10,528 [noc.main.launcher] [noc-collector#0] Terminated with status 1

И так по кругу. Его собственного лога нет.

И вообще, правильно ли я понимаю, что для сбора трапов нужен именно он?

дебаг включен?

неправильно

трапы собирает активатор

или я опять все проспал???

активатор

Убираю.

Как активатор научить ловить трапы?

просто dvolodin угрожал отдельным демоном для сбора трапов, думал что мог его запилить уже

zi_rus: уже запилил в microservices

listen_traps = 0.0.0.0

там отдельные сборщики syslog, трапов и попингуйка

:)

затрахаемся их все конфигурить видимо

zi_rus: спс, в жизни не догадался бы.

никто не догадался бы

но доки нет

в логах чата можно что-то найти

noc-supervisor@eval-dc1-n01> status

activator:activator-00 STOPPED Not started

classifier STOPPED Jul 28 01:21 PM

consul RUNNING pid 74097, uptime 3 days, 2:46:50

correlator STOPPED Not started

discovery STOPPED Not started

fmwriter:fmwriter-00 STOPPED Jul 29 11:27 PM

fmwriter:fmwriter-01 STOPPED Jul 29 11:27 PM

mongod RUNNING pid 73909, uptime 3 days, 2:53:34

nm:nm-00 STOPPED Jul 28 01:21 PM

nm:nm-01 STOPPED Jul 28 01:21 PM

notifier STOPPED Not started

nsqadmin RUNNING pid 88394, uptime 2 days, 2:21:07

nsqd RUNNING pid 87852, uptime 2 days, 2:59:13

nsqlookupd RUNNING pid 87878, uptime 2 days, 2:58:43

omap RUNNING pid 11067, uptime 2:41:40

ping RUNNING pid 11175, uptime 2:33:06

pmwriter STOPPED Not started

postgres RUNNING pid 73910, uptime 3 days, 2:53:34

probe STOPPED Not started

sae STOPPED Not started

scheduler STOPPED Not started

sync STOPPED Not started

syslogcollector STOPPED Jul 29 11:27 PM

trapcollector STOPPED Jul 29 11:27 PM

never вместо not не заходит?

web STOPPED Jul 29 09:34 AM

:)

ну да, их много

dvolodin пилит qnx

щаз

hurd он пилит

один хрен

потом нок можно будет ставить на сервера вместо ОС

урааааа

solaris-like os

dvolodin: видишь, народ одобряэ

надо сделать на systemd

всё остальное хуйня

s/на/вместо/

помнится, были треды про линуксовое ядро на перле и питоне

zi_rus: что кроме листена еще может быть? Там порт может указать надо?

от рута активатор запускать

[noc-activator] enabled = true user = root

ну или порту казать over1k

[noc-activator]

enabled = true

user = root

Так и было.

ну и все

netstat -apln | grep LISTEN

162 порт никто не слушает.

161

161 тоже.

http://paste.ubuntu.com/11966650/

а где udp

Мой косяк.

udp 0 0 *:snmp-trap *:*

:-D

http://pastebin.com/DiSkZqmy

и мне тоже

я весь день тупой

Погода, говорят, такая.

а тебе чёрного властелина :) ты много ругаешься

у кого сколько железок перегревается?

не, я просто так выражаю свои мысли, вы просто не понимаете

Сегодня днем были перегревы серверов в Грузии и в Австрии. Под Москвой тоже, но там с вентиляцией все плохо. Литва не жаловалась.

Поштучно я х/з сколько.

ништяк.

у меня 4 пе и 3 асв греются.

здесь температура 34 градуса, и проблем больше из за отключений электричества

Хм. На sh run приходит трап config changed

да, это на Dmitry1 надо косо смотреть, это он так трап распарсил

там даже мое issue есть про это

можешь покапаться в багтрекере, возможно бот его уже закрыл

но трабл остался

Ага, спс, будем посмотреть. И на трекер, и на Dmitry1.

какой владелец должен быть в /opt/noc и нижележащих директориях ?

noc:noc

http://paste.ubuntu.com/11967127/

zi_rus: Ты это имел ввиду?

NOC-1082

пацаны, а как дропнуть все что понаходилось в Inventory в Lost&Found ?

что-то шарюсь по монге и по постгресу, и не вижу ничего похожего

I’m not finding auto-discovery to be obvious. I’m testing the VM release. I added four routers to Managed Objects. On some of them, interface_discovery fails; asset and vlan discovery are disabled. But even when I create a profile that has asset and vlan discovery enabled, it does not succeed. What happens next? I have subnets added to address space management, with IP Discovery enabled; but where would discovere

IPs appear in NOC?