nocproject.org

Вопрос: есть готовый способ готовить csv из xml? Я просто экспортировал из zabbix кучу хостов и сейчас пилю велосипед, чтобы подготовить csv для импорта в NOC. Может есть что-то готовое, а я зря время теряю?

ping

Есть кто живой?

есть

Прогоняю скрипт из http://forum.nocproject.org/index.php?topic=21.msg51#msg51

Выдаёт ошибку:

Traceback (most recent call last):

File "./scripts/zabbix2noc.py", line 114, in <module>

address = zabbix_objects[i]["ip"].encode('UTF-8')

KeyError: 'ip'

откуда грабли?

я не настолько крут, чтобы сразу определить грабли, но, по-моему, нужно посмотреть, что находится в переменной zabbix_objects[i] и оттуда уже думать

в трейсе же показывает содержимое переменных?

товарищи, вчера обнаружили пренеприятнейшую проблему, у 7609 на которой при числе маков >7000 при выполнении Show mac address-table, течет память, на каждое выполнение в нашем случае утекает 260кБ памяти. неприятность в том что нок выполняет эту команду даже когда

галочки mac discovery отключены и все опции дискавери в noc.conf стоят в enabled = false. Кто-нибудь может мне объяснить что это такое происходит? Почему нок выполняет отключенные функции?

помолитесь за меня, обновляюсь :)

dvolodin: Good morning.

Good morning to everyone... =)

dvolodin: 2012-10-05 10:09:36,765 UNHANDLED EXCEPTION (2012-10-05 10:09:36.751282)

Working directory: /usr/local/noc

<type 'exceptions.TypeError'>

__init__() got an unexpected keyword argument 'soa'

шедулер такие трейсы дает

mikevlz: где такое?

Andreas-SWE: hi

noc-scheduler.logFile: /usr/local/noc/dns/generators/bindv9.py (Line: 27)

Function: get_zone

http://dpaste.org/VAxbg/

I want to merge to VRFs into one. Best practice to do?

Andreas-SWE: noc shell

./noc shell

from noc.ip.models import *

vrf1 = VRF.objects.get(name=....)

vrf2 = VRF.objects.get(name=.....)

for a in vrf1.address_set.all():

a.vrf = vrf2

a.save()

for p in vrf1.prefix_set.all():

p.vrf = vrf2

p.save()

dvolodin: Would that move all prefixes from vrf2 to vrf1 or vice versa?

vrf1 -> vrf2

Thanks

dvolodin: ммм?

пофиксил

dvolodin: running ./noc shell (as user noc gives "Bus error". Running as user root gives: psycopg2.OperationalError: FATAL: Peer authentication failed for user "noc"

check system limits

dvolodin: глюк есть забавный

если в каталоге repo есть каталог ttt - тогда питон не может создать там еще и файл ttt

последствия - нельзя иметь ДНС-сервер и зону, называющиеся одинаково

ну и с конфигами свичей тоже самое

это с комбинацией старого и нового метода provisioning'а?

не, это видимо действительно ОС чудит. на конфигах свичей заметил изначально. Сейчас вот воткнулся с ДНС

завели ДНС-сервер с таким же именем, что и зона. Тепер зону не сохраняет, в трейсбек валится

потому что есть каталог с файлом autozones.conf для сервера

в новой схеме этот файл локально генерируется

новое я пока не настраивал

Привет всем

Я тут ковыряю FM

И понял, что очень не хватает группы WARNING, промежуточной между EVANT и ALARM

Есть куча вещей, из-за которых не нужно поднимать аларм, но на которые желательно как-то обратить внимание

В той же циско:

%ETHCNTR-3-LOOP_BACK_DETECTED: Keepalive packet loop-back detected on FastEthernet0/24.9:07:

%PM-4-ERR_DISABLE: loopback error detected on Fa0/24, putting Fa0/24 in err-disable state9:08:

%LINEPROTO-5-UPDOWN: Line protocol on Interface FastEthernet0/24, changed state to down9:09:

%LINK-3-UPDOWN: Interface FastEthernet0/24, changed state to down

Подряд идут 4 сообщения.

1-е и 3-е нужно в WARNING

2-е и 4-е - в ALARM

Т.е., если у нас не настроено, что в случае loopback, нужно ложить интерфейс в err-disable состояние, то это WARNING. Иначе - ALARM

Соответвственно, в WARNING попадают события Line protocol down, а в ALARM - Interface down

Это может быть в любом случае Alarm, только с разным уровнем severity

просто реагировать на них нужно по-разному

из-за чего кошка 3750 и линуксовые серваки могут отказываться поднимать LACP?

кошка считает, что порты входящие в группу в апе, сам port-channel в дауне. Линукс считает, что в апе только один порт. Что им надо?

Dmitry1, ты тут правила для ФМ пишешь?

вроде как да

mikevlz: попробуй слоу поставить периодик

такие сообщения в сислоге надо распознать

http://pastebin.com/W7b54Wm6

это критикал шо пиздец аларм должен подниматься

ok

или мод актив

zi_rus: софт какой? от софта зависеть может

актив/пассив не играет рояля. На актив - он видит только, что сам отсылает. На пассив он получает LACPDU, но port-channel в дауне

насчет периодики - оно и так слоу

acid232_, 12.2(33)SRE5 - в данном конкретном случае

он флаги имеет или SP или SA соотв

там на самом деле важна первая строчка а последующие к ней подвязаны, видно что они не в сислоговском формате

Надо, чтобы была возможность из состояния WARNING перерасти в состояние ALARM

zi_rus: а у тебя нок маки дискаверит?

уже нет :)

может фаст свитчовер чудит ?

где прибивается?

с джуном надо включать фаст свитчовер на портченел интерфейсах, а на самих эзернетах - актив мод

а то тоже не поднимается

но у меня связка АСР-МХ480

а как сделать мак дискавери

галочки в интерфейс профилях поставитьufkjxrb d bynthatqc

только запомни, надо обновиться до сегодня, иначе не отключишь его

логично

нет не логично, это баг который сегодня исправили

сначала обновиться потом включить )

а где єти маки потом смотреть? в ipam?

я не знаю, там где-то бд есть, интерфейса к ней нету

misak: с С3750Х не путаешь? у моей 3750G не вижу этой настройки

кстати, идея для репорта, нок по найденым макам определяет вендоров и потом выводит сколько чьих маков светится

пользы никакой, зато интересная статистика

:)

mikevlz: у меня вообще ASR1006, просто недавно сам мучался с LACP на цисках, фичи специфичные к платформе конечно не знаю

а как массово таг проставить на устройства ?

csv

в экселе открываешь и хреначишь

на уже существующие ...

страшно

все нормально

экспортишь все, потом заполняешь и вливаешь с обновлением

эскпортировать все объекты, править, импортировать ?

да

или не все, а только где надо поправить

лааадна

пошел делать

./noc shell еще можно

так, хозявам серверов отписал... буду ждать

Huawei.VRP.get_ip_discovery на ME60 в трейсбеки валится

на строке 164? )

киньте на pasebin

NOC-702 кинул уже

и в корреляторе постоянно Invalid job class. Park job to FAIL state

;( дискавери вообще сума сошол

2012-10-05 13:24:07,478 UNHANDLED EXCEPTION (2012-10-05 13:24:07.420878)

Working directory: /opt/noc

<type 'exceptions.TypeError'>

unsupported operand type(s) for -=: 'NoneType' and 'int'

а от чего noc-correlator[#0] daemon is terminated with status 0 - может бесконечно перезапускаться ?

дискавери запихивает адреса в IPAM, а managed_object адресу не проставляет - пащему?

и только ли у меня это?

Dmitry1: http://pastebin.com/pbEpDKZj

вроде пофиксил

ишь ты

что-то я не выжу в hg diff изменений

а глянь еще как от этого патча все ломаться может http://pastebin.com/Z31gYH4U

а что это за патч?

он от чего-то помогает? тушенку не ломает?

собирать серийники пытается

но в итоге ломается get_interfaces

почему - хз

get_interfaces вызывает get_version

get_version снимает по snmp, а в том что я добавил - по cli, и в итоге ломается что-то с выводом cli

может пейджер или что-то такое

I just downloaded the NocProject VM image to try it out a little

ok

When I add a custom field "location" to "ip_prefix", I can no longer access assigned addresses

'Prefix' object has no attribute 'location'

дебаг-скрипт без принудительного указания snmp-community не использует snmp, так что проеврь свои изменения дебаг-скриптом

кстати, эти веселые парни посмотрели на конфиг моего свича, подергали свои сетевухи, LACP поднялся :)

дебаг скрипт показывает что get_verison работает, а вот get_interfaces уже нет

ты не нарушил своим get_version интерфейс обмена?

IGetVersion ?

вот видимо что-то нарушено

а как я понять не могу

результат твоего get_version

на пэйстбин

такое ощущение что вывод серийников (он большой) попадет на вход get_version

такое ощущение что вывод серийников (он большой) попадет на вход get_interfaces

пожалуйста - http://pastebin.com/6RCv6LfS

вроде все соответствует требованиям интерфейса...

а вот как выглядит вывод get_interfaces http://pastebin.com/RYpCf9mD

на команду display ip interface показывает результат команды display elabel из get_version

фильм ужасов :)

комментарю строчки в 13:37 < acid232_> на команду display ip interface показывает результат команды display elabel из get_version

комментарю строчки в get_version, которые делают display elabel - все снова работает

фаза луны?

а доступ на эту железку получить можно?

Amorsen: Try to update to current snapshot

Amorsen: Or try to install to clean dir from soource

Dmitry1: is that available as RPM or is there another handy way to get the VM image up to current snapshot?

no, only sources :(

0.7(4) - is interim release, not all features work fine.

NOC-736 - вот вам ужастик

у нас бы директор за такое звиздюлей уже навешал...

дима, настраивается через конфиг ?

пока нет, только либа

У нас до сих пор каждые 2 минуты с многомегабайтным конфигом рестартится ISC-DHCPd, погроммисты решили написать свой DHCP(ну то есть расширить возможности виндового) - оказалось, что никто не в курсе и пилить интересный геморрой не просил.

за инициативность погроммистам навешали

использует bdiff mercurial'а

Ah, in the VM, nocproject has been installed from source, not by the package manager

Amorsen: yes

as a recommended way

NOC is very quickly emerging project

Well, for everything else that is quickly emerging, I just make packages myself

You'll quickly get bored by rebuilding packages every day :)

freeseacher: но у меня есть сильное желание пихнуть репы в нее

ибо плюсов - масса

да и не приспособлены git/mercurial для миллиона коммитов в день

dvolodin, it's easily automated, I used to do it with Asterisk several times a day :)

взял bdiff из mercurial

причем есть возможность менять формат diff'ов на ходу

например, сжимать ревизии

если надо, могу сделать аннотации для ревизии

это то, что у нас не получилось с mercurial

потом - можно относительно безопасно сливать изменения вместе

да доступ можно дело же не в доступе

а в механизме работы скриптов

например, если случайно нагенерили десять ревизий объекта за 5 минут, можно слить в одну

может быть dvolodin нам объяснит почему вывод cli одного скрипта попадает на вход другого, который вызывал первый перед этим

acid232_: это debug смотреть надо

может пропт раньше времени сработал?

еще с GridVCS можно ограничить глубину истории, скажем

если не нужно хранить изменения больше чем за год - можно слить ненужные ревизии

debug чего?

скрипта

вот фрагмент где ломается http://pastebin.com/qXCYSmwh

на display eth-trunk попадает результат display elabel из get_version

\n/$

это у тебя под промпт не матчится?

pattern_prompt в профиле какой?

pattern_prompt = r"^[<#\[]\S+?[>#\]]"

я уже понял

вот тут он и обламывается

видимо да

делай адаптивный промпт

[ ] разве такой промпт в хуавее есть? )

а ну да есть конечно

как в VRP3, хотя бы

есть, да, в system-view

он из <hostname> становится [hostname]

а что такое ^[<#\[]\S+?[>#\]] :)

у меня в хуавеях везде промпты <hostname>

точно надо адаптивный prompt

Надо где-то взять коммитера для huawei

ага

./noc script-test Huawei.VRP ?

pattern_prompt = r"^[<#\[](?P<hostname>\S+?)[>#\]]"

вот такой попробуй ему загнать

проехало, но все равно падает get_interfaces в строке 164 если хотя бы один Ethernet0/0/X - порт в апе, если в апе только Gigabit - не падает, но и не видит Ethernet

насколько безопасно репу ДНС зачистить наглухо?

при условии, что механизм провижена еще старый

dvolodin: Your right. full disk. Lucky this is the lab server.. =) Mongodb is 3.5G, Resized and trying again...

вот такой трейс http://pastebin.com/jyUmaSK8

строка "type": self.types[re.sub(r\'\\d.*\', "", ifname)],

Andreas-SWE: mongodb creates 3 exent files for journal, 1G each

so eth empty database is 3G

:)

mikevlz: абсолютно безопасно

сделай в пустом каталоге hg init

и проставь права на файлы

dvolodin: ok

dvolodin: Thats fix now.

dvolodin: But i cant run the commands you instructed med to.

полечил свои хуавеи, вот патчик http://pastebin.com/LApHiuS3

dvolodin: I get a NameError: name 'Grey1' is not defined

'Grey1'

dvolodin: First my VRF could not be entered cause it was named with swedish letters

seemed you have forget the quotes

Grey1 is the name of the VRF i wants to move to my main VRF

Aha

rd="...."

instead of name

four dots?

возьмите меня хуавеи ломать

I have five VRFs 1 for my public prefixes one for my Grey nets and three more for Grey duplicates

So i want to move VRF 1:0 to 0:0

not touching 2:0 3:0 and so on...

ломать топором?

протестируй адаптивный prompt

или коммиты делать длоя них?

acid232_: сможешь сделать адаптивный prompt для Huawei ?

ни разу не делал, добавить pattern_unpriveleged_prompt = r"^\S+?>" и все?

Andreas-SWE: vrf1 = VRF.objects.get(rd="1:0")

and so on

Works except i get a duplicate key on 0.0.0.0/0 almost everything moved except my 192.168.x.x/16 prefixes now

а get_interfaces должен все интерфейсы железки показывать?

или только те которые up ?

noc.fm.models.OIDCollision: Cannot resolve OID 1.3.6.1.4.1.171.12.11.1.11.1 collision between EQUIPMENT-MIB::swEquipPowerSavingLinkDetectState and EQUIPMENT-MIB::swEquipmentPowerSavingState. Equal preferences

post-update: 80: sync-mibs failed

Ah that one was easy to solve db.noc.mibs.drop();

db.noc.mibdata.drop();

а что матчит r"^[<#\[](?P<hostname>\S+?)[>#\]]"

онлайн разбиратель питоновских регекспов был бы очень кстати

Hmm most log goes to /local/, but STOMP seems to log to /var/log/noc/noc-stomp.log

And I can reproduce the custom field problem with the hg version of a few hours ago

If I reboot after adding the custom field, everything works fine :)