nocproject.org

,,

добрый день. поставил башню на ubuntu 14.04, сделал deploy на 2-ую виртуалку с Ubuntu, завел несколько МО, разрешил в MO profiles проверки в box discovery и periodic discavery, выбираю MO - Run discovery now - и получаю Failed. Где я что еще не разрешил? В FM в Events - пусто.

При попытке изменить параметр сdp_discovery enabled в true в noc.conf (Main-Setup-Configs-etc/noc.conf) - вылетает ошибка Failed to save config

evyscr, ./noc collection -i <filename> это когда такое выполнять?

AleksandrB76: run discovery я правлю сейчас

кнопку run поправил

noc.conf теперь не особо нужен и скоро уйдет совсем

Rhxbnt"Алилуйя!!!"

AleksandrB76: на ubuntu размоталось без проблем?

dvolodin - в основном - да, пришлось отдельно ставить mongodb-org-shell, почему то из репозитория он не смог его закачать, виснет при загрузке и вылетает по тайм-ауту

это проблема с playbook или разовая проблема с доступом к репозиториям?

скорее с репозиторием - при попытке установки на самой виртуалке с помощью apt-get тоже виснет не вылетает по тайм-ауту

пришлось отдельно закачивать deb файл и уже его ставить

виснет и вылетает

ok, то есть это не наша собака, а наркоманская

zi_rus, делись скриптом, что бы прописать шаблон на интефейсы нужные :)

здрасте

какой хитрый

а что мне за это будет? :)

zi_rus, плюс в карму

:)

у меня монда сожрала весь диск базой нока

что можно сделать?

наверное ивенты или еще что

[Marael]: от сердца отрываю https://kb.nocproject.org/pages/viewpage.action?pageId=11108392

42 Гига

misak: ты pickle не включал случайно? :)

filonov: специально ничего не включал

это в монге или ноке?

Dmitry11: знаешь что я понял

zi_rus, спс

в ноке

zi_rus: ась?

misak: у меня такое было - там перепутаны местами счетчик и timestamp и оно будет плодить коллекции на пару веков вперед

Dmitry11: что когда у нас выдезает DOM Alarm и Link Down, то root cause должен быть Link down

потому что сейчас это сделано наоборот

filonov: а что прямо сейчас можно сделать? чтобы хотя-бы монгу запустить

я и не вижу действительно упал линк или есть аларм, но связь кое-как держится

zi_rus: скинь мне это на почту, потому как я забуду

Лучше сейчас сделать

или ты и в почте забудешь

надо удалять лишние коллекции

хм

в монге почему-то включено логирование комманд

7 гиг лог

начну с него

кстати, а кто ка кс логами монги бореться?

как*

misak: можешь про nojournal почитать, но это такое

evyscr: для начала отключу verbose, почему-то в центов он по умолчанию включен

центос

хм

он, полагаю, по дефолту монговцами включен

но на 13G базы у меня 3M логов

а, ну да, репа то монговская

evyscr: а у тебя тоже все команды в логах видны?

не все

по ходу у меня тоже

только медленные

а почему у меня база то 48 гиг?

ну посмотри

и вообще, взвесь journal

у меня монга с монговской репы

я в этой монге ни хрена не понимаю, что можно без проблем удалить? я только вот это делаю http://pastebin.com/1BY7ZMBQ

журнал всего 165 мегабайт

а вот с посмотри у меня как раз плохо

http://pastebin.com/2D9mWkjL - директория монги так выглядит

misak: pm используешь?

evyscr: немного игрался и забил

может что-то и крутится

у меня пока 3 железки для теста заведены и каталог журнала монги 3 с лишним гб

var collectionNames = db.getCollectionNames(), stats = [];

collectionNames.forEach(function (n) { stats.push(db[n].stats()); });

stats = stats.sort(function(a, b) { return b['size'] - a['size']; });

for (var c in stats) { print(stats[c]['ns'] + ": " + stats[c]['size'] + " (" + stats[c]['storageSize'] + ")"); }

см. ткж. http://joey.aghion.com/listing-mongodb-collections-by-size/

это в монге писать или нок шелл?

misak: noc.ts.* можно поудалять, ежели есть

в монге

а вот как нашел коллекцию, как ее безопасно почистить? можно просто удалить?

что за коллекция-то?

noc.noc.mac_log - вот эта например у меня самая большая "storageSize" : 11452362720

лолд

кто то недавное пытался заставить работать макдб

это было давно :)

2 года назад отключил

работало кстати, только маков у меня много

db.noc.mac_log.remove('') - делаю по аналогии

делай

а noc.gis.tilecache не опасно трогать? она у меня 4 гига занимает

у меня строчка с verbose=true

в конфиге монги закоменчена

это значит что она включена и дефолтная

я с tilecache вообще не связывался

у меня его нет

гис вообще мёртв, да?

я им пользуюсь

тот что в инвентори

или это не то?

а там tilecache используется?

это не знаю

у меня нок уже лет 6

tilecache используеться для отрисовки карт

скомпилированные тайлы

все что Володин добавлял, я тут-же пробовал

под растровые изображения обычно, но вроде с osm тоже работает

надо сделать один продакшен, но я не умею и мне мтрашно

*страшно

хуяк хуяк и в продакшен, делов то

возьму новый сервер, тогда сделаю

попробуй на виртуалке

я и так со страхом монгу сервер от ноковского отделил

скрины с нее делай на каждом этапе установки

еще и постгре ноада отдельно

*надо

дык в конфигах указываешь адреса монги и пострге

и в постгре разрешаешь с удаленных хостов коннект

вроде жешь как-то так

бекап рестор надо сделать, перед этим лишнее зачистить

и самое главное - репозиторий конфигов пока еще не умею

переносить

tilecache сейчас не используется - это компиляция карт OSM

https://jira.mongodb.org/browse/SERVER-16578 приехали

:)

моя монга все еще стирает базу мак адресов :)

у меня именно лог маленький, а журнал растет

misak: репы конфигов ж нонче в монге, не?

см. gridvcs

evyscr: не знаю, точно?

ну проверь-)

как? :)

либо переносом, либо чтением кода

ладно :)

я вчера в инвентори, в корне сделал катлог, сегодня перезагрузил нок, и там (в инвентори) вообще ничего не осталось, даже лост & фоунтд

отстановил нок, запустил фикс

дефолтнвц каталог вернулся

а все остальное нет

а после ремува и компакта монга все равно на диске ничего не освободила

а может ей для компакта свободное место нужно

с РТ есть? Поменялось время начала рабочего дня?

это для рипейра нужно

сейчас всю базу на больший пертишен копирую, там уже сделаю

ss___: Я из армянского Ростелекома, у нас все по прежнему :)

волга поменялась

у некоторых районов

вот интересно это только на бумаге или в рили

а никто не реализовывал проверку несохраненной конфигурации на оборудовании?

Zek, а как сравнить сохраненную с несохраненнеой?

у каждого вендора свой костыль будет

ну да

так же как и изменение конфигурации у каждого вендора свое, и что? ;)

не особо хотят

ну ок, тогда как вообще в ноке реализуется проверки конфы ?

Zek: парсер разгребвает конфиг и выдает факты

факты анализируются правилами

хм, понятно, значит не получится сделать через имеющиеся механизмы.

?

Проверку несохраненной конфигурации

нужно не конфиг парсить а ответ на произвольную команду

ну все, база с 42 гигов стала 2 гига

пока далше трогать не буду

Zek: ничего не понял

а кто мешает-то?

а нок lldp-med парсит?

dvolodin, т.е.? я говорю что нет готового механизма

если configuration management парсит конфиг и выдает уже только факты, то нужно что-то новое писать для этого.

я включил lldp на свиче и двух компах, воткнутых в этот свитч

в конфиге нока включил дисковери овер ллдп

и запустил вручную дисковери на свиче

как теперь понять, что оно продисковерилось

и увидит ли компы само?

Не увидит.

для успешной работы дискавери, надо чтобы дискавери отработало по обоим сторонам линка

evyscr: почто develop закрыл?

хм, сейчас на других свичах включу, а как я пойму, что нок отработал по LLDP? линки появяться в MO

?

dvolodin: веришь, нет - не пытался

и он открыт

а что за коллекции в монге типа noc.noc.ts.p2015.p10.p16 ? их очень много

pm

понятно, спасибо

дисковери по свичам с включенным lldp отработало, но линки в МО, в этих объектах нет

https://bitbucket.org/nocproject/noc/commits/45fc8a18a8c92f24e331510baac41bc2696d45b1

при обработке pull request аккуратнее с галочкой close branch

misak: год, месяц, день - обрати внимание

[Marael]: оно не сразу линкует

а сколько эжать?

dvolodin: вот такой трейс ловлю в активаторе (микросервисы) http://pastebin.com/5iv3buQL

хорошо, я посмотрю

а для того, что бы линки появились, в инвентори железка должна опрежедитсья? или она может лежать в неизвестных?

Еще не очень понятно, что там за Pool'ы. Из коробки есть default и P0001, sae лежит в p0001, но при этом как я понял опрос устройства начинается только после перевода его в пул default

[Marael]: линки к инвентори отношения не имеют

[Marael]: какие именно пулы?

kokozzi,

если ты про активаторы - то к пулам активаторов еще нужны собственно активаторы. Без активаторов опроса не будет

kokozzi: P0001 - это мигрированные

default как я понял пришел из башни

или p0001 как раз оттуда?

нет, всё-таки default это точно Pool, настроенный в башне

тогда откуда мигрировал P0001?

Привет

кто-нибудь шарит в процах и в freebsd?

тебе к Dmtiry11

он, похоже, единственный в этом чатике кто шарит за бздю

а тебе зачем?

я просто не особо понимаю в чём у меня проблема

короче, есть тазик с фрёй

проц Intel(R) Core(TM)2 Quad CPU Q6600 @ 2.40GHz

вот оно

2 сетевухи интеловских

у тебя тазик с фрей

сноси

ставь линукс

:)

https://i.gyazo.com/61358bed1f3c41bd4bfd3bc806087c7b.png

почему только 2 ядра исользуются?

кажда я сетевая висит на своём IRQ ?

хм, а нок понимает что свичи в стеке?

у тебя там задачижёстко при приделаны к определённым цпу ?

там quagga

2 fullveiw

лацп

[Marael]: он их как один свич видит

PavelGloba: тебя правильно спрашивают: сетевухи к ядрам прибиты?

у меня стек из разных 3750

:)

[Marael] как инвентори отработает я хз а МО по-любому будет один

хз, как посмотреть?

хм, а шаблоны железок для инвентори лучше напрямую в файлах править или через гуи?

гуи

файлы это файлы

их еще с базой надо синхронизовать

а гуи сразу в базу сохраняет

PavelGloba: посмотри, что за сетевуха и что может чип

PavelGloba: прерывания\очереди

хз уже. давно было

em0: <Intel(R) PRO/1000 Network Connection 7.3.8> port 0xdc00-0xdc1f mem 0xff9e0000-0xff9fffff,0xff9c0000-0xff9dffff irq 16 at device 0.0 on pci5

em0: Using an MSI interrupt

em1: <Intel(R) PRO/1000 Network Connection 7.3.8> port 0xcc00-0xcc1f mem 0xff8e0000-0xff8fffff,0xff8c0000-0xff8dffff irq 16 at device 0.0 on pci4

em1: Using an MSI interrupt

ну хоть на разных висят .

freebsd tune e1000 irq

[Marael]: в inv будут видны разные 3750 с одинаковым названием оьбъекта

SomovIS, fuf]]

ага*

PavelGloba: подобны проблемы есть в линуксах когда ACPI глючит . и прерывания остаёются только на первом CPU

watch -n 1 /proc/interrupts

root@br1:/var/log # vmstat -i

interrupt total rate

irq14: ata0 87523 0

irq20: hpet0 140798265 1072

irq256: em0 819605057 6244

irq257: em1 743209984 5662

irq259: ahci0 60687 0

Total 1703761516 12981

PavelGloba: пока все правильно, em используют MSI

но по факту, у меня действительно 1 проц - 1 сетевуха.

График загрузки em0 коррелирует с cpu1, а em1 с cpu2

ну на CPU значит 2 ядра

что ты хочешь ?

https://i.gyazo.com/61358bed1f3c41bd4bfd3bc806087c7b.png

4 ядра.

Разве не должно всё по ним размазываться?

с чего это вдруг ? у тебя сетевухи поддерживают MSI, но никак уж не MSI-X

117-11# vmstat -i

interrupt total rate

irq23: uhci3 ehci1 2124859 0

cpu0: timer 4884854750 1999

irq256: em0:rx 0 17651139226 7226

irq257: em0:tx 0 17822241020 7296

irq258: em0:link 24 0

irq259: em1:rx 0 17383144502 7116

irq260: em1:tx 0 17787651092 7282

irq261: em1:link 8069 0

irq262: ahci0 1265443 0

а вот кусок pciconf -l -v -c

em0@pci0:3:0:0: class=0x020000 card=0x00008086 chip=0x10d38086 rev=0x00 hdr=0x00

vendor = 'Intel Corporation'

device = 'Intel 82574L Gigabit Ethernet Controller (82574L)'

class = network

subclass = ethernet

cap 01[c8] = powerspec 2 supports D0 D3 current D0

cap 05[d0] = MSI supports 1 message, 64 bit

cap 10[e0] = PCI-Express 1 endpoint max data 128(256) link x1(x1)

cap 11[a0] = MSI-X supports 5 messages in map 0x1c enabled

PavelGloba: выкинь такие сетевухи

Понятно, спасибо)

PavelGloba: покажи pciconf -l -v -c

для сетевухи

em0@pci0:5:0:0: class=0x020000 card=0x10828086 chip=0x107d8086 rev=0x06 hdr=0x00

vendor = 'Intel Corporation'

device = '82572EI Gigabit Ethernet Controller (Copper)'

class = network

subclass = ethernet

cap 01[c8] = powerspec 2 supports D0 D3 current D0

cap 05[d0] = MSI supports 1 message, 64 bit enabled with 1 message

cap 10[e0] = PCI-Express 1 endpoint max data 128(256) link x1(x1)

speed 2.5(2.5) ASPM disabled(L0s)

ecap 0001[100] = AER 1 0 fatal 1 non-fatal 1 corrected

ecap 0003[140] = Serial 1 001517ffffef95db

/usr/src/sys/dev/e1000/if_em.h нам говорит

* EM_TXD: Maximum number of Transmit Descriptors

* Valid Range: 80-256 for 82542 and 82543-based adapters

* 80-4096 for others

* Default Value: 256

* EM_RXD - Maximum number of receive Descriptors

* Valid Range: 80-256 for 82542 and 82543-based adapters

* 80-4096 for others

* Default Value: 256

так что есть куда крутить

PavelGloba: и, если ты даже после этого хочешь, чтобы у тебя равномерно были нагружены все 4 ядра, то можно все пакетики складывать в общую очередь, и разгребать отдельным процессом

sysctl -d net.isr

Я вообще в этом не шарю. Что бы ты сделал на моём месте? (кроме замены карт)

переустановил на линукс

еще можно поставить виндовс, но это если ты собрался увольняться и уезжать на другой континент

+1

за линукс

а есть пример какой-то в какой последовательности добавлять улицу, здание, этаж, комнату, место в стойке?

как план этажа загрузить

PavelGloba: для чего тебе ?

[Marael] Забей

не работает?

PavelGloba: утилизация цпу 40% это не много

Dmitry11: - quagga. Это не пик. И трафик расти будет, поэтому я не хочу чтобы всё упёрлось в проц в ближайшее время.

[Marael]: PoP, в него набиваешь то, что нужно

Как смена на линух повлияет на распределение по ядрам? Там на такие случаи уже прерывания по дефолту настроены?

а что есть PoP

PavelGloba: ты буфера у em подкрутил ?

а скока там трафика:?

чет 40% многовато для рутинга

на em даже

dvolodin, а что есть PoP

400+-)

в зависимости от требований

этажи, комнаты, ряды, стойки

500, на самом деле, если в сумме с 2-х карт

вечером будет 800-900

PavelGloba: ты буфера у em подкрутил ?

буферы не крутил.

это так делается?

hw.em.rxd=4096

hw.em.txd=4096

да

это и есть буфера

что за фря у тебя ? драйвер довольно таки старый

9.2

ой

9.3*

ну попробуй, все-таки поиграться net.isr

гиг трафика... даже на кваде... ты его натишь? или только роутишь?

только роут

PavelGloba: так em больше 800 тебе не выдаст

читай про модерирование прерываниями

2х800 будет 1600, этого достаточно

PavelGloba: иди в /usr/src/sys/dev/e1000

PavelGloba: открывай на редактирование файлик if_em.c

у меня пусто в /usr/src

Dmitry11: а ты еще про нок говорил что это люди в исходниках должны что-то править

:(

Короче. Пока только буферы поменяю. Потом снесу фрю.

:)

не хочу показаться некорректным, но пеерчитай басню Крылова "мартышка и очки"

подъёб засчитан

грубо говоря, во freebsd есть два способа обработаки пакетов

Всем привет

первый - во время прерывания (как у тебя сейчас)

кто подскажет, как в текущей версии склонировать активатор?

второй - складывание их в общую очеред, а потом уж обработка

это понятно. Во второй вариант я даже лезть не хочу.

noc clone уже не работает, чем заменили?

PavelGloba: хм, а ты уверен, что именно в том дистрибутиве линукса, который ты хочешь поставить, нужные параметры выставлены так, как тебе нужно ?

или будешь тупо менять десяток дистрибутивов линукса, пока не наткнешься на тот, где в sysctl вытсален по умолчанию нужный тебе параметр

там явно драйвера будут новее

ну так в новой freebsd тоже драйвера поновее

кроме того, собственно почему я говорил лезть ив исходники

там тупо стоит константа

#define MAX_INTS_PER_SEC 8000

и ты хоть сто процеассоров поставь, оно н едаст тебе сделать больше 8000 прерываний в секунду

по идеологии Интела - этот класс сетевух относится к десктоп классу

а в серверных сетевухузаз можно добиться большего значения

Доктор, меня все игнорируют - следующий

PavelGloba: я подозреваю, что в линуксе тупо забили на рекомендации интела и вручную поправили эту константу

PavelGloba: http://www.intel.com/content/www/us/en/embedded/products/networking/gbe-controllers-interrupt-moderation-appl-note.html

Но зачем читать? Там много буков. Давайте поставим линукс.

Это напоминает историю с рамблер почтой

Ну ты сам прекрасно понимаешь, что обновления туда приходят бытрее чем во фрю

а если свичи одинаковые по железу, но различаются лицензией (LAN Lite и LAN Base) это один и тот же объект в инвентори или создавать отдельный?

Зачем мне лезть в залупу, если все как один говорят менять ос

обновления чего ?

всего

если у тебя сетевуха не поддерживает msi-x, то никакие обновления не помогут

единственный вариант - сложить все пакеты в общую очередь, и разгребать их отдельным процессом

это умеют и линукс и freebsd

да блин) Это понятно) С линуксом в итоге будет проще разобраться. По крайней мере мне.

просто в каком-то дистрибутиве линукса эта возможность включена по умолчанию

PavelGloba: а если ты поставишь дистрибутив линукса, где это выключено, будешь ставить AIX, Solaris ?

> С линуксом в итоге будет проще разобраться. По крайней мере мне.

слава слоника в домене не дает тебе покоя ?

не знаю таких. Чем знаменит?

тем, что перевел всю рамблер почту с freebsd на linux (несколько сотен машин), потому как не смог осилить настройку freebsd

Но у меня то одна машина.

Чувствуешь разницу?)

Вот смотри. У меня есть проблема, которая в принципе

пока не актуальна и всплывёт позже

Я не знаю как её решать (с твоешь помощью теперь знаю, за что тебе спасибо)

У меня везде стоят линкусовые дистры, кроме этого сервака.

В интернетах ощутимо больше актуальных статей на эту тему по линксу, чем по freebsd

Почему бы мне тогда действительно не сменить дистр. И, если это не поможет, ковырять уже его

18:23 <[Marael]> а если свичи одинаковые по железу, но различаются лицензией (LAN Lite и LAN Base) это один и тот же объект в инвентори или создавать отдельный?

Один

SomovIS, ок, тогда еще вопрос, у свича 2 объединеннных порта, т.е. если не вставлена sfp, то работает медный, если вставленна, то работает оптика, нок это различает?

Надо профиль железки посмотреть, о какой идет речь?

Ты имеешь в виду комбинированные порты? Media type Rj45/sfp?

ага

WS-C2960-48TC-L

А откуда у 2960 комбо порты?

Или я совсем упоролся..

SomovIS, у меня WS-C2960-48TC-S

http://www.telb.kz/upload/iblock/87d/87d4684e35b77a6dcf7234baddb60211.jpg

походу просто конфиг не правильный в ноке, т.к. WS-C2960C-8TC-L прописано 2 варианта

connections": [ { "description": "Gi0/1", "direction": "i", "gender": "f", "name": "Gi1_sfp", "protocols": ["TransEth100M", "TransEth1G"], "type__name": "Transceiver | SFP" }, { "description": "Gi0/1", "direction": "s", "gender": "f", "name": "Gi1", "protocols": ["10BASET", "100BASETX", "1000BASETX"], "type__name": "Electrical | RJ45" },

Так должно быть

значит шаблон не полный, поправлю тогда завтра

SomovIS, я дописал в шаблон свою железку, она из неизвестных пропала, и в инвентори ее тоже нет

где ее искать? :)

collections update, если не ошибаюсь.

SomovIS, а это где?

https://kb.nocproject.org/plugins/servlet/mobile#content/view/3211548

https://kb.nocproject.org/display/DEV/ObjectModel

SomovIS, спасибо

Уважаемые коллеги, может все таки кто-нибудь ответит, как в последней версии noc собрать активатор для работы на удаленном сервере?