» Cisco Unified Communications

Цитата:

Добавлено:
По логу одна ошибка, и ее вроде как устранило.
Ребут саба делал ?

Нет еще жду, 2-ку, а она нехочет появляться, ребутнуть Саб?

Давай сначала все остальное проверим:

Ciso Unified Reporting - Replication Server List
Проверить секции:

/etc/hosts

.rhosts

sqlhosts

С консоли на пабе и сабе сказать utils diagnose test
и проверить секцию NTP и DNS (если настроен)

Очень странно что он не смог установить правильную версию с ноля.

Добавлено:
Еще нужен utils service list с паба и саба.

Цитата:

Ciso Unified Reporting - Replication Server List
Проверить секции:

/etc/hosts

.rhosts

sqlhosts

https://www.dropbox.com/sh/v6d1sobazrp2xvb/AAA7tqPrf1X4mRDfGjxzf0TKa?dl=0

Неужели все из-за старого CUP сервера который висит в кластере?

10.100.4.8 ?
вообще у меня поднялся нормально с 8.6 до 10.5 , но у меня сервер живой был.
потом сносил и переделывал заново. уже на 10.5 IM&P
Все остальное судя по логам в норме.
Если он мертвый - то есть предложение его выпилить, еще раз прогнать тесты и убедиться что ошибка ушла, далее проверить репликацию, и при необходимости ее сбросить.

Да, немогу найти как его выпилить

System->Application Server

Оттуда убрал, просто пока саб не перезагрузил он светился в OS Admin\Show\Cluster

utils diagnose test без ошибок проходит ?

Angels
А как вы узнали что база разъехалась, смысле на что смотреть надо?

Добавлено:
admin:utils diagnose test

Log file: platform/log/diag3.log

Starting diagnostic test(s)
===========================
test - disk_space : Passed (available: 2243 MB, used: 11693 MB)
skip - disk_files : This module must be run directly and off hours
test - service_manager : Passed
test - tomcat : Passed
test - tomcat_deadlocks : Passed
test - tomcat_keystore : Passed
test - tomcat_connectors : Passed
test - tomcat_threads : Passed
test - tomcat_memory : Passed
test - tomcat_sessions : Passed
test - validate_network : Passed
test - raid : Passed
test - system_info : Passed (Collected system information in diagnostic log)
test - ntp_reachability : Passed
test - ntp_clock_drift : Passed
test - ntp_stratum : Passed
skip - sdl_fragmentation : This module must be run directly and off hours
skip - sdi_fragmentation : This module must be run directly and off hours
test - ipv6_networking : Passed

Diagnostics Completed

admin:


Добавлено:
Только пока саб не встает на статус 2. Заново проделать всю проделать все?

Да. Давай еще раз.

Не помогает,
admin:utils dbreplication runtimestate

DB and Replication Services: ALL RUNNING

Cluster Replication State: BROADCAST SYNC Completed on 1 servers at: 2014-09-23-17-37
Last Sync Result: SYNC COMPLETED 541 tables sync'ed out of 541
Sync Errors: 2 Errors or failures were found
Use this command to see the output - file view activelog /cm/trace/dbl/2014_09_23_17_37_06_dbl_repl_cdr_Broadcast.log

DB Version: ccm8_6_2_10000_14
Number of replicated tables: 541

Cluster Detailed View from PUB (2 Servers):

PING REPLICATION REPL. DBver& REPL. REPLICATION SETUP
SERVER-NAME IP ADDRESS (msec) RPC? STATUS QUEUE TABLES LOOP? (RTMT) & details
----------- ------------ ------ ---- ----------- ----- ------- ----- -----------------
CUCM8 10.100.X.A 0.049 Yes Connected 0 match Yes (3) PUB Setup Completed
CUCM8Sub 10.100.X.B 0.276 Yes Connected 0 match No (4) Setup Completed

А можно удалить саб, обновиться на 10.5 а потом заново поставить Саб?

1. Сетап валился на работе с таблицами. Причем по таймауту. Либо по кривому выводу результатов работы скрипта.

Какие самые очевидные причины ?
1. Тормозной сторадж. Отмели.
2. Большая нагрузка. Отмели.
3. Проблемы с самой базой.
Крутим п.3
Проверяем правильность конфигурации системы - все в норме.
Проверяем службы - службы работают.
Проверяем репликацию - сбой.
Вообще сбои репликации проявляются и по-другому, но возможно их не замечали.
Теперь мы пытаемся восстановить репликацию.
Вообще меня смущает что она после сброса не прошла, причем часть таблиц криво доехала с саба до паба. такое ощущение что что-то с сетью, хотя пинг в норме.
Если репликация не встанет - следующий шаг дропнуть cdrdb.


Добавлено:
Страшно с одной нодой если система в продакшене.
И не факт что оно после апгрейда заработает.

Что говорит utils dbreplication status на пабе и сабе ?

Добавлено:
В общем план Б:
utils dbreplication stop на сабе
ждем выполнения команды
utils dbreplication stop на пабе
ждем выполнения команды
utils dbreplication dropadmindb на пабе
ждем выполнения дропа
utils dbreplication dropadmindb на сабе
ждем выполнения дропа
utils dbreplication reset all на пабе

посматриваем за процессом через utils dbreplication runtimestate

admin:utils dbreplication status

-------------------- utils dbreplication status --------------------

Replication status check is now running in background.
Use command 'utils dbreplication runtimestate' to check its progress

The final output will be in file cm/trace/dbl/sdi/ReplicationStatus.2014_09_24_10_02_27.out

Please use "file view activelog cm/trace/dbl/sdi/ReplicationStatus.2014_09_24_10_02_27.out " command to see the output
admin:utils dbreplication runtimestate

DB and Replication Services: ALL RUNNING

Cluster Replication State: Replication status command started at: 2014-09-24-10-02
Replication status command in PROGRESS 247 tables checked out of 541
Processing Table: ccdhosteddngroup

Use 'file view activelog cm/trace/dbl/sdi/ReplicationStatus.2014_09_24_10_02_27.out' to see the details

DB Version: ccm8_6_2_10000_14
Number of replicated tables: 541

Cluster Detailed View from PUB (2 Servers):

PING REPLICATION REPL. DBver& REPL. REPLICATION SETUP
SERVER-NAME IP ADDRESS (msec) RPC? STATUS QUEUE TABLES LOOP? (RTMT) & details
----------- ------------ ------ ---- ----------- ----- ------- ----- -----------------
CUCM8 10.100.X.A 0.048 Yes Connected 0 match Yes (3) PUB Setup Completed
CUCM8Sub 10.100.X.B 0.358 Yes Connected 0 match No (4) Setup Completed
Приступаю к плану Б

Добавлено:
Уважаемый Angels
После дропа, вроде все стало на место,
admin:utils dbreplication runtimestate

DB and Replication Services: ALL RUNNING

Cluster Replication State: REPLICATION RESET all Started at 2014-09-24-11-51
DB Version: ccm8_6_2_10000_14
Number of replicated tables: 541

Cluster Detailed View from PUB (2 Servers):

PING REPLICATION REPL. DBver& REPL. REPLICATION SETUP
SERVER-NAME IP ADDRESS (msec) RPC? STATUS QUEUE TABLES LOOP? (RTMT) & details
----------- ------------ ------ ---- ----------- ----- ------- ----- -----------------
CUCM8 10.100.X.A 0.034 Yes Off-Line N/A match Yes (2) PUB
CUCM8Sub 10.100.X.B 0.185 Yes Off-Line N/A match Yes (2) N/A
Однако после рестарта Саба, все статус на пабе бывает то (0) Setup Requested, то (0) Setup in Progress, Саб как то подтолкнуть надо чтоли ? или подождать надо немогу понять?

ждать
должен сам устаканиться

Цитата:

CUCM86 login: unix_chkpwd[25185]: could not get username from shadow (root))

Rabotnik67 просвети что сделал, так как у меня такая же бага.
SELinux завалил?

Уважаемый Angels

Цитата:

ждать должен сам устаканиться

Не помогло, есть какие то другие идеи?

VusalH
ребут паба разве что. мож у него что заклинило
а в каком состоянии оно сейчас колбасится ?


следующее - развернуть еще одного саба и посмотреть что будет с ним, чтобы понять что и где сломалось (в пабе или сабе)
потому как если саб новый не поднимется то встанет вопрос о переустановке паба в отсутствии рабочей копии паба

Angels
Состояние 2 на 2 но есть 3 еррора, чуть позже покажу, пока перезагружаю паб, потом ребутну саб, и выложу ответ.
А если придется переустановить паб? как быть с конфигами? DRS-ом backup-restore?

Добавлено:
admin:utils dbreplication runtimestate

DB and Replication Services: ALL RUNNING

Cluster Replication State: BROADCAST SYNC Completed on 1 servers at: 2014-09-26-12-38
Last Sync Result: SYNC COMPLETED 541 tables sync'ed out of 541
Sync Errors: 3 Errors or failures were found
Use this command to see the output - file view activelog /cm/trace/dbl/2014_09_26_12_37_25_dbl_repl_cdr_Broadcast.log

DB Version: ccm8_6_2_10000_14
Number of replicated tables: 541

Cluster Detailed View from PUB (2 Servers):

PING REPLICATION REPL. DBver& REPL. REPLICATION SETUP
SERVER-NAME IP ADDRESS (msec) RPC? STATUS QUEUE TABLES LOOP? (RTMT) & details
----------- ------------ ------ ---- ----------- ----- ------- ----- -----------------
CUCM8 10.100.X.A 0.039 Yes Connected 0 match Yes (2) PUB Setup Completed
CUCM8Sub 10.100.X.B 0.199 Yes Connected 0 match Yes (2) Setup Completed

Это уже лучше. Ща напишу как попробовать вручную пнуть синк.
С бэкапом - да. Через DRS с полследующей переливкой прошивок через тфтп.


Добавлено:
Это уже существенно лучше - есть устойчивая логическая связь между нодами.
После ребута нод, после того как обе встанут в (2) Setup Completed попробуй так:
На сабе:
utils dbreplication repair all
и смотреть за прогрессом через utils dbreplication runtimestate

По идее оно должно восстановить таблицы.

Angels
На сабе не запустилось, пришлось запустить на пабе:

admin:utils dbreplication runtimestate

DB and Replication Services: ALL RUNNING

Cluster Replication State: Replication repair command started at: 2014-09-26-14-20
Replication repair command COMPLETED 541 tables processed out of 541
Errors or Mismatches Were Found:

Use 'file view activelog cm/trace/dbl/sdi/ReplicationRepair.2014_09_26_14_20_05.out' to see the details

DB Version: ccm8_6_2_10000_14
Number of replicated tables: 541

Cluster Detailed View from PUB (2 Servers):

PING REPLICATION REPL. DBver& REPL. REPLICATION SETUP
SERVER-NAME IP ADDRESS (msec) RPC? STATUS QUEUE TABLES LOOP? (RTMT) & details
----------- ------------ ------ ---- ----------- ----- ------- ----- -----------------
CUCM8 10.100.X.A 0.052 Yes Connected 0 match Yes (2) PUB Setup Completed
CUCM8Sub 10.100.X.B 0.166 Yes Connected 320 match Yes (2) Setup Completed

Похоже он пофиксил, теперь можно приступать к апгрейду?!

Надо добиться от него No Errors or Mismatches found.

сделай
utils dbreplication status
и посматривай через utils dbreplication runtimestate
он должен проверить все таблицы и сказать No Errors or Mismatches found. если все норм.

Сделал, не помогло

admin:utils dbreplication runtimestate

DB and Replication Services: ALL RUNNING

Cluster Replication State: Replication status command started at: 2014-09-26-15-32
Replication status command COMPLETED 541 tables checked out of 541
Errors or Mismatches Were Found:

Use 'file view activelog cm/trace/dbl/sdi/ReplicationStatus.2014_09_26_15_32_43.out' to see the details

DB Version: ccm8_6_2_10000_14
Number of replicated tables: 541

Что за ебанина неведомая.
Покажи file view activelog cm/trace/dbl/sdi/ReplicationStatus.2014_09_26_15_32_43.out

VusalH
Слушай, ну если у Тебя примари живой, чем оборачивается поднятие дополнительного Саба ???
если - он сетапица - грохни покривевший... к чему эти пляски ? Понятно хочется разобраться... Но ИМХО, уже работа для ТАСа...
:\

xktygfhnbb
я этот вариант предлагал. только в варианте добавить второго саба и проверить что репликация живет и проблема не в пабе. после этого мочить первого.
случай интересен в первую очередь тем что тут достаточно много народу у кого по тем или иными причинам нет доступа к таку и такая хрень может запросто случиться после череды откатов, и как выгребать не очень понятно.
или как альтернатива - сделать с паба drs бекап, перенести паба и саба в новый изолированный влан, в голосовом поднять паба с с дрса и апгерйдить. а ту пару еще потраблешутить.
в общем вариантов масса.

Господа, давно трахаюсь с одной хренью - uccx не овторизует в cad и finesse новых агентов. Уже сделал параллельную схему с ucm и uccx, но застрял на drs бэкапе uccx, не работает и все тут. Подскажите как в базу грязными руками лазить? Я в informix ноль, но надеюсь sql в большинстве вариантов стандартный.

to xktygfhnbb
Спасибо за совет. Этот вариант у нас просматривается и уже наверное придется к нему приступить, щас еще раз попытаюсь пофиксить базу. Если не получится, то поставлю второй Саб. А пляски эти к тому что благодрая Вам ребята, я получил огромный опыт, да и вы ничем не хуже Так-а
to Angels

Цитата:

или как альтернатива - сделать с паба drs бекап, перенести паба и саба в новый изолированный влан, в голосовом поднять паба с с дрса и апгерйдить. а ту пару еще потраблешутить.  
в общем вариантов масса.

Я думаю это уже самый последний вариант будет, но идея очень хорошая! А то я уже собирался с нуля все поднимать на 10-ке.

to VusalH

за то потраченное время - уже давно можно было сделать новый 10.5 и перенести туда данные

Уважаемые,
Попытался сэкономить время, хотел поставить уже саб, но увы выдало следующую ошибку:

Что делать, есть идеи?
Я думаю поставить Паб и переносить на него конфиги, а потом обновляться, как предложил вышел Angels?!


Добавлено:
to root0


Цитата:

за то потраченное время - уже давно можно было сделать новый 10.5 и перенести туда данные

Я думал так проще будет, а разве можно напрямую с 8.6 DRS-ом переносить конфиги на 10.5?

Цитата:

а разве можно напрямую с 8.6 DRS-ом переносить конфиги на 10.5?

нет, нельзя.
сначала восстановление, потом апгрейд.


Цитата:

Что делать, есть идеи?

маки, айпишнеги. надеюсь новые ??? что в логе-то ?