База данных с аналитикой. Записей чуть более 4 млн. Ежемесячно пакетным заданием в нее импортируется 15000-16000 записей и создается словарь полностью (словари стандартные + свои). Механизм отлажен в течение нескольких лет на нескольких версиях ИРБИС (2005-2021). Никаких проблем не возникало. После загрузки очередной партии записей все словари оказались пустыми.
Пакетное задание завершилось корректно с обычным протоколом.
Версия ИРБИС 2021 установлена более года назад. Никаких изменений не проводилось.
Диагностика БД никаких ошибок не выявила. Реорганизацию БД делали. Словари на текущую партию создаются корректно.
В чем может быть причина пустых словарей?

Подсказок не было, поэтому разбирались сами. Итог такой - начиная с некоторого количества записей в БД (в нашем случаем с 4179689 записей) импорт новых записей и создание словаря полностью, или актуализация и реорганизация словаря проходит успешно только в том случае, если в БД добавляется не более 1 тыс. новых записей. При добавлении 2 тыс. записей оба процесса завершаются пустыми словарями в АРМ Каталогизатор (сами файлы словаря при этом не нулевые).
Делить БД на части не хочется, разбивать ежемесячную партию 15-16 тыс. записей на 15 частей тоже не вариант. Какие будут еще идеи?

P.S. Тестировали также на версиях 2022.1 и 2023.1, результат тот же.

1 Какая версия серверной части irbis64 Тубро или нет?. Какая версия ОС (Операционной системы). Каков размер словаря БД. и количество свободного места на диске с серверной частью ирбис?
Денисова Лариса написал(а):
-------------------------------------------------------
> Подсказок не было, поэтому разбирались сами. Итог
> такой - начиная с некоторого количества записей в
> БД (в нашем случаем с 4179689 записей) импорт
> новых записей и создание словаря полностью, или
> актуализация и реорганизация словаря проходит
> успешно только в том случае, если в БД добавляется
> не более 1 тыс. новых записей. При добавлении 2
> тыс. записей оба процесса завершаются пустыми
> словарями в АРМ Каталогизатор (сами файлы словаря
> при этом не нулевые).
> Делить БД на части не хочется, разбивать
> ежемесячную партию 15-16 тыс. записей на 15 частей
> тоже не вариант. Какие будут еще идеи?
>
> P.S. Тестировали также на версиях 2022.1 и 2023.1,
> результат тот же.

Государственная универсальная научная библиотека Красноярского края, Ассоциация ЭБНИТ

GLUKa написал(а):
-------------------------------------------------------
> 1 Какая версия серверной части irbis64 Тубро или
> нет?. Какая версия ОС (Операционной системы).
> Каков размер словаря БД. и количество свободного
> места на диске с серверной частью ирбис?
> Денисова Лариса написал(а):

ИРБИС 2021.1 не Турбо.
ОС Windows Server 2016.
Размер словаря 4,99 Гб.
Свободного места 3,75 ТБ.

Если хотите можно попробовать подключиться и посмотреть что у Вас происходит.
Данные для подключения можно отправить на почту arnosi@mail.ru .

Денисова Лариса написал(а):
-------------------------------------------------------
> GLUKa написал(а):
> --------------------------------------------------
> -----
> > 1 Какая версия серверной части irbis64 Тубро
> или
> > нет?. Какая версия ОС (Операционной системы).
> > Каков размер словаря БД. и количество
> свободного
> > места на диске с серверной частью ирбис?
> > Денисова Лариса написал(а):
>
> ИРБИС 2021.1 не Турбо.
> ОС Windows Server 2016.
> Размер словаря 4,99 Гб.
> Свободного места 3,75 ТБ.

Государственная универсальная научная библиотека Красноярского края, Ассоциация ЭБНИТ

Подумаем. Кстати, тестировала также на локальной машине с windows 11 с достаточным свободным местом на ИРБИС 2021.1-2023.1, результат тот же.



Редактировано 1 раз. Последний раз 14.02.2024 13:25 пользователем Денисова Лариса.

А если поэтапно делать - тот же результат?
То есть:

LoadIf0
LoadIf1
LoadIf2

Иркутская ОГУНБ
ИРБИС64.21Турбо
WebИРБИС-PHP

Спасибо за подсказку. Помогло. По крайней мере, процесс с загрузкой 2000 документов завершился успешно.



Редактировано 3 раз. Последний раз 06.03.2024 08:45 пользователем Денисова Лариса.

В продолжении разговора. И снова сбой - словари пустые. Что-то ломается на этапе загрузки словаря, при этом в папке базы остается файл *.cell, который при успешном завершении процесса удаляется. В чем может быть проблема?

Еще раз предлагаю выбрать время для того, чтобы подключиться и посмотреть что у вас происходит.
Данные для подключения можно отправить на почту arnosi@mail.ru .

приложите пожалуйста скриншот. содержимого директории workdir. после такого пакетного задания.
Денисова Лариса написал(а):
-------------------------------------------------------
> В продолжении разговора. И снова сбой - словари
> пустые. Что-то ломается на этапе загрузки словаря,
> при этом в папке базы остается файл *.cell,
> который при успешном завершении процесса
> удаляется. В чем может быть проблема?

Государственная универсальная научная библиотека Красноярского края, Ассоциация ЭБНИТ



Редактировано 3 раз. Последний раз 06.03.2024 10:32 пользователем GLUKa.

GLUKa написал(а):
-------------------------------------------------------

>
> приложите пожалуйста скриншот. содержимого
> директории workdir. после такого пакетного
> задания.

Кроме протокола пакетного задания и ibf-файла в workdir ничего нет. Содержимое данной папки совершенно одинаково в любом случае.
Возникла еще одна идея для проверки, в случае неудачи будем решать вопрос с подключением.

Тему можно закрыть. Фрагментация словаря исправила ситуацию. Документация рекомендует использовать этот параметр при объеме БД более 1 млн. записей, у нас при 4 млн. с небольшим хвостиком работало все и без фрагментации.
Поэтому когда все резко поломалось, про этот параметр подумалось в последнюю очередь.