Ассоциация ЭБНИТ    ИРБИС-корпорация    Вики-Ирбис    Online/CHM справка Ирбис   
Полнотекстовые базы данных в Ирбис :  ИРБИС Irbis
 
Темы: <<>>
Навигация: Список темНовая темаИскатьВойти
версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 15, November, 2013 04:17

Ситуация следующая
Установили Новую версию Ирбиса 2013.1

Полнотекстовый web Ирбис работает не корректно
У нас 3 плнотекстовые базы:
1. Вестник ЛПК
2. Вечерний Усть-Илим
3. Кстати

[87.103.135.108]

Стала добавлять полнотекстовые документы и столкнулась со следующим, при первом добавлении текстов базы (например "Вечерний Усть-Илим", было добавлено 92 документа 13 файлов) работают (шел поиск, открывался постраничный просмотр), затем было добавлено еще 1026 документов из 101 файла, и после этого база работать перестала, т.е. при выборе из списка базы "Вечерний Усть-Илим" мелькает страница (адрес страницы верный, но не загружается) из вложенного файла Error request.JPG, а затем идет перенаправление уже на другую страницу (не понятно откуда берется этот адрес) и выдается сообщение из файла File not exist.JPG,
Причем экспериментальным путем выявлено что если в базу сразу добавить все эти записи, то ошибка аналогичная, возможно причина в количестве записей? хотя их не много.

Другая база "Кстати" содержит 502 документа из 41 файла добавленные за 1 раз, работает, идет поиск, открывается постраничный просмотр, происходит скачивание файла. (вложение)


Почему так происходит, в чем ошибка?

ЦГБ г.Усть-Илимск

Вложения: Error request.JPG (77KB)   File not exist.JPG (87.7KB)   База Кстати.JPG (169.4KB)  
Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 15, November, 2013 10:08

аналогичная ситуация и с тестовой базой.
с нуля установила xampp, Ирбис 64, полнотекстовый Ирбис 64, и полнотекстовый web-ирбис.
Все версии 2013.1
добавила полнотекстовый документ в тестовую бвзу и после этого появилась ошибка (вложение) и опять по не понятной причине происходит переброс на адрес /cgi-bin/irbis64r_ft_13/cgiirbis_64_ft.exe?C21COM=F&I21DBN=TEXT&P21DBN=TEXT&Z21ID=
хотя должен быть cgi-bin/irbis64r_ft_13/cgiirbis_64_ft.exe?C21COM=F&I21DBN=TEXT_FULLTEXT&P21DBN=TEXT&Z21ID=&S21CNR=5

далее если удалить добавленные документы, то проблема остается, а если после этого экспортировать данные, затем опусташить базу и произвести импорт, по проблема исчезает.

ЦГБ г.Усть-Илимск

Вложения: Ошибка.jpg (79.1KB)  
Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 18, November, 2013 12:14

А в Читателе ПБД (не веб) есть подобные ошибки?

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 19, November, 2013 01:29

В читателе все работает.

Попутно возник еще вопрос, а в версии 2013.1 работает ассоциация с текстом-подложкой?
Дело в том, что нам предоставляют полнотексты в формате pdf, текстовый слой в них распознается не корректно, ввиду того, что при создании использовались не стандартные шрифты. Для того, чтобы в полнотекстовом web-ирбисе (да и в читателе ПБД тоже) происходил поиск по тексту мы использовали текст-подложку. А вот в новой версии столкнулись с тем, что подложка не ассоциируется с файлом, и в читателе словарь вот в таком виде (см. вложения "Читатель" и "Администратор ПБД")
В предыдущей версии когда ассоциация происходила список текстов в БД выглядел следующим образом (вложение "Старый администратор ПБД") и словарь и поиск в читателе и в вебе были корректными.

ЦГБ г.Усть-Илимск

Вложения: Читатель.JPG (132.3KB)   Администратор ПБД.JPG (199.2KB)   Старый администратор ПБД.JPG (79.6KB)  
Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 19, November, 2013 10:49

Возможность использования текста-подложки вступает в противоречие с тем, что тексты PDF теперь (в 2013.1) добавляются только с разбиением на страницы.

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 19, November, 2013 20:13

А каким образом вы изготовили текст-подложку для таких PDF-файлов?

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 20, November, 2013 01:06

С помощью FineReader распознавали текст. Можно было бы конечно и сохранять потом распознанный документ в формате pdf, но полученные файлы всегда имели большой размер порядка 30МБ вместо исходных 2МБ,даже при сохранение в уменьшенном размере файл получался раза в 3-4 больше исходника. В связи с этим и стали использовать текст-подложку для экономии места на сервере.
В новой версии в связи с невозможностью использовать текст-подложку нужно будет повторно переделывать порядка 1000 полнотекстов, что не очень то радует, да и место на диске будут больше занимать, так-же что то думать надо....

ЦГБ г.Усть-Илимск

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 20, November, 2013 05:53

А как возможно добавить файлы формата djvu?
Они все таки по размеру меньше чем pdf.
В вашем тестовом варианте как можно видеть есть файлы формата djvu
librarynew.gpntb.ru

А у меня при попытки добавления, файлы не добавляются. В логах сообщение:
#Version: 1.0
#Start-Date: 2013-11-20 13:51:03.281
#Fields: date time comment
2013-11-20 13:51:17.359 "Не удалось разбить на страницы файл <uri:irbis:texts\123.djvu>."
2013-11-20 13:51:17.359 "addTextsFromFiles: не удалось извлечь страницы из файла "".\texts\123.djvu""."
2013-11-20 13:51:17.359 "Добавлено 0 документов из 1 файлов."

ЦГБ г.Усть-Илимск

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: Constantin (IP-адрес скрыт)
Дата: 20, November, 2013 14:42

После добавления текстов и создания словаря заново проведите диагностику базы данных.

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 20, November, 2013 14:55

Возможно, проблема решается обновлением утилит, использующихся для работы с файлами .djvu (IRBIS64\Converters\djvu2djvu). Вы можете прислать один из файлов .djvu, который не добавляется?

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 21, November, 2013 01:27

SokV написал(а):
-------------------------------------------------------
> Возможно, проблема решается обновлением утилит,
> использующихся для работы с файлами .djvu
> (IRBIS64\Converters\djvu2djvu). Вы можете прислать
> один из файлов .djvu, который не добавляется?

Например этот файл (вложение)
Так же сохраняла файл из вашей тестовой версии, результат аналогичный, не добавляется

ЦГБ г.Усть-Илимск



Редактировано 1 раз. Последний раз 21.11.2013 01:39 пользователем vguseva.

Вложения: 1234.djvu (879.5KB)  
Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 21, November, 2013 01:38

Constantin написал(а):
-------------------------------------------------------
> После добавления текстов и создания словаря заново
> проведите диагностику базы данных.


Если производить не актуализацию словаря, а создание словаря заново, то проблема исчезает.
Как я заметила, данная проблема (вложение File not exist.JPG из первого сообщения) возникала только в тех базах которые были созданы до установки полнотекстового web-ирбиса, те базы которые создавались уже после установки работают без таких ошибок.

ЦГБ г.Усть-Илимск

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 21, November, 2013 13:34

Вы совершенно правы насчёт баз данных, созданных до установки новой версии, и необходимости создания словаря заново для таких баз данных.

Были внесены изменения в структуру инверсного файла (словаря).

Это наше упущение, что мы не донесли информацию. Я сделаю заметку здесь на форуме.

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 21, November, 2013 14:08

Не могу понять, что за проблема у вас с файлами djvu. У меня файл 1234.djvu добавляется, словарь создаётся. Правда обнаружил проблему при показе страниц djvu в случае добавления файлов с относительными путями в обычном читателе ПБД (не веб). Этот момент я исправлю, будет обновление.

У вас версия Администратора от какого числа? При запуске в окне заставки внизу указана. Файл лежит в папке БД? Добавляете с относительным путём? В par-файле 11 строка присутствует? В папке IRBIS64 есть папка Converters? В ней есть папка djvu2djvu с шестью файлами внутри?

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 21, November, 2013 14:13

Вообще, если думаете о выборе между pdf и djvu файлами, то имейте в виду следующее. Страницы pdf преобразовываются в jpg и уже в таком виде показываются пользователю, а страницы djvu даются пользователю как есть, и требуют для показа плагина для djvu-файлов.

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: vguseva (IP-адрес скрыт)
Дата: 22, November, 2013 04:54

версия от 1.11.2013, файл лежит в папке БД, добавляю с относительными путями, папка djvu2djvu с шестью файлами внутри.
В par-файле 11 строка отсутствовала, добавила, но ситуация не изменилась.

Поставила Ирбис на другой компьютер, файлы djvu добавляются. Попробую переустановить на сервере.

ЦГБ г.Усть-Илимск

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: bibl (IP-адрес скрыт)
Дата: 02, December, 2013 10:41

в версии 13 ПБД
в Тестовой базе уже не работают словари на заглавие, автора и тд.
это по умолчанию так?
и надо самим устанавливать значения для работы словаря?

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 04, December, 2013 06:27

По умолчанию в АРМ Читатель ПБД версии 2013.1 отключена панель со словарями (irbisr_fulltext.ini, секция [DESKTOP], параметр Panel_DictionGrid_Visible).

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: bibl (IP-адрес скрыт)
Дата: 04, December, 2013 11:38

Панель мы подключили, СПАСИБО.
Имеется ввиду, что словари пустые, кроме полнотекстового словаря.
Это уже в тестовой базе.

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: SokV (IP-адрес скрыт)
Дата: 04, December, 2013 12:42

В тестовой базе к текстам не добавлены поля Dublin core, поэтому словари пустые.

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: kharlamova_n (IP-адрес скрыт)
Дата: 15, March, 2014 10:03

В версии 2013 WEB ИРБИС64 полнотекстовые БД работает поиск по запросу. Например, "степь" (см. Поиск1.jpg). Пытаемся уточнить поиск по элементам описания (Dublin Core). Пишем автора, ничего не находит (см. Поиск2.jpg). Поиск не работает. Аналогично, если искать по другим полям (название, издатель). Кстати непонятно, где в полнотекстовой базе заполнять "Индекс УДК" (поиск по этому полю присутствует).

Вложения: Поиск1.JPG (77.5KB)   Поиск2.JPG (70.8KB)  
Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: Constantin (IP-адрес скрыт)
Дата: 18, March, 2014 10:50

Скачайте обновления.
Возможно, что ошибка - в файле fst БД.
см.
[irbis.gpntb.ru]

Re: версия 2013 WEB ИРБИС64 для полных текстов
Пользователь: criogen (IP-адрес скрыт)
Дата: 21, March, 2014 08:10

Установлена версия ПБД 2013.1
успешно индексированы файлы в БД, актуализированы словари. Проблема осталась с установкой "WebИрбис 64" Для ПБД.
Устанавливалось как на IS7 так и на XAMPP

проверка строки
Цитата:
http://localhost/cgi-bin/irbis64r_ft_13/cgiirbis_64_ft.exe?C21COM=F&I21DBN=TEXT&P21DBN=TEXT&Z21ID=
возвращает: "error request!"


P.S. полученный от разработчика патч-обновление, исправил проблему. (установка поверх существующих каталогов)



Редактировано 4 раз. Последний раз 09.04.2014 03:21 пользователем criogen.



Навигация:Список темИскатьВойти
Извините, только зарегистрированные пользователи могут писать в этом форуме.
This forum powered by Phorum.