Оценить данную аргументацию можно только дополнив конкретными цифрами.

Наскоро поискал цены на SAS диски: от 7 до 32 рублей за гигабайт. Если размер распознанной страницы в формате pdf 100 килобайт, то миллион страниц займёт 100 Гб и соответствующее место на жёстком диске будет стоить 3200 рублей (я взял максимальную из найденных цен). За какое время база будет прирастать миллионом страниц? Думаю, в большинстве случаев правильно будет сказать - более года или много более года. 3200 рублей в год за место на диске SAS это очень дорого?

Аргументация насчёт нагрузки выглядит справедливо. К сожалению, нет количественных оценок.

При использовании относительных путей в достаточно длительной перспективе есть проблема масштабируемости. Если изначально выбрали маленький жёсткий диск и постепенно забили его текстами, как с минимальным временем отключения системы решить проблему?

Стоит подумать, возможно удобны и масштабируемы были бы относительные пути, но связанные не обязательно с папкой БД, а с некоторым параметризуемым местоположением.

Я не понимаю, о какой масштабируемости ты говоришь? Какая масштабируемость? Место под тексты? тогда как тут помогут относительные пути? Ну не понимаю я.

Проводить тесты для подтверждения приведенных показателей считаю не рациональным. Там разница будет в мелочи на самом деле, но это не значит, что этими замечаниями можно пренебречь, чтобы не делать по уму :).

Панев Максим написал(а):
-------------------------------------------------------
> По какой причине?
> 1. Резервная копия у нас делается созданием образа
> диска, а не простым копированием. По этому
> увеличение размера образа на 15ГБ ничем вообще не
> оправдано.
> 2. Сервер специально проектировался так, чтобы
> быстро меняющиеся данные и статичный контент
> лежали на разных дисках. Размещать полнотекстовый
> архив на SAS дисках, цена которых за гигабайт
> достаточно велика, это совершенно не приемлемо.
> 3. При доступе к полным текстам дергать диск, на
> который и так ложиться очень большая нагрузка от
> каталогизаторов и веба, это опять же не правильно.
> Вот и всё.
>
> Этих причин должно быть достаточно. Если нет, то у
> меня больше нет аргументов.
>
> По поводу доступа к полным текстам из сети и через
> интернет. Проблема в том, что изначально пути
> делились на абсолютные и относительные. Это была
> стратегическая ошибка. Пути должны быть только
> абсолютные и никакие больше.


Подключусь к Максиму, я с ним не просто согласен, более того уже убедился на своем сервере к чему это привело...

Стоит у нас сервер Крафтвей 100, у него было 3 скази диска.
Один уже вышел из строя и стоимость за 1 гигабайт составил не 32 рубля,
а 43 и то по московским ценам,но это не главное, пропал весь ирбис и востановлению не подлежит.

Дело даже не в 43 рублях,а в том что данную вещь при хорошем раскладе в наших "джунглях" я получу через месяц, а оплатят еще через месяц...
Одно слово бюджет и поэтому хотелось бы добротности...

хорошо копирование было в сеть, но там нет полнотекста :(

на сегодня копия только ирбиса у нас 1600 mb, а добавлю полнотекст?
там порядка 50 Гигов, как копию ирбиса сохранять?

Сохраняем только /Datai



Редактировано 2 раз. Последний раз 26.05.2011 07:32 пользователем ferrum.

Не надо сохранять директорию datai! В каждой директории БД есть два файла, которые надо сохранять - имя БД.mst + имя БД.xrf. Можно еще, как и положено, резервное копирование делать через Администратор. Это один файл.

ochagova написал(а):
-------------------------------------------------------
> Не надо сохранять директорию datai! В каждой
> директории БД есть два файла, которые надо
> сохранять - имя БД.mst + имя БД.xrf. Можно еще,
> как и положено, резервное копирование делать через
> Администратор. Это один файл.

Я бы рад, но это все ручками , а мне в отпуск скоро...
у меня стоит программа резервного копирования, она останавливает
ирбис в 18:00 и копирует все по указанному пути со сжатием в rar

но раз подругому никак, радмин мне в помощь. :(



Редактировано 1 раз. Последний раз 26.05.2011 11:02 пользователем ferrum.

Ни что не мешает сделать пакетное задание для АРМа Администратор и поставить его в задание. А по расписанию копировать выгрузку куда-нибудь в каталог с меткой времени.

МАксим!

Уважаемый, подскажи как это сделать буду очень благодарен.
Если есть скрипт то кинь на почту, пожалуйста.
Ну очень надо.

Я пока все папку сохраняю, а размер огромен :(

С уважением, Евгений.

Инструмент тут [irbis.gpntb.ru].
Инструкции в Общем описании системы в разделе про АРМ Администратор. А конкретно в той его части, которая рассказывает про пункт меню "Сервис - Выполнить пакетное задание". Готового примера нет, поскольку лично у меня на сервере сохраняется дельта диска Семантеком, а не только каталог с Ирбисом.

Хочется так же подметить, что в твоем случае я рекомендую сделать так же, поскольку суммарный объем данных у тебя очень велик. Каждый раз делать полную копию не рационально совершенно. Да и оправдано ли постоянно сохранять такой объем? У тебя рабочая база что ли много весит? Каков объем тех баз данных, которые подвергаются ежедневной корректировке (RDR, RQST, каталог)?

По поводу архивирования - копировать папку ДАТАИ все же надо, так как по мимо самой БД там хранится тьма доработок, которые делаются в библиотеки. Другой вопрос, что это надо делать редко. Оптимально раз в месяц копировать всю директорию ДАТАИ, а каждый день на автомате копировать только файлы документов нужных БД.

Возвращаясь к вопросу о полных текстах. У нас две БД: Электронный каталог и Полнотекстовая БД. Если я использую относительные пути, то файлы должны лежать в директории БД. А если я хочу, что бы и в БД ЭК были ссылки на полнотекстовые версии документов, и сама база полных текстов работали, то мне прийдется дважды скопировать все тексты?

Ссылка ссылается на саму себя!?

Полагаю, что файлы должны лежать только в директории электронного каталога. Если Полнотекстовая БД создана в режиме "...из ЭК", то тексты в Полнотекстовой будут видны. Если речь о WEB, то последнее слово за Соколинским.

Доброй ночи.Я сопровождаю программу Ирбис в Казахстане город Актобе
ЗКГМУ им.Оспанова.меня интересует банальный вопрос как сделать так
чтобы pdf документ находил по тексту.Я пользовался ковертором и
преобразовывал файл с распознаванным тестовым слоем,но у меня не все
документы находит, примерно из 10 документов по тексту находит
6,пользовался разными конверторами,но те документы которые не находит
как только не пробовал конвертировать,в чём может быть проблемы
подскажите,как можно в базе задать текст для поиска конкретного
документа или какой нужен конвертор,какой конкретный фортмат нужен или какой либо ещё способ.Буду
искрени благодарен за помощь

Прикрепите к сообщению файл, который у вас категорически не находится.

а как это сделать уточните действия если не сложно пож-ты,txt файл лепить?через какую прог-му и т.д.

К сообщению на форуме можно прикрепить файл. Что у вас вызывает трудности?

я с подобными программами встречался очень редко,но принцип мне вроде бы понятен,я хотел уточнить все ньюансы,какой программой крепить,насколько я понял нужно к pdf файлу прекрипить txt???

Нет, вы о чем-то не о том думаете. Когда вы пишете сообщение на форум, над окном сообщения выше кнопок форматирования есть ссылка "Прикрепить файл...". Я вас просил прикрепить файл, который вы помещаете в полнотекстовый Ирбис, и который не находится поиском. Видимо это PDF файл. Никаких TXT прикреплять не нужно (если вы, конечно, в качестве полных текстов используете PDF, а не TXT).

Панев Максим
Человек, наверное, в такие дебри ушел, что простые вопросы кажутся сложными.
guesswho
Какие конверторы использовали? Не каждый конвертор корректно сохраняет pdf-файл c OCR-слоем.
Также после OCR могут возникать ошибки. Например, в вы пытаетесь найти слова из книги (и вводите так как в книге), а слово в слое совсем другое. Вот и не находит.



Редактировано 1 раз. Последний раз 15.06.2011 16:30 пользователем woodyfon.

Есть еще один момент: человек из Казахстана. Возможно в файле просто напросто национальная кодировка и проблемы связаны с ней.

Панев Максим
Очень даже может быть. Сначала и не подумал.
В общем ждем файл. Самому интересно.

Вот образец,я раньше не сталкивался с подобными файлами,не судите строго :-),С казахским шрифтом тоже некоторые находит,а некоторые нет,мне подойдёт такой вариант чтобы ввести отдельный текст для поиска "Название" это основное,ну и лучше чтобы грамотно распознать остальной текст

Возможно, неудача связана со свойствами этого файла - см. Doc0.
В вашем случае надо воспользоваться технологией "Искать текст-подложку".
Для этого сохраните PDF как текст с именем основным + .txt - см. Doc1. При добавлении текста включить чек "Искать...", как на Doc1. Тогда словарь создается - см. Doc3

Если сохранить как txt то этот файл можно редактировать,а этот вариант к сожелению не подходит(((

Но текст pdf, отображенный на экране, также можно выделять, сохранять и редактировать.
Кроме того, если у "вредителя" есть доступ к файлу txt, то у него есть доступ и к файлу pdf, и наоборот.

я имею в веду что можно непосредственно в полнотекстовой базе читатель открывать файл в тхт формате и там его редактировать и сохронять,а pdf нельзя редактировать,не из папки а из читателя,что можно сделать поскажите пож-та какие есть варианты,как можно проще,уже незнаю что делать*((

В чем трагедия, если кто-то отредактирует фай txt? Он нужен только для того, чтобы сформировать словарь ключевых слов, по которым будет искаться файл pdf. Ну, уйдут одни ключевые слова, добавятся другие. Это всего лишь инструмент для основного PDF.

Максим, не Семантек, а Симантек, к тому же это название фирмы, у которой не один продукт...
И еще меня критикуете... не учи ученого, съешь файлА печеного... меня. потомственного редактора...



Редактировано 1 раз. Последний раз 03.04.2012 07:01 пользователем Lavrinovich.

Я не могу установить Ирбис 64 2008. полнотекствую БД, у меня нету, хорошей инструкции, не могли бы ВЫ мне скинуть подробную инструкцию, по установки и работы в нем(соединения с ini файлами), а так же WEB-Ирбису

Установка ИРБИС для полнотекстовых баз данных выполняется просто: необходимо запустить установщик - файл setup64_FullText.exe. Некоторые особенности развёртывания ИРБИС ПБД см. на вики.

Инструкция по установке веб-ИРБИС (в том числе ПБД) тоже есть на вики. Все вопросы по Веб-шлюзу ИРБИС, в том числе и по его установке, рекомендую задавать в соответствующем разделе форума Web Ирбис и Z-Ирбис.

Насчёт "соединения с ini файлами" - объясните, что имеете в виду.



Редактировано 1 раз. Последний раз 27.03.2012 12:15 пользователем SokV.

Национальная кодировка. Но большинство букв совпадают с русскими, что-нибудь да найдется (!?)
Вообще по моему опыту, с моей колокольни, видится, что многие проблемы на самом деле железячные, особенно в недавнем прошлом. Но судя по журналам, у многих так и сейчас (например, нужны легкие браузеры).

irbis_arbat@mail.ru



Редактировано 1 раз. Последний раз 03.04.2012 06:58 пользователем Lavrinovich.