Управление информацией

[zexo.livejournal.com]

В ходе работы на нескольких проектах в последные пару лет у меня в полный рост встала проблема организации данных. Причем, если в первый год из этой пары приходилось работать с тщательно структурированными данными, которые были заботливо сложены в различные базы, то на самом последнем проекте вся входящая информация была представлена в Excele, причем в разных форматах.
В связи с таким бедствием тройка вопросов:
1. Есть ли в принципе дисциплина "Управление информацией" или "Управление данными"?
2. Если есть, как ее обычно зовут? Ну и подскажите какое-нибудь посвященное ей жж-сообщество/форум/блог/сайт/любой Интернет-ресурс.
3. Если статьи или книги, посвященные этой теме?

Comments

Re: Самому интересно стало.

[zexo.livejournal.com]

спасибо

Re: Самому интересно стало.

[ex-koryavi.livejournal.com]

Видимо,вам нужно что-то типа opensource СУБД,пользовательский вариант?

Немного не понимаю сути хранимых данных и необходимых операций с ними (у меня,правда,один большой экселевский файл с разворачивыемыми меню и кучей страниц+ ежемесячные обзоры периодики в .doc, которые я потом конвертирую в .html)

Re: Самому интересно стало.

[zexo.livejournal.com]

Нет, задача такая: есть много файлов. Каждый день присылают кучу новых данных, они конвертируются в один формат. Для сконвертированных данных поддерживается версионность (то есть мы хотим иногда вспоминать, какая была картина мира в прошлую пятницу). По этим данным происходит некий расчет -- то есть данные прогоняются через модель из нескольких Excel-файлов, результаты опять представляют из себя файлы в едином формате с версиями. Плюс время от времени генерируются отчеты. Помимо стандартных форм отчетов иногда просят особенные (а давайте так данные сгруппируем, а давайте в профиль посмотрим).
Хочется сохранять все. То есть отдельно входящие данные, отдельно версии унифицированного хранилища, отдельно модель (над моделью тоже идет творческая работа), отдельно результаты. Требуется всегда знать, откуда появился каждый файл, на каких исходных данных какой версией модели он считался, какая была логика исходящего отчета.
Если слишком сумбурно, напишите, попробую описать поструктурированнее.