здравствуйте,

подскажите, пожалуйста, как справиться с задачей.
пачка файлов, статистика в текстовых файлах формата Unix, архивы gz, который лежат на фтп-сервере.
формат файла, построчно : имя- значение; так по блочно через пустую строку.
количество файлов растет с каждым днем. размер одного 5Мбайт.

стоит задача оптимизировать поиск информации по нескольким параметрам внутри файлов.

на данный момент вижу решение как загрузка в базу файлов.
но вопросы по оптимизации поиска в бд, выбору субд.
и на каком языке писать парсировку файла.

буду очень рад услышать мнения специалистов.
спасибо большое.