andrey10Здравствуйте. Есть большой лог файл весом более 30 гб и сайт на php, который записывает действия пользователей и дату. Мне нужно каким-то образом более-менее быстро искать в нем записи по дате и выводить их в админке.

Примерный запрос: "найти сообщения с 12-03-2016 12:20:00 до 12-03-2016 12:35:00" (диапазон поиска всегда не более 15 минут).

У меня имеются несколько способов решения задачи:
1. Самый очевидный способ - это засунуть лог в базу. Только я не знаю, стоит ли так делать. Не зря ведь большие логи не хранят в бд.
2. Открыть shell_exec и grep'ать. Но это не подходит. Бывает на операцию уходит 20 секунд, учитывая, что на сервере стоит ssd диск, а мне нужно делать это быстрее.
3. Разбить лог на много маленьких файлов по дням из даты в имени, а php определять какие именно файлы нужно открывать (их максимум 2 может быть).

Может быть вы мне еще что-то подскажете? Спасибо.

Как еще один альтернативный вариант.
Завести еще один файл,
в котором кроном дописывать в конец дату-время и смещение от начала файла( размер )
на эту дату-время.
Найдя период в маленьком файле, из большого файла dd -хой выкусывать
период по смещению и передавать грепу...
Что бы было проще искать вхождение в диапазон , даты можно
хранить как количество секунд с начала эпохи...