ribamoyaНужно парсить логи ( порядка 200 - 300 гб в день ). Для этой цели есть 3 сервера. Чем лучше это делать ?
Какой из этих вариантов предпочтительнее ?
В такой общей постановке - непонятно что делать. 99% эффекта будет зависеть от того
какие запросы к логам. Если надо 1 раз в день посмотреть нарушителей безопасности - то
можно через grep посмотреть и бох ним.

Насчёт Хадупа - ничего не скажу т.к. не работал с ним. Собственно Хадуп вообще ортогонален
к этой задаче. Это скорее принцип декомпозиции дисковых ресурсов и сведения результатов.

Питонский скрипт - хороший вариант. Но чем он лучше grep - непонятно.

Переливать всё в БД - другая крайность. Зачем тогда вообще логи создавались? Непонятно.

Вобщем озвучь запросы. Наиболее важные и требующие быстрого решения.