Этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
Политика конфиденциальности
Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
28.06.2016, 11:54
|
|||
|---|---|---|---|
|
|||
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
Здравствуйте, из-за бюджетного хостинга не успевает крон обработать весь объемный csv файл. Возможна ли по кускам или менее загрузкой обработать весь файл? Буду рад любой подсказке. Спасибо. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
28.06.2016, 12:22
|
|||
|---|---|---|---|
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
От алгоритмов обработчика зависит. В общем случае, за каждый запуск правильно сделанного обработчика можно хоть по одной строке перемалывать. Как вариант, прочитать файл и запихнуть его данные целиком в таблицу БД и там уже построчно обрабатывать. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
28.06.2016, 13:29
|
|||
|---|---|---|---|
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
Syrbek, обрабатывать кусками. после каждой обработки записывать номер строки на которой остановились. и в след раз просто перематывать к ней. и после нее начинать обработку далее. а можно заранее разбить файл на более мелкие. и их уже обрабатывать по очереди ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
28.06.2016, 15:52
|
|||
|---|---|---|---|
|
|||
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
Спасибо, всем. Сменили тариф на хостинге. Жадный хостинг не давал такие возможности( Решила аренда VDS ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
28.06.2016, 16:08
|
|||
|---|---|---|---|
|
|||
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
всего-то 20 000 строк ?!? умирающий комар чихнул. и что же представляет из себя скрипт, который насилует бюджетный хостинг обработкой csv-файла в 20000 строк, любопытно? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
28.06.2016, 17:49
|
|||
|---|---|---|---|
|
|||
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
volodin661всего-то 20 000 строк ?!? умирающий комар чихнул. и что же представляет из себя скрипт, который насилует бюджетный хостинг обработкой csv-файла в 20000 строк, любопытно? Даже обычный пример РНР не до конца не дошел. Достигает лимит CPU на хостинге и вырубается молча, останавливается страница обработки. Пробовал класть файл в MySQL тоже не разрешает хостинг. А так буду рад полезным советам на будущее) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
29.06.2016, 11:23
|
|||
|---|---|---|---|
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
Syrbek, "Класть файл в MySQL" можно не только через LOAD_DATA. Скрипт в несколько строк с этим вполне справляется. Однако, если на хостинге имеется банальная проблема с чтением файла, это уже под вопросом... Что за хостинг и какой тариф? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
30.09.2016, 01:38
|
|||
|---|---|---|---|
|
|||
Как читать большой csv файл более 20 000 строк |
|||
|
#18+
vkleSyrbek, "Что за хостинг и какой тариф? Хостинг timeweb тариф Year+ Может надо разбить файл по 600 или 500 строк и по очереди залить? Может такой скрипт организовать раз уж процессы малы на хостинге? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/topic.php?fid=23&mobile=1&tid=1460907]: |
0ms |
get settings: |
11ms |
get forum list: |
20ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
141ms |
get topic data: |
11ms |
get forum data: |
2ms |
get page messages: |
44ms |
get tp. blocked users: |
1ms |
| others: | 240ms |
| total: | 476ms |
| 0 / 0 |
