Есть файлик с данными 17мб весом, в котором содержится 1 000 000 записей, каждая на новой строке. Мне надо обработать эти данные, порциями по 1000 записей. Как лучше сделать? Может их в базу данных перенести?
Это может означать все что угодно Надо вытащить из файла 1000 строк, запомнить какая была последней, сделать со строками все что угодно и вывалить в браузер. После рефреша, вспомнить, какая строка была последней, и проделать то-же самое (все что угодно со следующими 1000 строками. И так сделать 1000 раз, пока не закончится файл
Проблема отпала. Только что обрабатывал файлы логов на 100 000 записей, тоже 17 метров - весь файл обрабатывает за пару секунд.