Samara24.Форум /Компьютеры Интернет Связь / Программирование /

PHP + MySQL

Печать RSS Деревом

PN
ЙА ТИГОР
Сообщений: 8120
24.08.05 14:46
Есть, в общем, проблема... На сервере лежит файл *.csv. Надо данные из него закинуть в таблицу в MySQL. Так вот, написан скрипт, запускается из браузера, и, используя fgetcsv(), он забрасывает строки в таблицу. Если в файле строк немного, ну, положим, около 400 - все нормально добавляется... Если же строк больше, а теоретически, их может быть 8-10 тысяч, но проверялось реально на 5 тысячах, то работа скрипта прерывается по таймауту, браузер выводит пустоту вместо сообщения об окончании процесса... В таблице максимум 700 записей появляется...
Как обойти проще всего?
Вариант с разбивкой файла на несколько не предлагать - не устраивает...
Кто яростно ненавидит мотоциклистов тот сам латентный мотоциклист.
КопироватьСсылка
Рассказать друзьям
=SmasH=
veteran
Сообщений: 1507
24.08.05 15:15Ответ на сообщение PHP + MySQL пользователя PN
set_time_limit() ?

как вариант попробовать load data infile через CGI или ещё лучше с консоли. Или набодяжить phpMyAdmin.
КопироватьСсылка
Рассказать друзьям
Почтальон Печкин
Анонимный пользователь
24.08.05 20:02Ответ на сообщение PHP + MySQL пользователя PN
Может и не самое простое, но как вариант:

Запускать PHP программу, производящую конвертацию как отдельный процесс из скрипта. Программа будет сигнализировать о своем окончании например выставив флаг в базе. При желании можно вообще прогресс там выставлять, чтобы на страничке можно было писать "столько-то записей добавлено" (а скрипт будет проверять/обновлять периодически прогресс), при большом времени исполнения это может иметь смысл. С set_time_limit() простое решение, но нужно заведомо знать максимальное время исполнение скрипта.

ЗЫ. В PHP практически не шарю
КопироватьСсылка
Рассказать друзьям
PN
ЙА ТИГОР
Сообщений: 8120
25.08.05 09:10Ответ на сообщение Re: PHP + MySQL пользователя =SmasH=
В общем, на локально установленном Apache+PHP+MySQL с дефолтными настройками все заработало с добавлением set_time_limit(). Как оно будет работать на чужом сервер - покажут тесты...
PHPMyAdmin на такой большой файл с запросами реагирует скотски - обрывается в 404 Not Found
Кто яростно ненавидит мотоциклистов тот сам латентный мотоциклист.
КопироватьСсылка
Рассказать друзьям
Роман Петров
member
Сообщений: 75
26.08.05 14:29Ответ на сообщение Re: PHP + MySQL пользователя PN
еще наверное по умолчанию стоит максимальный размер загружаемого файла 2мб
КопироватьСсылка
Рассказать друзьям
PN
ЙА ТИГОР
Сообщений: 8120
26.08.05 15:11Ответ на сообщение Re: PHP + MySQL пользователя Роман Петров
Стоит, но это некритично - тестовый файл в 12 килозаписей занимает 1.2 метра. Плюс планируется загрузка по FTP, ибо так проще...
Кто яростно ненавидит мотоциклистов тот сам латентный мотоциклист.
КопироватьСсылка
Рассказать друзьям

Samara24.Форум /Компьютеры Интернет Связь / Программирование /

Перейти в форум

открыть в новом окне

Модератор:

flopic