Кто работал в базе




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

15 Comments

  1. GSoft

    откуда читает лог и при помощи чего?

    Reply
  2. waol

    шустро работает

    Reply
  3. Ёпрст

    (1) из mlg при помощи Scripting.FileSystemObject

    (2) на самом деле очень медленно. Гораздо быстрее работает ПоставщикДанныхЖурналРегистрации из 1cpp

    Reply
  4. Ёпрст

    +3 в разы быстрее.

    ЗЫ: на большом файле лога, эту обработку прервал так и не дождавшись результата.

    Reply
  5. waol

    (3) по логу в 5 М вроде приемлимо )) (несколько секунд). а вообще FileSystemObject быстрее чем создатьобъект(«текст»)? сам не проверял

    Reply
  6. Ёпрст

    +4 А так — способ боянистый:

    http://www.kb.mista.ru/article.php?id=311

    Reply
  7. Ёпрст

    (5) быстрее конечно.

    Reply
  8. Ёпрст

    (5) у меня лог почти 500 метров+ архивы..

    дык ПоставщикДанныхЖурналРегистрации может просматривать еще и архивы…. да и быстрее в разы.

    Reply
  9. waol

    500 метров — это сильно. интересно, сама 1с как его открывает ? )

    Reply
  10. Ёпрст

    (9) долго, но открывает.. а так — забыли его архивнуть просто, обычно больше 100 метров в архив.

    Reply
  11. pikul

    Спасибо всем за конструктивную критику. По поводу icpp: не используется она у нас, к сожалению, так исторически сложилось. Журнал регистрации — порядка 500 метров. Отчет строится долго, факт. Но меня это не сильно беспокоит, поскольку работы по «убиванию» неиспользуемых учеток проводятся регулярно по предоставляемой информации из отдела кадров, а проверить раз в несколько месяцев (на всякий случай) тормознутым отчетом — не смертельно.

    (8) ПоставщикДанныхЖурналРегистрации — интересно. Спасибо, посмотрю.

    (6) Статьи Romix-а меня не раз выручали.

    Reply
  12. vet7777

    кто работал в базе и всю выработал? 😉

    Reply
  13. victuan

    На форме обработки стоит дата «С:», но млг-файл лопатится всё равно с самого его начала. Не логичнее было бы перебирать млг-файл с конца, прекращая на указанной дате?

    Reply
  14. aleg

    Составить статистику «вхождений» пользователя в базу теперь стало проще. спасибо.

    Reply
  15. CheBurator

    Отразить н алинейной диаграмме (типа Ганта) вход и выход. наличие второго входа без выхода — признак крэша, отражать другим списком. точками/мелкими секциями отразить зарегенные в журнале действия (программные — не регистрируются) — получится «картина активности» пользователя(ей). может быть полезно

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *