Сохранение любого документа из базы в файл (резервная копия), восстановление документа из файла




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

15 Comments

  1. bsturtle

    Интересная штука.

    скажите . движения сохраняет/восстанавливает? или только реквизиты и табличные части?

    Reply
  2. PerlAmutor

    Элементы справочников сохраняет? Отсутствующие элементы справочников создает заново?

    Reply
  3. XSlava

    Движения сохраняет, восстанавливает. При формировании файла, для ссылочных типов сохраняется только ссылка на элемент. Как следствие при восстановлении если элемент удален, то будет восстановлена только ссылка на элемент, а не сам объект. Но и такую задачу можно решить, только объем файла увеличиться.

    Reply
  4. KolBbl4

    Это так скажем часть функции которые используются при конвертации данных? Структуру бы самого импортированного xml-файла посмотреть)

    Reply
  5. XSlava

    Нет это не часть функции которая используется при конвертации данных, при сохранении (восстановлении) до банального все просто. Файл примера прикладываю.

    Reply
  6. madonov
    Reply
  7. XSlava

    Нет не старое доброе, это сложно. Есть фабрика, которая делает все за программиста. Механизм версионирования не очень серьезная вещь. У нее есть два недостатка, с которыми я столкнулся, версия храниться в базе (увеличение объема базы) нужно периодически чистить. Самое главное, если сначала сохранить версию объекта, затем изменить структуру объекта, добавить реквизит или изменить тип у какого нибудь реквизита, то версия не восстановится. Это не позволяет в динамически развивающихся базах (на этапе внедрения, разработки) использовать механизм версионирования. Я от него отказался. Для небольших баз и типовых решения без обслуживания программиста, это удобно, но не более. Это мое личное мнение.

    Reply
  8. Artem-B

    (6) На больших объемах данных пробовали БСПшное версионирование включать? Автору плюс, вроде просто, но очень полезно

    Reply
  9. XSlava

    У нас основная база 50 Gb, включили для одного документа. Когда понадобилось восстановить документ, через полгода, не смогли. В документ были добавлены новые реквизиты, отключили версионирование и забыли о нем.

    Reply
  10. buganov

    (8) база 3Тб. Версионирование на основные документы включено. Нормально работает. Если не брать в расчет fastinfoset и баг в платформе с составными реквизитами. УТ 11.0, 8.2.19.130, SQL 2016.

    Reply
  11. XSlava

    Так все таки «баги» есть в типовом решении. В типовом решении хорошо выглядит сравнение версий. Объем базы важен для тестирования и различных проверок.

    Reply
  12. Ramzay82

    Спасибо, может пригодится

    Reply
  13. Жискар

    Возникла острая необходимость в обработке.

    Применил для выгрузки операции. Операция огромная 1330 записей.

    Получил ошибку: Ошибка доступа к файлу

    Попробовал выгрузить на другой базе, результат тот же.

    Можете помочь?

    Reply
  14. XSlava

    (13) Помочь могу, у меня нет таких объемных операций.

    Предлагаю два варианта:

    а. Я подключусь удаленно и с помощью отладчика на вашем ПК проверю и внесу изменения.

    б. Сохраняете базу и выкладываете на яндекс диск, я ее от туда забираю и тестирую.

    Моя почта Konors2007@ya.ru.

    Reply
  15. XSlava

    (13) Попробуйте в строчке №173

    В место строки:

    ТаблицаЗаписей.Вставить(«Строка_»+НомерСтроки, СтрокаТаблицы);

    Вставьте вот эту строку:

    ТаблицаЗаписей.Вставить(«Строка_»+Формат(«»+НомерСтроки,»ЧГ=0»), СтрокаТаблицы);

    Должно заработать.

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *