Преобразование массива структур в дерево значений. Представление массива подчиненных друг другу "объектов" в иерархическом виде без использования рекурсии




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

15 Comments

  1. kirillkr

    Неужели рекурсия так много съедает ресурсов компьютера, чтобы городить такой велосипед с циклами, сортировками, опять с циклами, опять с циклами и все это в памяти.

    Reply
  2. Arxxximed

    (1)в целом использование рекурсии иногда оправдано иногда нет. Например при простом чтении дерева значений рекурсия более оправдана. Я показал Альтернативный метод, при котором не нужно беспокоится о переполнении стека. При построении же дерева в данном случае без сортировки и цикла не обойтись. Искал метод с минимальными обходами массивов.

    Reply
  3. MarryJane

    Скажите коллега, а вот можете вы привести сравнительный анализ с рекурсией и без рекурсии. И таблицу например на 100000 строк.

    Reply
  4. kiruha

    Как только у пользователя тормозит отображение списка — в 90% случаях — дерево.

    Имхо у него платформенная не оптимальная реализация.

    Лучше работать уж «массивом структур»

    Reply
  5. Arxxximed

    (4)Коллега, не понял про что Вы. Поясните! У кого платформенная реализация? и реализация чего? и почему не оптимальная?

    Задача — дать пользователю выбрать одну из его папок. Выбор лучше отобразить в виде иерархии. На входе имеется масссив структур. Подскажите как сделать по другому???

    Reply
  6. kiruha

    (5)

    Может непонятно написал, я про то что Дерево у 1С (не у вас) — то еще поделие.

    На больших объемах данных тормозит отображение ввиде этого дерева.

    В вашем случае объем небольшой, и все ОК сделано.

    Reply
  7. Arxxximed

    (6) Обязательно сделаем тесты и сравнительный анализ, как рекомендует (3).

    Воообще объемы могут быть и большие, задачи то разные бывают… Кто его знает, может и вздумается какому нибудь пользователю сделать 9000 вложенных папок в своем Google Drive.

    Reply
  8. МихаилМ

    Загрузите данные не в массив структур , а в ТЗ . Из ТЗ построительзапроса умеет делать ДЗ.

    Reply
  9. Arxxximed

    (8)В публикации это рассматривается. Смысл теряется. Мы тогда создаем дополнительный объект, который жрет память. А потом еще и использование построителя запроса… Это возможно выгодно, когда заранее известно, что объем данных ДЗ маленький. Но снова же, нужно провести сравнительный анализ.

    Только вот мне дали замечание , что я изобретаю велосипед с циклами. ТЗ же формируется тоже циклом. А потом построитель будет осуществлять поиск и сортировку. Я же показал как это сделать без промежуточного звена

    Reply
  10. karimov_m

    (9) В целом, каждый подход в реализации может быть оправдан. В данном случае — это наглядный пример, т.е. так можно написать и это будет работать стабильно, а главное — код прост как валенок, тяжело в нем сделать ошибку.

    С другой стороны рекурсия рекурсии рознь. В общем случае, рекурсию можно разделить на два типа (подхода реализации) — Головную и Концевую. Если используется второй подход, рекурсивный вызов выполняется в конце и является последней строчкой кода метода. Этот метод не использует стек вызовов независимо от глубины рекурсии.

    Reply
  11. burni4

    закинул JSON, не работает, зря качал

    Reply
  12. Arxxximed

    (11) не понял, какой JSON Вы закидывали, и как по вашему оно должно было отработать?

    Reply
  13. burni4

    (12) {

    «Comment»:»My comment»,

    «Count»:10,

    «DiskParam»: {

    «DB»:10.000000,

    «DBAngle»:1.234000 },

    «Range»:true,

    «Blades»:[{

    «Caption»:»A»,

    «Value»:65},{

    «Caption»:»B»,

    «Value»:66},

    {«Caption»:»C»,»Value»:67}],»Slots»:[0,1,2]}

    к примеру вот такой

    Reply
  14. Arxxximed

    (13) с чего вы решили, что вот этот пример , должен разобраться? ))) К чему это? это же вообще не по теме!!

    Странно требовать от болида хорошо вспахивать землю, а от трактора большой скорости на трассе.

    Купил Porsche. Слишком дорого, и людей мало помещается — зря покупал.

    Reply
  15. burni4

    (14) Задача преобразовать массив некоторых структур в дерево значений возникла, когда я получил JSON от сервиса о структуре папок пользователя.

    я скинул JSON? JSON, массив структур? массив структур — ваша обработка не смогла это прочитать. Осмелюсь предположить что вот эту часть «Slots»:[0,1,2]

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *