Просмотр XML




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

25 Comments

  1. Поручик

    Из пожеланий:

    1. Цвет фона сделать потемнее.

    2. Возможность сохранения дерева в XML.

    Reply
  2. MoneG2

    Самое главное, зачем писал — удобство свертки/развертки уровней — оказалось самым неудобным местом..

    Неужели в интерфейсе хотя бы до списка выбора уровней трудно было догадаться?

    Reply
  3. Valiko77

    MoneG2

    Ты сам то понял свой вопрос?

    Reply
  4. Широкий

    Что то фраза «большой хмл файл» и «дерево значений» настораживает.

    Сколько по подсчетам нужно оперативки на файл обмена в 500 метров?

    Reply
  5. iomoe

    Зачем же открывать XML в браузере? Есть специализированные программы, например, XML Notepad.

    Reply
  6. Gida

    xml очень хорошо открывает сам 1С, чем я всегда его и открывал…

    Reply
  7. Boris-Leleko

    1С не делает группировок. XML Notepad посмотрел, спасибо буду знать, но чтобы посмотреть атрибуты надо группировку разворачивать, а это не удобно. Еще попытался открыть выгрузку в 137 метров и получил ошибку… Моя обработка слишком огромные файлы тоже не открывает. Возникла идея задавать диапазон номеров узлов первого уровня которые надо показать или развернуть. Думаю сегодня реализую…

    Reply
  8. Boris-Leleko

    А вот возможность правки файла, конечно идея заманчивая, надо подумать…

    Reply
  9. Jam-Shoot

    Очень полезная обработка! Автору — респект!

    Очень помогла в разборе файла для «нетрадиционного» обмена данными.

    Пс.Пс. А вчера нашел ей еще одно применение — не смог вспомнить, сколько времени провел у клиента на прошлой неделе. Так разобрал с ее (обработки) помощью файл гарминовского навигатора и нашел время приезда/отъезда.

    Короче спасибо!

    Reply
  10. CheBurator

    Поддерживается частичная подгрузка данных по мере необходимости? или как? или будет сразу тащить, например, файл размером мего под 100.???

    Reply
  11. CheBurator

    ну и как обычно, 8-ка — либо перепевы 7-ки, либо того что уже сделано.. 😉

    http://infostart.ru/public/15464/

    Reply
  12. Boris-Leleko

    Я пользовался простым объектом ЧтениеXML. И уж совсем не знаю как он внутри устроен. Да и врятли кто здесь это знает. Этот объект работает ужасно просто. Последовательно выбирает все теги. И сдается мне так делает любой парсер. Для меня конечно является абсолютной загадкой, почему так расходуется память. Если бы я писал парсер на С++, думаю у меня бы так не расходовалась… ну да ладно, короче если задан диапазон, обхожу все теги подряд, проверяю и инкрементирую счетчик на 2-й глубине. Если счетчик попадает в диапазон, то ухожу в рекурсию. Файл конечно весь в виртуальную память должен загружаться. И если физической не хватает, то на ето есть своп. А уж почему там тормозит, надо наверное у Била Гейтса спрашивать…

    Reply
  13. echo77

    за XMLNotepad спасибо!

    Reply
  14. gaglo

    ..В обсуждении в теме двухпальцовый reader_XML выяснилось существование «сверхбыстрого» и бесплатного XML-редактора от firstobject. Вот им последний год и пользуюсь. Файл на 80 мег открывается за 5 секунд (проц intel 2160, 1 гиг памяти). Есть поиск, замена и ручное редактирование. Никаких больше XMLNotepad-ов не надо.

    Благодарности к: Шёпот теней, Ufimtsev и Ёпрст

    Reply
  15. Boris-Leleko

    Хороший редактор. Спасибо! файл в 600 мб открыл за 20 секунд. Если б знал о нем, то в 1Се наверное не заморачивался бы. Но мне все равно нравится чтоб атрибуты были сразу видны. Если большая выгрузка и много разных объектов то удобно проматывать до нужного.

    Reply
  16. Angeros

    Мне очень понравился, это +.

    Есть замечание.

    Цвета едкие — зеленый можно бы заменить на чтото более светлое.

    В элементах с «+» (группах) хотелось бы увидеть подпись о количестве содержащихся в нем подчиненных элементов.

    Reply
  17. Dementor

    (14) Очень давно тоже пытался использовать XML Notepad — оставил впечатление ужасного тормоза. С тех пор уже более двух лет использую firstobject редакции июля 2007 года и более чем доволен. Порекомендовал его некоторым знакомым и все тоже от него в восторге.

    А вообще умиляют люди, которые вместо того, что бы немного погуглить, начинают изобретать велосипед 😀

    Reply
  18. CheBurator

    (14) присоединяюсь к 14 — мне понравился

    Reply
  19. Yasen

    молодец, так держать!

    Reply
  20. Boris-Leleko

    У мены обработка открыла файл 2.1 Гб. Я задал диапазон конечно. А firstobject не смог открыть 😉 И все же смотреть атрибуты не открывая группировок, а просто проматывая дерево — это супер удобно. Так что я не зря эту обработку написал…

    Reply
  21. iddqd

    По поводу этой обработки ничего сказать не могу — для меня просмотр XML из 8-ки не актуален.

    Из любопытства скачал firstobject, попробовал. На моем тестовом файле в 426 метров оно мне сказало Out of memory.

    Так что продолжаю пользоваться своим затерявшимся в глубинах инфостарта AkXmlEdit 😎

    Reply
  22. axelload

    обработка рабочая.

    Reply
  23. axelload

    но смысла в данной обработке маловато. зачем в 1с открывать код xml?

    Reply
  24. kostya23

    спасибо автору, полезная обработка

    Reply
  25. ivan07

    Спасибо за обработку, очень помогло в разборе файла при переносе данных.

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *