Навигатор по файлу обмена




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

22 Comments

  1. anig99

    внезапно ссылка на меня (:

    Только вот плохо в xml, что большие объемы сложно переварить…

    Reply
  2. RocKeR_13

    (1) anig99, в принципе эту обработку прежде всего для отладки обмена хорошо использовать, а в этом случае и не обязательно в выгрузку пихать все подряд) Тестил небольшую выгрузку (в XML порядка 120 000 строк), в принципе недолго загружал: минуты 3 на далеко не самой производительной машине) Долго, конечно, открывал инвентаризацию с 1500 строк…опа, а я кажется понял, почему долго)))) Надо будет потестить и потом уже сообщу)))

    Reply
  3. Yashazz

    Что используете для парсинга — ПостроительDOM?

    Reply
  4. RocKeR_13

    (3) Yashazz, взял за основу вот эту читалку XML, так что штатными средствами 1С пользуюсь. С DOMDocument, к сожалению, пока не работал, возможно в будущем под большие объемы перейду и к нему (а заодно и к УФ)

    Reply
  5. K_A_O

    Есть бесплатный редактор XML, с очень хорошей скоростью работы: http://www.firstobject.com/

    У него есть возможность настраивать в дереве отображение узлов, называется «Tree Customizations»

    Для файлов обмена 1С можно указать строку «* @Нпп @Имя @Тип «.

    Дерево смотреть становится очень удобно, вот примерно как на картинке здесь.

    Формы элемента конечно нет, но справа есть отображение конкретного узла и файл в 100М открывает почти мгновенно.

    Reply
  6. RocKeR_13

    Известные ошибки:

    — если у элемента справочника выгрузилось пустое наименование, возникает ошибка при обработке дерева

    — если в наименование объекта присутствуют специальные символы («{«, «}» и т.д.) возникает ошибка при построении формы элемента

    Ошибки будут исправлены в ближайшее время!

    Reply
  7. Yashazz

    Из не-1С обработок для просмотра и иногда правки использую http://infostart.ru/public/15464/ — работает очень быстро и экономично, не лезет сразу все ветки читать.

    Reply
  8. RocKeR_13

    (7) Yashazz, да, есть такой редактор, тоже использую)

    Reply
  9. Ele1234567

    Какое чудо то вижу) давно такое искала

    Reply
  10. NAKIS

    Здорово) Наколядую доллар — обязательно приобрету… Очень нужная весчь)

    Reply
  11. NAKIS

    немного не понятно — прочитал файл XML, но подробно описание поэлементно(справочники, документы) закладки не появились… я что-то делаю не так?

    Reply
  12. RocKeR_13

    (11) NAKIS, ммм, возможно возникла ошибка при формировании. К сожалению, пока универсальность, так скажем, хромает) Если прикрепите/пришлете файл выгрузки, то я смогу поточнее сказать, в чем проблема

    Reply
  13. NAKIS

    Вот файлик. Надеюсь сможете разобраться. Спасибо.

    Reply
  14. RocKeR_13

    (13) NAKIS, к сожалению, выгружаете, как я понял, не по правилам, написанным в конфигурации «Конвертация данных»? К сожалению, в этом случае с помощью обработки вы можете посмотреть лишь структуру xml-файла

    Reply
  15. yura1960

    Так полно же подобных? Правда не на 1С написанных, но с огромным функционалом. Хотя, творить надо. На всякий случай скачаю, вдруг пригодится.

    Reply
  16. RocKeR_13

    (15) yura1960, подобных, да не таких) Универсальные парсеры есть, но они показывают лишь структуру XML и не знают ничего о справочниках, документах)

    Reply
  17. mzelensky

    Обработка хорошая, но жутко не хватает возможности редактирования (если она есть, но я ее не увидел, то заранее сорри). А так было бы здорово — загрузил файл, пробежался по нему, посмотрел, внес нужные корректировки (значения например подправил) и записал все внесенные изменения.

    Reply
  18. RocKeR_13

    (17) mzelensky, спасибо) Редактировать, действительно, пока нет возможности и в принципе лучше вносить правки в сами правила обмена, однако, подумаю, что тут можно сделать)

    Reply
  19. luic

    Не так давно ломал голову как просмотреть файл обмена.

    Нужная штучка..

    Reply
  20. stas1kbob

    Цель обработки хороша, спасибо. Но вот попробовал прочитать файлик из универсального обмена в формате XML. Первый раз прочитался полностью, затем попробовал применить обмен. После обмена только 3 строки оказалось (объявление XML и что — то такое). А документы, которые были там, не стали видны. Пробовал переоткрыть обработку, это не помогло.

    Reply
  21. RocKeR_13

    (20) stas1kbob, спасибо за отзыв! Если есть возможность, выложите файл обмена: как выдастся свободная минутка — обязательно гляну)

    Reply
  22. user1057785

    Спасибо!

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *