Выгрузка и загрузка данных XML Plus




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

68 Comments

  1. mr.bison

    вот если бы в ней была возможность отбора по реквизитам то цены бы ей не было 🙂

    Reply
  2. SunShinne

    Как-то странно оно работает… Во-первых, если не указать группу, то подчиненные элементы не работают, во-вторых, поставил галки «тянуть ссылки» — а ссылки не перенеслись. А указывать ссылки вручную нет возможности (на каждый выгружаемый элемент около 25 подчиненных элементов). Мож я чего не правильно делаю?

    Reply
  3. SunShinne

    Справедливости ради, надо сказать что типовая ВыгрузкаЗагрузка тоже некорректно отработала.

    Reply
  4. triant

    мне хватило функций для выгрузки и загрузки из УТ в бухгалтерию…спасибо

    Reply
  5. tormozit

    Вот еще похожая обработка http://infostart.ru/projects/1197/

    Reply
  6. triant

    {ВнешняяОбработка.ВыгрузкаЗагрузкаДанныхXMLPlus(247)}: Ошибка при вызове метода контекста (Выполнить): {(1, 14)}: Неоднозначное поле «Документ.Доставка.Ссылка»

    ВЫБРАТЬ * ИЗ <<?>>Документ.Доставка Где Дата между &НачПериода И &КонПериода

    РезультатЗапроса = Запрос.Выполнить();

    по причине:

    {(1, 14)}: Неоднозначное поле «Документ.Доставка.Ссылка»

    ВЫБРАТЬ * ИЗ <<?>>Документ.Доставка Где Дата между &НачПериода И &КонПериода

    Reply
  7. triant

    делаю выгрузку из УТ 🙁

    Reply
  8. PowerBoy

    Нет у меня УТ.

    Проверь нет ли поля с именем ДОКУМЕНТ в документе ДОСТАВКА?

    Reply
  9. tormozit

    (6) Древняя ошибка. Она встречается повсеместно. В моей выгрузке и загрузке ее нет.

    Reply
  10. PowerBoy

    (8)Обновил. Можешь проверить.

    Reply
  11. triant

    Подразделения нет,и загрузка встала опять 🙁

    Reply
  12. triant

    (10) тормозит она у тебя для 8.1

    Ошибка загрузки документа

    Внешняя обработка не может быть прочитана текущей версией программы

    код ошибки

    Reply
  13. triant

    {ВнешняяОбработка.ВыгрузкаЗагрузкаДанныхXMLPlus(63)}: Поле объекта не обнаружено (ПодразделенияОрганизаций)

    Если Подразделение = Неопределено ИЛИ Подразделение = Справочники.ПодразделенияОрганизаций.ПустаяСсылка() Тогда

    Reply
  14. triant

    это из УТ в УТ выгрузку делал…

    Reply
  15. triant

    В бухгалтерий есть только организация но не подразделения…выгрузку сделать не могу 🙁

    Reply
  16. PowerBoy

    «обмен данными между однородными информационными базами» — тебе о чем нибудь говорит. Бухгалтерия и Торговля ими не являются!

    Reply
  17. tormozit

    (17) Слово «однородными» все же не всем понятно. Я вот употребил «с одинаковой структурой данных».

    Reply
  18. triant

    пробовал из бух в бух…

    Reply
  19. ACCuCTEHT

    Реально помогла перенести номенклатуру из УТ 10.3 в УТ 10.3. СПАСИБО!!!

    Reply
  20. Neutral

    в ут 10.2.5.4 отбор не работает.

    Reply
  21. TashaSPb

    Идея хорошая, за это плюс.

    Конечно, есть ошибки:

    1. Нужна проверка на возможность проведения документа. Например, в выгрузку попадают документы с разрешенным и неразрешенным свойством проведения, соответесвенно, если при загрузке поставить флаг Проводить, то вылезает ошибка.

    2. Не совсем понятна идея подразделения при загрузке, но это наверно уже обсуждалось, так что фиг с ней.

    3. Ну и как уже было отмечено, отбор не работает, но там немного совсем напутано.

    Научи её переносить документ «Корректировка» и цены ей не будет.

    Reply
  22. misha-dudkin@yandex.ru

    Она может сделать обмен из УТ в Бухгалтерию?

    Reply
  23. misha-dudkin@yandex.ru

    а то у меня пишет ошибку «Ошибка преобразования данных XML» ссылка на фал и код 50,35

    Reply
  24. PowerBoy

    (25) Только для однородных конфигураций. Текущая версия требует настройки под текущую конфигурацию. Там еще нумерация объектов производится.

    Reply
  25. misha-dudkin@yandex.ru

    А есть токая программа где можно данные перенести из УТ в бухг, в частичности документы

    Reply
  26. misha-dudkin@yandex.ru

    Подскажите плиз

    Reply
  27. PowerBoy

    Типовая догнала по функционалу мою ;). Обновил свои изменения на последнюю типовую.

    Reply
  28. artbear

    (29) Случайно нету какого-то раннего образца для 8.0 ?

    Reply
  29. PowerBoy

    (30) Есть, но он не универсальный, а привязан к измененой типовой БП, ручками придется править, могу выслать.

    Reply
  30. artbear

    (31) Высылай в мыло artbear гав inbox запятая ру 🙂

    Спасибо.

    Reply
  31. PowerBoy

    (32) Выслал.

    Reply
  32. kiryshkina

    Мне очень помогла эта обработка. Большое спасибо автору.

    Reply
  33. N_Rain

    Спасиба, оч помогло!

    Reply
  34. snarkelun

    Здорово! На первый взгляд всё перенеслось. Буду тестировать и использовать. Однозначно +

    А в какой типовой это уже есть — БП?

    Reply
  35. fox_haus

    У меня вообщем то работает, но пользоваться не могу так в УТ несколько фирм а выгружать надо только часть фирм. А в данной обработке выбор фирмы нет.

    Reply
  36. anig99

    а FastInfoSet как работает без глюков? Прирост в скорости ощутимый?

    Reply
  37. guide8686@mail.ru

    Это плагин, как эту программулю связать с 1с? Простите, но я новичок 😳

    Reply
  38. PowerBoy

    (39) файл — открыть 🙂

    Reply
  39. koliks

    Спасибо, выручили, а то я первый день в 1с тыкаюсь и еще много чего не понимаю. Еще раз спасибо.

    Reply
  40. timur.shvetsov

    Спасибо. То что было нужно для решения специфических проблем частичного восстановления данных из резервной копии!

    Reply
  41. Nigelist

    У меня при выгрузке выдает ошибку:

    Подробности:

    {ВнешняяОбработка.ВыгрузкаЗагрузкаДанныхCOMXML(1907)}: Ошибка при установке значения атрибута контекста (Значение): Неверный тип значения
    Отбор[Колонка.Имя].Значение = ВыборкаИзРезультата[Колонка.Имя];
    по причине:
    Неверный тип значения

    Эту же ошибку выдает стандартная выгрузка с ИТС. Конфигурация — Бухгалтерия для Казахстана

    Reply
  42. dave2000

    На УПП отлично перенёсся справочник из одной конфы в другую. 🙂

    зы: «перенос между однородными базами» — подразумевается базы с совпадающей струкрутой метаданных, я правильно понял?

    Reply
  43. dave2000

    В XML формате работает отлично. А вот в FastInfoset выгружает, но не загружает, ругается «неверный формат файла». Поковырял в отладчике, не проходит условие, т.к. ЧтениеXML.URIПространстваИмен = «».

    Если Не ЧтениеXML.Прочитать() Или
    ЧтениеXML.ТипУзла <> ТипУзлаXML.НачалоЭлемента Или
    ЧтениеXML.ЛокальноеИмя <> «Data» Или
    ЧтениеXML.URIПространстваИмен <> «http://www.1c.ru/V8/1CV8DtUD/» Тогда        //значение URIПространстваИмен = «»
    #Если Клиент Тогда
    Предупреждение(«Неверный формат файла выгрузки», 10, «Ошибка загрузки!!!»);
    #КонецЕсли
    Возврат;
    КонецЕсли;

    Показать

    Reply
  44. Ukrandruha

    Да, вот как то с FastInfoset загрузкой не ладится. У кого какие мысли?

    Reply
  45. asder117

    штука классная и очень удобная давно искал

    Reply
  46. utia38

    ВнешняяОбработка.ВыгрузкаЗагрузкаДанныхXMLPlus отлично сработала (бабаловался заменой значений кодв КФО в БГУ8 4 заменил на 2 а там помимо документов еще регистры зацепило сразу не увидели косяка проработали неделю все криво косо везде одни 4 двоек вообще нет) ну вообщем из архивной копии пришлось восстановить и через обработку все недельные документы подгрузить СПАСИБО ВЕЩЬ!!!

    Reply
  47. DERL

    Спасибо, с помощью этой обработки разбираюсь с ХМЛ

    Reply
  48. ftrain

    хорошая обработка. радует, что в отличии от стандартной — не вылетает при больших объемах данных!

    Reply
  49. Likusia

    спасибо, очень помогла обработка . на ее основе создавали свою для пополнения документами текущую базу для одной фирмы из общей базы с несколькими юл.

    Reply
  50. fastpointfuri

    не обработка а сказка, но нет ли у кого похожей но для переноса данных из УТ 8.2 в БП? 8.2??:)

    Reply
  51. CnupT
    fastpointfuri пишет:

    не обработка а сказка, но нет ли у кого похожей но для переноса данных из УТ 8.2 в БП? 8.2??:)

    Как я понимаю, эта обработка работает только в случае идентичных конфигураций. Вам же требуется обработка обмена.

    Reply
  52. fastpointfuri

    да именно обмена, но видел у 1сников что приходят по подписке есть обработка для обмена через xml вот всей фирмой страдаем 🙁

    Reply
  53. besometr

    У меня все работает!

    Спасибо огромное, долго искал нечто подобное, а так как дисков ИТС у нас нема, сами понимаете… 🙂

    Кстате, может кто нибудь уже сталкивался с проблемой? Как при работе с хранилищем, постоянно актуализировать данные баз?

    Reply
  54. mnail1979

    отлично. Спасибо

    Reply
  55. yar555

    спасибо, работает

    Reply
  56. utia38

    Очень универсальная и качественная обработка подходит для всех идентичных конфигугаций, переносит все на рз-два. очень полезная штука. Ну например: из централизованой бухгалтерии отсоединяется одна из организаций на отдельное рабочее место находящееся не вэтом здинии или месте. или основывается совершенно новое Юр.лицо. а вот поставщики с их расчетными счетами или сотрудники остаются прежними. так вот эти справочники и загрузим в новую базу ОЧЕНЬ ХОРОШАЯ ОБРАБОТКА

    Reply
  57. SergDi

    а это под v8.1 да?

    Reply
  58. eugen91

    Сделали выгрузку справочников в 1с битрикс. Супер, работает!

    Reply
  59. нОлька

    а под 8.2 она работает????

    Reply
  60. buh-mira

    (62) нОлька,

    К сожалению, нет ((

    Reply
  61. intime1C

    При загрузке выдает

    «Ошибка преобразования данных XML: [file:….[20,23]». Конфигурации идентичны, в файле не вижу криминала.

    Reply
  62. blackjack666

    К планам обмена прикручивается (чтобы отслеживать, что изменилось) или выгрузка только за период?

    Reply
  63. ruslan-m

    Здравствуйте, Господа! Я вообще ни черта не понимаю, как сделать слияние двух баз.

    На моём компьютере стоит 1С:Предприятие 8.3 (8.3.6.2041), редакция 2,0, имеются банковские выписки, контрагенты, реализации от поставщиков и реализации на клиентов,

    От своего бухгалтера получил архив файлов, скрин приведён, в котором файлы формата .XML и несколько папок, содержащие те же xml, пытаюсь открыть их непосредственно из 1С, предварительно загрузив через файл>открыть ВыгрузкаЗагрузкаXML.epf, который скачал в интернете, впоследствии выдаёт ошибку «Неверный формат файла выгрузки».

    Кстати реализации возможно дублируются, бухгалтер внесла те же документы, что внесены у меня. Но с дублями это уже второй вопрос =)

    Где могу получить инструкции, где попутно всё описано, что необходимо сделать для объединения этих двух баз?

    Второй день бьюсь о монитор и перерыл кучу сайтов, где предлагается сделать через конфигуратор, и там я не понимаю что требуется сделать.

    Reply
  64. AlexO

    (66) ruslan-m,

    От своего бухгалтера получил архив файлов, скрин приведён

    Это ни о чем. Эти файлы — могут быть чем угодно, и откуда угодно. Делайте выгрузку сами. Или — смотрите форма XML присланных файлов, и пишите свою загрузку.

    ВыгрузкаЗагрузкаXML.epf

    Это только между идентичными, и только если выгрузка была произведена им же.

    Где могу получить инструкции, где попутно всё описано, что необходимо сделать для объединения этих двух баз?

    Здесь. Когда начнете с начала и правильно.

    Второй день бьюсь о монитор и перерыл кучу сайтов, где предлагается сделать через конфигуратор

    Это вообще непонятно, что.

    Reply
  65. AlexO

    (66) ruslan-m,

    Кстати реализации возможно дублируются, бухгалтер внесла те же документы, что внесены у меня.

    Будете разбираться с этим уже при самой загрузке.

    Reply
  66. ruslan-m

    (67) AlexO, благодарю за оперативный ответ!

    Что необходимо ей сделать и какие файлы мне прислать, что бы я сделал слияние?

    Reply
  67. AlexO

    (69) ruslan-m,

    Что необходимо ей сделать и какие файлы мне прислать

    Лучше сами вот этой обработкой «ВыгрузкаЗагрузкаXML.epf» выгрузите и загрузите необходимые виды документов в/из файлов. Но это только между идентичными базами.

    Если нет доступа — то я не знаю, как вы проконтролируете и «заставите» бухгалтера сделать правильно выгрузку.

    «УниверсальнаяВыгрузкаЗагрузкаXML» — вам придется писать правила загрузки, готовые есть для типовых, и то не для всех.

    Reply
  68. Uran

    Спасибо огромное. Очень полезная при разных базах. Хорошо помогает.

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *