Загрузка и выгрузка данных в формате XML 1.0 по номенклатуре, контрагентам, договорам и счетам клиента из Битрикс в Бухгалтерию предприятия 3.0.38.55 с максимальной защитой от ошибок загрузки и возможностью отладки.

При серьезной доработке интернет-магазина на Битриксе возникла задача определять ошибки в файлах XML на стороне 1C 8 для максимально корректного ведения учета еще на этапе загрузки. В данной обработке помимо механизма чтения XML 1.0 предусмотрено ведение протокола на стороне сервера полностью до момента ошибки с передачей его на клиента со всеми ошибками для выяснения их причин. Обработка также находится в стадии доработки и может быть применена как образец для тестирования выгрузок и для модификации под подобные решения, а также для изучения работы механизмов клиент-серверного взаимодействия. Платформа 8.3.5.1383. Режим исполнения тонкий клиент.
Примечание: по отзывам скачавших пользователей без больших усилий переделывается под Управление торговлей 11.1.

Учитывая важность и работоспособность как очень хорошего шаблона для доработок под другие конфигурации (писали что чуток подправить и можно грузить данные в Управление торговлей 11.1) с 02.06.2024 цена поднята до 3-х стартмани!

Общий вид обработки приведен ниже на рисунке 1:

Рисунок 1 -общий вид обработки

Основой решения послужила задача на форуме Загрузка XML в бухгалтерию 3.0 Предстояло сделать сложный этап — загрузку. Также для тестирования подобных задач применил идею создания списка значений, структур на клиенте для передачи их на сервер для того, чтобы как при штатной отработке, так и в случае возникновения синтаксической ошибки или ошибке в данных периода исполнения вся информация ДО данного момента по прочей загрузке была сохранена в протоколе загрузки.

Достоинства обработки:

1. Контроль ввода пользователем всех данных (обычная системная ПроверитьЗаполнение() реквизитов для нужного режима).

2. Возможность сохранения и восстановления настроек формы (тоже все стандартные возможности платформы 8.3).

3. Как уже упоминалось, возможность отладки. Есть «глобальная» транзакция, которая может быть зафиксирована только по флажку, с целью получения «отчета» по возможным ошибкам загрузки. Также учтено что платформа 1С 8 не поддерживает механизма вложенных транзакций. Также учтена особенность неявных транзакций Попытка…Исключение. Во всех случаях протокол создается в виде файла на стороне клиента

4. Ведение счетчика успешно загруженных объектов для предварительного контроля. Опять таки, не учитываются основные договора контрагентов.

5. Для оптимизации не передается контекст формы на сервер.

 

Недостатки:

1. На больших объемах XML (если файл, допустим, 2 Гб) обработка может зависать, т.к. файл (см. фрагмент кода 1) передается с клиента на сервер для обработки.

2. Не использованы современные парсеры, а использованы примитивные методы платформы 1С 8 Новый ЧтениеXML  для «построчного» анализа кода. В данном случае изначально представлялись файлы с ошибками (специально не соответствовали формату XML по спецификации 1.0 — отсутствующие теги и прочее), и даже возникала необходимость предварительной обработки таких текстов. Хорошо, потом данную ошибку устранили в источнике на базе битрикса.

3. Нет индикатора процесса, что сильно бы усложнило задачу, ведь потребовалось бы периодическое возвращение на клиент с потерей всех серверных результатов. 

Ниже привожу фрагмент кода главной процедуры:

&НаКлиенте
Процедура ЗагрузитьВсе(Команда)

Если НЕ ПроверитьЗаполнение() Тогда
Возврат;
КонецЕсли;

Попытка
Лог = Новый ТекстовыйДокумент;
Лог.ИспользуемоеИмяФайла = Объект.ПутьЛог;
Лог.ДобавитьСтроку("--> Начали лог загрузки "+ТекущаяДата() );
Лог.Записать(Лог.ИспользуемоеИмяФайла);
Адрес = ПоместитьВоВременноеХранилище(Новый ДвоичныеДанные(Объект.ПутьФайлХМЛ), ЭтаФорма.УникальныйИдентификатор);
СписокВЛог = Новый СписокЗначений; // Сообщения сервера
СтруктКол = Неопределено;
ПрочитатьХМЛНаСервере(Адрес, Объект.ФиксироватьТранзакцию, Объект.ВидНоменклатурыТовар, Объект.ВидНоменклатурыУслуга, СтруктКол, СписокВЛог, Объект.Организация, Объект.ВидДоговора); // Вызываем для оптимальной работы без контекста формы

Если СписокВЛог = Неопределено Тогда
ВызватьИсключение("Была фатальная ошибка на сервере"); // Дальше общий обработчик
Иначе
Для Каждого Стр Из СписокВЛог Цикл
Лог.ДобавитьСтроку(Стр.Значение);
КонецЦикла;
КонецЕсли;

Лог.Записать(Лог.ИспользуемоеИмяФайла);
Исключение
Инфо = ИнформацияОбОшибке();
ТекстОшибок = ПолучитьВсеОписаниеОшибокНаКлиентеНаСервере(Инфо);
СообщитьНаКлиентеНаСервере(ТекстОшибок);

Если СписокВЛог <> Неопределено Тогда
Для Каждого СтрокаЛога Из СписокВЛог Цикл
Лог.ДобавитьСтроку(СтрокаЛога.Значение);
КонецЦикла;
КонецЕсли;

Лог.ДобавитьСтроку(ТекстОшибок); // Ситуация, когда лог не может создаться/сохраниться
Лог.Записать(Лог.ИспользуемоеИмяФайла);

Возврат;

КонецПопытки;
Лог.Записать(Лог.ИспользуемоеИмяФайла);

// Нормально завершение работы загрузки
Если СтруктКол <> Неопределено Тогда
Лог.ДобавитьСтроку("--> Закончили чтение XML в 1С в "+ТекущаяДата() );
Лог.ДобавитьСтроку("");
Лог.ДобавитьСтроку("--> Загружено: Номенклатуры "+ СтруктКол.КолНом+  " шт");
Лог.ДобавитьСтроку("--> Загружено: Контрагентов "+ СтруктКол.КолКон+  " шт");
Лог.ДобавитьСтроку("--> Загружено: Договоров    "+ СтруктКол.КолДог+  " шт");
Лог.ДобавитьСтроку("--> Загружено: Счетов       "+ СтруктКол.КолСчет+ " шт");
КонецЕсли;
Лог.Записать(Лог.ИспользуемоеИмяФайла);
СообщитьНаКлиентеНаСервере("ОК");
КонецПроцедуры 

Фрагмент кода 1 — главная процедура чтения.

 

Для «парсинга» тегов использовал унифицированные процедуры приведеннные ниже. Сами алгоритмы создания контрагентов, договоров, Номенклтуры не представляют сложности и аналогичны как в обработка в толстом клинете

&НаСервереБезКонтекста
Процедура ЧтениеИСозданиеКонтрагентовНаСервере(СтруктПар)
НомСтр = Новый Структура;
// Чтение тегов <Элемент>...</Элемент> У Номенклатуры
Пока СтруктПар.Чтение.Прочитать() Цикл
ИмяУзла  = СтруктПар.Чтение.Имя;
ТипУзла  = СтруктПар.Чтение.ТипУзла;
ЗначУзла = СтруктПар.Чтение.Значение;

Если ТипУзла = ТипУзлаXML.КонецЭлемента Тогда
Если ИмяУзла = "Контрагенты" Тогда
Возврат;
ИначеЕсли ИмяУзла = "Элемент" Тогда
НайтиСоздатьКонтрагента(НомСтр, СтруктПар);
НомСтр = Новый Структура; // Очищается Все
Продолжить; // Читаем следующий элемент у Номенклатуры
КонецЕсли;
КонецЕсли; // Если Чтение.ТипУзла = ТипУзлаXML.КонецЭлемента Тогда...

// Заполняем данные для Нового элемента
Если ТипУзла = ТипУзлаXML.НачалоЭлемента Тогда
Если ИмяУзла = "Элемент" Тогда
Продолжить;
Иначе
СохрИмяУзла = ИмяУзла;
КонецЕсли;
ИначеЕсли ТипУзла = ТипУзлаXML.Текст Тогда
НомСтр.Вставить(СохрИмяУзла, ЗначУзла); // // Читаем все Теги номенклатуры что есть во входном файле.
КонецЕсли; // Если Чтение.ТипУзла =...
КонецЦикла; // Пока Чтение.Прочитать()...

КонецПроцедуры 

Фрагмент кода 2 — унифицированный алгоритм разбора тегов файла XML.

6 Comments

  1. dima_home

    Всегда парсил XML только на клиенте, а лишь в момент создания конечных объектов (каждого по отдельности) передавал на сервер структуру объекта. Этот принцип также легко позволяет решить вопрос с отражением состояния процесса загрузки XML.

    Reply
  2. jobkostya1c8

    (1) dima_home, благодарю за дельное замечание. Мне просто показалось что парсинг XML это довольно затратная процедура по ресурсам ПК и решил все делать на сервере. Теперь понимаю, что файлы редко бывают очень большого размера, а вот их количество обычно большое.

    Плюс обработке на сервере можно сделать автоматическую загрузку по расписанию.

    Reply
  3. Гость

    В каком формате данная обработка выгружает номенклатуру?

    Reply
  4. jobkostya1c8
    Reply
  5. jobkostya1c8
    Reply
  6. jobkostya1c8

    Вот другой (правда тоже не очень удачный пример без подчиненных элементов) по генерации схемы XSD где основная информация в артибутах тегов.

    Исходный XML-файл:

    <?xml version=»1.0″ encoding=»UTF-8″?>
    <ROOT>
    <Запись ИНН=»1112223334″ КПП=»555501001″ ДатаДоговора=»2015-09-01T00:00:00″ НомерДоговора=»75/2015 ТМ» Груз=»КГМ» КолТКО=»0″ СуммаТКО=»0″ КолКГМ=»29860″ СуммаКГМ=»9555.2″ КолПрочие=»0″ СуммаПрочие=»0″>Номер записи 1 из 89</Запись>
    <Запись ИНН=»1112226666″ КПП=»666650001″ ДатаДоговора=»2014-03-22T00:00:00″ НомерДоговора=»???/2015 ТМ» Груз=»КГМ» КолТКО=»0″ СуммаТКО=»0″ КолКГМ=»1340″ СуммаКГМ=»505.98″ КолПрочие=»0″ СуммаПрочие=»0″>Номер записи 2 из 89</Запись>
    <Запись ИНН=»1112227777″ КПП=»777750001″ ДатаДоговора=»0001-01-01T00:00:00″ НомерДоговора=»» Груз=»КГМ» КолТКО=»0″ СуммаТКО=»0″ КолКГМ=»1620″ СуммаКГМ=»0″ КолПрочие=»0″ СуммаПрочие=»0″>Номер записи 89 из 89</Запись>
    </ROOT>
    

    Схема XSD:

    <?xml version=»1.0″ encoding=»utf-8″?>
    <xs:schema id=»ROOT» xmlns=»» xmlns:xs=»http://www.w3.org/2001/XMLSchema» xmlns:msdata=»urn:schemas-microsoft-com:xml-msdata»>
    <xs:element name=»ROOT» msdata:IsDataSet=»true» msdata:Locale=»en-US»>
    <xs:complexType>
    <xs:choice minOccurs=»0″ maxOccurs=»unbounded»>
    <xs:element name=»Запись» nillable=»true»>
    <xs:complexType>
    <xs:simpleContent msdata:ColumnName=»Запись_Text» msdata:Ordinal=»11″>
    <xs:extension base=»xs:string»>
    <xs:attribute name=»ИНН» type=»xs:string» />
    <xs:attribute name=»КПП» type=»xs:string» />
    <xs:attribute name=»ДатаДоговора» type=»xs:string» />
    <xs:attribute name=»НомерДоговора» type=»xs:string» />
    <xs:attribute name=»Груз» type=»xs:string» />
    <xs:attribute name=»КолТКО» type=»xs:string» />
    <xs:attribute name=»СуммаТКО» type=»xs:string» />
    <xs:attribute name=»КолКГМ» type=»xs:string» />
    <xs:attribute name=»СуммаКГМ» type=»xs:string» />
    <xs:attribute name=»КолПрочие» type=»xs:string» />
    <xs:attribute name=»СуммаПрочие» type=»xs:string» />
    </xs:extension>
    </xs:simpleContent>
    </xs:complexType>
    </xs:element>
    </xs:choice>
    </xs:complexType>
    </xs:element>
    </xs:schema>
    

    Показать

    P.S. Подобные схемы не только позволяют упростить анализ, но и увеличить скорость чтения до 10 раз с использованием Фабрики XDTO.

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *