Дубликаты основных реквизитов в справочнике Контрагентов




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

18 Comments

  1. gutentag

    А проверка правильности введенного ИНН есть в отчете?

    Reply
  2. susorov

    (1) в этом отчёте выводятся только дубликаты. А если надо проверять правильность каких-либо реквизитов, например, номеров ИНН, или Региона на соответствие ИНН, и т.п. — это надо сделать в принципе другой отчёт.

    Reply
  3. gutentag

    … на всякий случай: http://infostart.ru/projects/258/ проверка инн, огрн, пфр.

    и http://infostart.ru/projects/4252/ Поиск Контрагента по ИНН с valaam.ru

    Reply
  4. gutentag

    …полезный отчет

    Reply
  5. tili

    Два плюса автору

    Reply
  6. elizarovs

    То же поставил бы 2 плюса. Но могу только один.

    И за ссылочки то же спасибо.

    Выполняю аналогичную работу. Вычистил всех контрагентов с пустыми ИНН, контрагентов, по которым не было движений (их было 30%, перекочевали от родительских баз). С Вашей обработкой нашел еще кучу контрагентов с одинаковыми именами, но разными ИНН, самому в голову не пришло таких искать. Если кому нужны мои обработочки, пишите, выложу. Только предупреждаю, они под нетиповую конфу.

    Reply
  7. Поручик

    кстати, проверку правильности введённого инн можно организовать через подписку на событие при записи контрагента. у себя так и сделал, тем более есть штатная функция в типовых конфах.

    Reply
  8. anig99

    вот-вот. есть галочка проверять на дубликаты при вводе контрагентов. Но есть такие ситуации, когда требуется ввести контрагентов с одинаковыми ИНН.

    Reply
  9. mechail72

    Спасибо…

    Reply
  10. chavalito

    Поиск и замена дублирующих значений уже не готично? За чем городить огород……………?

    Reply
  11. susorov

    (10) Вас ввело в заблуждение используемое в названии слово «Дубликаты», а на упомянутые мною «спецсимволы» Вы не обратили внимания, и саму обработку не пробовали? Хорошо, мне нетрудно пояснить: да, стандартная обработка отдыхает! В моём специализированном отчёте дубликатами считаются похожие фразы, звучащие одинаково, но которые могли быть записаны по-разному: через пробелы, дефисы, с буквой Е вместо Ё, разными кавычками, скобками, знаками препинания и проч… Пример: моим отчётом будут найдены, как дубликаты, такие наименования, как первое:

    ВатНафт Продукт АЗС№606

    и второе (дикое сочетание, специально утрирую, добавив разные символы):

    «ват-нафт»ПРОДУКТ, `АЗС/606`(+[]{}_’~#@%#k8SjZc9Dxk!><)

    Reply
  12. elizarovs

    По заявкам выложил обработочку, которая ищет балластных контрагентов (без движений)

    http://infostart.ru/projects/5738/

    Reply
  13. shushkovka

    Быстро работает, но неплохо было бы добавить колоночку КПП. Ибо есть немалый пласт контрагентов у которых ИНН одинаковый а вот КПП разный.

    Reply
  14. AnryMc

    Стоит добавить СокрЛП(), а то у меня коды с пробелом в начале или в конце не ловились как дубли

    Reply
  15. susorov

    (13) — пожелание выполнил, при поиске дублей ИНН колонка КПП появится автоматически, в других случаях — по желанию.

    (14) — СокрЛП() использую обязательно, ещё раз загляните в модуль, увидите… А по поводу Ваших дублей в реквизите Код — отдельная тема, надо выправить базу, конфигурацию, и забыть эту проблему навсегда, но об этом лучше в личке.

    Reply
  16. AnryMc

    (15) выправить — это хорошо если база «своя», а если у клиента по приглашению? Не снятая с поддержки

    Reply
  17. zdrastvyitejorj

    Спасибо, очень полезная штука, как раз нужно было отчет дать бухам чтобы выбрали какие дубли на что заменять

    Reply
  18. ivannor

    Спасибо! 🙂 Весьма нужная вещь

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *