Поиск дублей значений реквизитов справочников




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2025-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

29 Comments

  1. defini

    Народ, вы хоть комменты оставляйте, если не рейтингуете.

    А то выложил, как в закрома родины, и ни ответа ни привета.

    Reply
  2. А это случайно не из Управления Торговлей из Восьмёрки? Или доработанная?

    Reply
  3. defini

    Неа, писал у клиентапо просьбе. на 7-ке.

    Reply
  4. maksimz

    Находит значения, а сделать с ними можно что-то или нет?

    Reply
  5. defini

    Можно открыть найденный элемент. Писалось только для поиска.

    Reply
  6. lero@riz

    очень полезная штука (для меня), плиз подскажите что нужно прописать чтоб поиск работал не только на одинаковые реквизиты, но и на похожие. Пример: Иванова и ООО Иванова

    Reply
  7. Vitall

    Большое спасибо. Очень пригодилось.

    Для себя еще прикрутил печать найденых дублей — получилось именно то, что доктор прописал.

    Reply
  8. karat60

    +1, бухам понравилось

    Reply
  9. Belka50

    Нет функции печати

    Reply
  10. defini

    А зачем печать?

    Бухам под нос сунуть?

    Reply
  11. бубух

    Спасибо. Практичная вещь для загаженной ползателями бухгалтерии. Для дела не хватант распечатки «двойняшек/тройняшек» и т.п. яшек. Я — бух и «прикрутил печать найденых дублей — получилось именно то, что доктор прописал» ни умею…

    Reply
  12. codemw

    Очень пригодилась для поиска записей о соискателях в кадровом агенстве. Я когда из Excel загружал в справочник о проверке на дубль вообще забыл. Вот буду исправлять ситуацию :). Спасибо!

    Reply
  13. meatball

    Нужна функция печати!!

    Reply
  14. defini

    Добавил возможность печати.

    Reply
  15. meatball

    Очень прикольная и полезная штука!

    Но иногда находит двойников, а отображает только одного из них. Вручную проверял, не пойму даже почему так…

    Reply
  16. defini

    (15) отображает одного где? В таблице или в печати?

    Reply
  17. meatball

    (16) И в таблице и в печати.

    Например, поиск по фамилии отображается так:

    1) В колонке «Значение реквизита» нашло три одинаковые фамилии «Иванов» (три строки), а в колонке «Элемент справочника» этим фамилиям соответствуют 2 Иванова, а 1 Сидоров. И при открытии 3-го элемента справочника, открывается именно Сидоров, вместо 3-го Иванова. При поиске вручную я действительно нахожу у себя в справочнике 3-х Ивановых и 1-го Сидорова. То есть, вместо 1-го Иванова мне отображает одиночку Сидорова и открывает именно его.

    2) Находит и отображает только одну строку с фамилией Петров в колонках «Значение реквизита» и «Элемент справочника». Вручную я обнаруживаю, что фамилий Петров у меня в справочнике 2. То есть, нашел правильно, но отобразил только одного из двух.

    Reply
  18. romanovkv

    А данный скрипт на 8-ке работает?

    Reply
  19. alexmal

    Бысстро и хорошо! +

    Reply
  20. Stasevi4

    ++ хорошо!

    вопрос

    как добавить в таблицу вывода результатов

    еще один реквизит (Изготовитель)

    так как при проверке номенклатуры по коду изготовителя

    видает дубли с одинаковыми кодами

    Reply
  21. Katrin84b

    Быстренько, точно, нужна была для ОС 50 тыс. элементов- спасибо, сэкономили мне кучу времени!

    Reply
  22. miledi.80

    Отличная обработка. Частно использую.

    Reply
  23. pap

    Спасибо.

    Reply
  24. CrVik

    отлично!

    Reply
  25. Bomba1911

    Большое спасибо. Очень пригодилось.

    Для себя еще прикрутил печать найденых дублей — получилось именно то, что доктор прописал.

    Reply
  26. izz

    Отличная обработка! Спасибо!

    Reply
  27. skurser

    очень пригодилась

    Reply
  28. skurser

    Ещё бы добавить возможность искать дубли между базами, в частности меня интересует сверка контрагентов по ИНН между двумя базами. Возможно ли такое?

    Reply
  29. g26516

    Спасибо!

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *