Пересчет итогов регистров не монопольный




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

14 Comments

  1. wondermaker

    Я себе подобное делал, но выводил дополнительно количество записей, подлежащих пересчету. Иначе можно «попасть», если надо пересчитать большой регистр — несколько часов тормозов для всех обеспечено.

    Reply
  2. AnKonAlm

    (1) wondermaker,

    Спасибо за идею сделаю на днях!

    Сейчас, если я попадаю — т.е. система конкретно подвисла,

    тогда я делаю просто аварийное завершение работы,

    и заново пересчитываю итоги меньшими порциями (по 1 регистру и по 1 месяцу).

    Хотя, вывод количества записей — интересное, но тоже не координальное решение —

    Ведь на скорость пересчета могут влиять и текущие транзакции пользователей.

    Reply
  3. natalil05

    Спасибо за обработку

    Reply
  4. AnKonAlm

    (3) natalil05, Пожалуйста, Наташа!!! Удачи Вам!!!

    Reply
  5. metmetmet

    Я перед запуском подобной обработки запускал обработку для проверки расхождений между правильным значениями итоговых таблиц регистров, полученных расчетным путем, и текущими значениями в итоговых таблицах регистров.

    Тогда пересчитывать нужно будет только определенные регистры.

    Reply
  6. CratosX

    (5) metmetmet, пересчёт итогов так же ещё «схлопывает» строки таблицы с нулевым значением, так что это полезно делать вне зависимости от наличия расхождений

    Reply
  7. metmetmet

    (6) Согласен, в идеале, наверное, лучше разделять ситуации планового пересчета итогов и экстренного, когда обнаруживается расхождение и нужно проверить остальные регистры на наличие расхождения.

    Reply
  8. AlexO

    (6) CratosX, пересчет итогов лишь пересчитывает итоги в отдельной «встроенной» таблице, если вам известно, что такое пересчет итогов. Никаких «схлопываний» нулевых строк не происходит (при этом, кроме всего прочего и отсутствия такого механизма в 1С, программа еще и должна знать, что это такое — «схлопнуть нулевые строки»: нулевые по количеству, по сумме, по пустой ссылке…).

    Они как были, так и остаются в регистрах. А транкейт таблиц SQL (удаление удаленных записей из базы) происходит при ТИИ. И то это у 1С нигде не обозначено в документации.

    Reply
  9. belyiaist

    Уважаемые специалисты!

    Помогите понять, как эту обработку запустить или сделайте это удаленно за вознаграждение.

    1С (7.70.027 для SQL, конфигурация 7.70.935) выдает неправильные данные при выполнении отчётов по динамике продаж, оборотных средств и проч. А в момент выполнения этого отчёта остатки скачут. Думаю, что проблема в том, что никто и никогда за 10 лет не пересчитывал эти итоги и накопилось много ошибок. ТИИ пробовал делать, несколько суток компьютер лопатил, сказал, что всё хорошо, но через неделю всё началось сначала, а по нескольку суток делать ТИИ нет возможности.

    Reply
  10. AnKonAlm

    Рекомендую обрезать базу. Удачи!!!

    Reply
  11. aegoncharov

    (5) Не поделитесь этой обработкой?

    Reply
  12. AnKonAlm

    (11) Здравствуйте. Вы смогли закачать её???

    Reply
  13. aegoncharov

    (12) Нет, обработки для проверки корректности итогов не нашел.

    Reply
  14. AnKonAlm

    (13)

    Странно, я закачал только что себе. Дайте адрес.

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *