Статистика по количеству данных в базе




Принцип обмена данными из 1С с сайтом (на MySQL) и выдачи (публикации) этих данных по запросу.
PHP-Скрипт автоматической загрузки данных из файла данных в формате CSV в базу данных сайта работающего на WordPress.

В продолжение моей темы: 1С:Альфа-Авто Автосалон Автосервис: обмен с сайтом.
С помощью данного скрипта можно загружать в автоматическом режиме, по расписанию, данные сервисных книжек (ремонтов авто) из 1С:Альфа-Авто Автосалон Автосервис.
Также можно загружать данные в ручном режиме: для этого делается скрытая страница, где размещается специальная кнопка.
Комментарии размещенные внутри скрипта разъяснят логику и порядок действия.
Комментарии с "/////    echo" использовались для отладки.
Дополнительно создана таблица для журналирования результатов загрузки данных.
Скрипт включает в себя защиту от SQL инъекций (думаю безопасность соблюдена в полной мере).
В кратце:
1. Пишется скрипт, который запускает этот.
2. Создается регламентное задание в WordPress, по которому запускается скрипт из п.1. 
3. Этот скрипт осуществляет проверку на существование файла обмена в папке.
4. Если данные не новые, загрузка не производится.
5. Если данные новые, очищается таблица сервисных книжек.
6. Загружаются новые данные.

Собственно сам скрипт:

<?php // Полная загрузка сервисных книжек, создан 2024-01-05 12:44:55

global $wpdb2;
global $failure;
global $file_hist;

/////  echo '<H2><b>Старт загрузки</b></H2><br>';

$failure=FALSE;
//подключаемся к базе
$wpdb2 = include_once 'connection.php'; ; // подключаемся к MySQL
// если не удалось подключиться, и нужно оборвать PHP с сообщением об этой ошибке
if (!empty($wpdb2->error))
{
/////   echo '<H2><b>Ошибка подключения к БД, завершение.</b></H2><br>';
$failure=TRUE;
wp_die( $wpdb2->error );
}

$m_size_file=0;
$m_mtime_file=0;
$m_comment='';
/////проверка существования файлов выгрузки из 1С
////файл выгрузки сервисных книжек
$file_hist = ABSPATH.'/_1c_alfa_exchange/AA_hist.csv';
if (!file_exists($file_hist))
{
/////   echo '<H2><b>Файл обмена с сервисными книжками не существует.</b></H2><br>';
$m_comment='Файл обмена с сервисными книжками не существует';
$failure=TRUE;
}

/////инициируем таблицу лога
/////если не существует файла то возврат и ничего не делаем
if ($failure){
///включает защиту от SQL инъекций и данные можно передавать как есть, например: $_GET['foo']
/////   echo '<H2><b>Попытка вставить запись в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>$m_comment));
wp_die();
/////    echo '<H2><b>Возврат в начало.</b></H2><br>';
return $failure;
}
/////проверка лога загрузки, что бы не загружать тоже самое
$masiv_data_file=stat($file_hist);   ////передаем в массив свойство файла
$m_size_file=$masiv_data_file[7];    ////получаем размер файла
$m_mtime_file=$masiv_data_file[9];   ////получаем дату модификации файла
////создаем запрос на получение последней удачной загрузки
////выбираем по штампу времени создания (редактирования) файла загрузки AA_hist.csv, $m_mtime_file

/////   echo '<H2><b>Размер файла: '.$m_size_file.'</b></H2><br>';
/////   echo '<H2><b>Штамп времени файла: '.$m_mtime_file.'</b></H2><br>';
/////   echo '<H2><b>Формирование запроса на выборку из лога</b></H2><br>';
////препарируем запрос
$text_zaprosa=$wpdb2->prepare("SELECT * FROM `vin_logs` WHERE `last_mtime_upload` = %s", $m_mtime_file);
$results=$wpdb2->get_results($text_zaprosa);

if ($results)
{   foreach ( $results as $r)
{
////если штамп времени и размер файла совпадают, возврат
if (($r->last_mtime_upload==$m_mtime_file) && ($r->last_size_upload==$m_size_file))
{////echo '<H2><b>Возврат в начало, т.к. найдена запись в логе.</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>$m_mtime_file,'last_size_upload'=>$m_size_file,'comment'=>'Загрузка отменена, новых данных нет, т.к. найдена запись в логе.'));
wp_die();
return $failure;
}
}
}
////если данные новые, пишем в лог запись о начале загрузки
/////echo '<H2><b>Попытка вставить запись о начале загрузки в лог таблицу</b></H2><br>';
$insert_fail_zapros=$wpdb2->insert('vin_logs', array('time_stamp'=>time(),'last_mtime_upload'=>0, 'last_size_upload'=>$m_size_file, 'comment'=>'Начало загрузки'));

////очищаем таблицу
$clear_tbl_zap=$wpdb2->prepare("TRUNCATE TABLE %s", 'vin_history');
$clear_tbl_zap_repl=str_replace("'","`",$clear_tbl_zap);
$results=$wpdb2->query($clear_tbl_zap_repl);
/////   echo '<H2><b>Очистка таблицы сервисных книжек</b></H2><br>';
if (empty($results))
{
/////   echo '<H2><b>Ошибка очистки таблицы книжек, завершение.</b></H2><br>';
//// если очистка не удалась, возврат
$failure=TRUE;
wp_die();
return $failure;
}

////загружаем данные
$table='vin_history';         // Имя таблицы для импорта
//$file_hist Имя CSV файла, откуда берется информация     // (путь от корня web-сервера)
$delim=';';          // Разделитель полей в CSV файле
$enclosed='"';      // Кавычки для содержимого полей
$escaped='\

26 Comments

  1. z-alexey

    Ту я смотрел как-то. Даже плюсанул :). В моей к сожалению нет статистика по пользователям. на все впереди 🙂

    Reply
  2. Unstoppable

    Мне понравилось! Удобно, однако….

    Reply
  3. angro

    долго очень работает, просто кошмар какой-то. Зачем делать перебором ?

    строчки в ТЧ можно посчитать например так

    выбрать

    count(*)

    из

    Документ.РеализацияТоваровУслуг

    где проведен

    видимо только начал 8-ку изучать ?

    Reply
  4. angro

    -1 вобщем

    Reply
  5. z-alexey

    amqro, через count(*) я так и не понял как получить количество во всех табличных частях документ. Может подскажешь?

    Reply
  6. angro

    не то скопировал,

    перебором по метаданным для всех ТЧ делаешь запрос

    «выбрать

    |count(*)

    |из

    |Документ.РеализацияТоваровУслуг. «+НаименованиеТЧ+»

    |где проведен «

    Reply
  7. z-alexey

    Это по одной табличной части. До этого дошел и сам. А одним запросом как получим количество строк в ТЧ ТОвары, Услуги, Тара?

    или предлагаешь последовательно запросы на кажду табличную часть, а потом проссумировать все строки… А как тогда получить общее количество документов?

    Reply
  8. angro

    да предлагаю последовательно запросы на кажду табличную часть, а количество документов

    «выбрать

    |count(*)

    |из

    |Документ.РеализацияТоваровУслуг

    |где проведен»

    Reply
  9. angro

    и наверное лучше будет не count(*) а count(ссылка)

    Reply
  10. angro

    так примерно

    Процедура ПолучитьСтатистикуПоДокументу(ВидДокумента) Экспорт

    Запрос = Новый Запрос;

    Запрос.Текст =

    «выбрать

    | count(ссылка) как всегодокументов

    | из

    | Документ.»+ВидДокумента+»

    | где проведен «;

    Выборка = Запрос.Выполнить().Выбрать();

    Если Выборка.Следующий() тогда

    Счетчик = выборка.всегодокументов

    иначе

    Счетчик = 0;

    КонецЕсли;

    Запрос.Текст = » выбрать

    | сумма(всегострок) как всегострок

    | из ( «;

    ТабличныеЧасти = Метаданные.Документы[ВидДокумента].ТабличныеЧасти;

    естьТЧ = ложь;

    Для каждого ТЧ Из ТабличныеЧасти Цикл

    Запрос.Текст = Запрос.Текст +» выбрать

    | count(ссылка) как всегострок

    | из

    | Документ.»+ВидДокумента+».»+ТЧ.Имя+»

    | где ссылка.проведен

    | объединить все «;

    естьТЧ = Истина;

    КонецЦикла;

    Запрос.Текст = Лев(Запрос.Текст,СтрДлина(Запрос.Текст )-15);

    Запрос.Текст = Запрос.Текст +» ) как ттт «;

    Если естьТЧ тогда

    Выборка = Запрос.Выполнить().Выбрать();

    Если Выборка.Следующий() тогда

    КоличествоСтрок = выборка.всегострок

    иначе

    КоличествоСтрок = 0;

    КонецЕсли;

    иначе

    КоличествоСтрок =0;

    КонецЕсли;

    Сообщить(Метаданные.Документы[ВидДокумента].Синоним, СтатусСообщения.Информация);

    Сообщить(» Количество документов: » + Счетчик);

    Сообщить(» Количество строк в документе: » + КоличествоСтрок);

    СреднееКоличествоСтрок = Окр(?(Счетчик = 0, 0,КоличествоСтрок/Счетчик),2);

    Сообщить(» Среднее количество строк в документе: » + СреднееКоличествоСтрок);

    мОбщееКоличествоДокументов = мОбщееКоличествоДокументов + Счетчик;

    мОбщееКоличествоСтрок = мОбщееКоличествоСтрок + КоличествоСтрок;

    КонецПроцедуры

    Reply
  11. angro

    время сбора статистики 44 секунды, в первом варианте я не дождался отключил минут через 5

    Reply
  12. z-alexey

    anqro, сделал так же. что я могу — реально быстрее. Когда писал хотел одним запросом но так и не получилось. А получать несколькими запросами почему-то не допер :).

    Выложу потом исправленную версию. Какой-то еще глюк вылез.

    Reply
  13. z-alexey

    Выложил обновленный вариант.

    Reply
  14. = добавь справочники и статистику выводи в таблицу

    = взял за основу твой код, бо надо на работе, поправлю — выложу.

    Reply
  15. = добавь справочники и статистику выводи в таблицу

    = взял за основу твой код, бо надо на работе, поправлю — выложу.

    Reply
  16. Klarisa

    ничего так 🙂

    тока инфу такого плана желательно выводить в табличку, а не сообщениями

    Reply
  17. Istur

    (0) Вставь пожалуйста скриншоты.

    Reply
  18. Istur

    Пожелания: 1. выводить в табличку. 2.чтобы можно было выбирать данные за весь период, а не за ограниченный. конечно можно указать с 1990 по 2077, но это не айс.

    Я бы сказал что идеал — это Статистика базы 8.1 (клиент-серверный вариант), но та обработка к сожалению тока для sql.

    Reply
  19. z-alexey

    (18) вставил картинки

    Reply
  20. z-alexey

    (19) сделал в табличку 🙂

    и еще теперь работает на 8.1

    Reply
  21. Евгения Сон

    Плюсую однозначно.Выручала не раз, оч полезная штука. Побольше таких.

    Reply
  22. husky

    группировку по месяцам можно добавить?

    Reply
  23. husky

    группировку по месяцам можно добавить?

    Reply
  24. vitekryazan

    спасибо, очень помогло

    Reply
  25. Namig

    Можно ли получить с справочником и с выводом в таблички для 8.0?

    Reply
  26. husky

    Конечно, надо добавить статистику по справочникам.

    Reply

Leave a Comment

Ваш адрес email не будет опубликован. Обязательные поля помечены *