Консоль запросов для работы с данными DBF

27.08.10

Разработка - Инструментарий разработчика

Консоль запросов, в которой в качестве источника данных можно указывать таблицы значений, в которые предварительно загружаются данные из одного или двух сразу файлов DBF

Скачать файлы

Наименование Файл Версия Размер
КонсольЗапросов__Работа_c_DBF.epf
.epf 46,05Kb
300
.epf 46,05Kb 300 Скачать

 Когда мне нужно было анализировать данные в двух dbf-файлах, где было около 200 000 тыс. в каждом (но кол-во записей разное в каждом файле) , то я решил, что удобнее будет это сделать с помощью запросов, которыми можно получать различную информацию: сколько записей , общие суммы (статистика), найти одинаковые  или различные записи, найти разницу по колонкам и т.п. В результате сделал эту обработку, взяв стандартную консоль запросов и доработав dbfviewer.dbf (взял на infostart).

      Порядок работы.

  1. В консоли запросов нажать кнопку "Загрузить / просмотреть DBF"
  2. В новом окне загрузить данные одной или двух DBF, закрыть окно
  3. Теперь в консоли запросов в качестве источников данных можно использовать таблицы значений, передаваемые в запрос как параметры &ТЗ1 и &ТЗ2
  4. Нажав контекстное меню над полем "Текст запроса" можно получить текст запроса для работы с загруженными таблицами значений (текст запроса создаёт из таблиц значений временные таблицы).

 В результате я довольно лихо и, что особенно порадовало, довольно быстро (анализировал около 400 000 записей) всё нашёл и понял, в чем различие между файлами dbf.

См. также

SALE! 20%

Infostart Toolkit: Инструменты разработчика 1С 8.3 на управляемых формах

Инструментарий разработчика Роли и права Запросы СКД Платформа 1С v8.3 Управляемые формы Запросы Система компоновки данных Конфигурации 1cv8 Платные (руб)

Набор инструментов программиста и специалиста 1С для всех конфигураций на управляемых формах. В состав входят инструменты: Консоль запросов, Консоль СКД, Консоль кода, Редактор объекта, Анализ прав доступа, Метаданные, Поиск ссылок, Сравнение объектов, Все функции, Подписки на события и др. Редактор запросов и кода с раскраской и контекстной подсказкой. Доработанный конструктор запросов тонкого клиента. Продукт хорошо оптимизирован и обладает самым широким функционалом среди всех инструментов, представленных на рынке.

13000 10400 руб.

02.09.2020    122137    670    389    

714

SALE! 25%

Infostart PrintWizard

Пакетная печать Печатные формы Инструментарий разработчика Платформа 1С v8.3 Запросы 1С:Зарплата и кадры бюджетного учреждения 1С:Конвертация данных 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 Платные (руб)

Инструмент, позволяющий абсолютно по-новому взглянуть на процесс разработки печатных форм. Благодаря конструктору можно значительно снизить затраты времени на разработку печатных форм, повысить качество и "прозрачность" разработки, а также навести порядок в многообразии корпоративных печатных форм.

18000 15300 руб.

06.10.2023    7288    21    6    

39

SALE! 20%

Infostart УДиФ: Управление данными и формами

Инструменты администратора БД Инструментарий разработчика Роли и права Платформа 1С v8.3 Конфигурации 1cv8 Россия Платные (руб)

Расширение позволяет без изменения кода конфигурации выполнять проверки при вводе данных, скрывать от пользователя недоступные ему данные, выполнять код в обработчиках. Не изменяет данные конфигурации, легко устанавливается практически на любую конфигурацию на управляемых формах.

10000 8000 руб.

10.11.2023    3531    11    1    

34

SALE! 30%

PowerTools

Инструментарий разработчика Инструменты администратора БД Платформа 1С v8.3 Управляемые формы Конфигурации 1cv8 Россия Платные (руб)

Универсальный инструмент программиста для администрирования конфигураций. Сборник наиболее часто используемых обработок под единым интерфейсом.

3600 2520 руб.

14.01.2013    177744    1073    0    

849

Многопоточность. Универсальный «Менеджер потоков» 2.1

Инструментарий разработчика Платформа 1С v8.3 Конфигурации 1cv8 Россия Платные (руб)

Восстановление партий или взаиморасчетов, расчет зарплаты, пакетное формирование документов или отчетов - теперь все это стало доступнее. * Есть желание повысить скорость работы медленных алгоритмов! Но... * Нет времени думать о реализации многопоточности? * о запуске и остановке потоков? * о поддержании потоков в рабочем состоянии? * о передаче данных в потоки и как получить ответ из потока? * об организации последовательности? Тогда ЭТО - то что надо!!!

5000 руб.

07.02.2018    99345    239    97    

296

[ЕХТ] Фреймворк для Расширений 1С

Инструментарий разработчика Платформа 1С v8.3 Управляемые формы Платные (руб)

"Фреймворк для Расширений 1С" это универсальное и многофункциональное решение, упрощающее разработку и поддержку создаваемых Расширений. Поставляется в виде комплекта из нескольких Расширений с открытым исходным кодом. Работает в любых Конфигурациях в режиме Управляемого приложения с режимом совместимости 8.3.12 и выше без необходимости внесения изменений в Конфигурацию.

3000 руб.

27.08.2019    18109    6    8    

39

1С HTML Шаблоны / HTML Templates

Инструментарий разработчика Платформа 1С v8.3 Конфигурации 1cv8 Платные (руб)

Быстрая и удобная обработка для работы с шаблонами HTML. Позволяет легко и быстро формировать код HTML.

2040 руб.

27.12.2017    28108    3    10    

15

Выполнение произвольного кода или запроса с параметрами через Web-сервис (замена COM-подключений)

Инструментарий разработчика Обмен между базами 1C Платформа 1С v8.3 Платные (руб)

В процессе работы в 1С часто возникает потребность получить данные из другой базы.  Обычно это делается через COM-соединение, и время выполнения запроса при этом оставляет желать лучшего. В данной публикации представлено универсальное решение, позволяющее практически моментально выполнить произвольный код или запрос с параметрами в другой информационной базе через Web-сервис.

2400 руб.

24.09.2019    23601    15    15    

32
Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. d_chekunov 27.08.10 14:00 Сейчас в теме
+ за труд и потраченное время. Но всё же для анализа DBF я бы посоветовал использовать Visual FoxPro
3. maxx 991 28.08.10 22:38 Сейчас в теме
(1) О чем вы вы говорите?

1.) Во-первых, я забыл написать что в моем примере данные в файлах DBF была выгрузка из базы 1С, в которой я и производитл анализ, подтягивая так же данные из базы, т.е. это не изолированные данные Dbf а связанные с базой, в этом случае мне не поможет FoxPro.

2.) Если ставить под каждый тип файлов специализированную программу, когда у тебя и так есть инструмент, то быстро засоришь свой компьютер программами, которые используются 2 раза в год, в тому же не надо забывать о лицензионном использовании (не знаю FoxPro бесплатная или платная, я последний раз в FoxPro 10 лет назад работал)

3.) Труда это много не затратили, взял готовые 2 обработки (консоль запросов и просотрщик dbf) и их объединил, чуть чуть доработав.
4. maxx 991 28.08.10 22:45 Сейчас в теме
(2) Да, когда мне понадобилась такая фишка, у меня было дежавю, что что-то такое я уже видел, это и оказалось Enteprise Integrator, но мне кажется моя обработка немножко удобнее в плане:

1.) Не нужно прописывать строки подключения и не нужно знаять язык запросов ODBC, а у меня просто указать локальные файлы и использовать язык запросов 1С, с которыми каждый день работаю.

2.) Как я написал ниже я данные из dbf также использую совместно с другими таблицами из базы 1С (справочниками и регистрами), т.е соединяюю и объединяюю запросами данные DBF и данные базы 1С

3.) Я не помню как сделано в Enterpise Integrator, но у меня все данные один раз копируются в таблицы значений и потом многократно используются в запросах, т.е. нем многократного считывания данных из DBF, а само считывание не быстрая операция.
5. Valerich 1633 06.09.10 06:03 Сейчас в теме
вопрос - как долго производится загрузка в ТЗ этих 200000 записей. Какой объем исходной dbf таблицы (в МБ)?
для меня вопрос не праздный - мне приходится работать с файлами объемом до 300 МБ и количеством записей до 500000.

Когда начинал, тоже сначала пытался грузить это все в ТЗ. Оказалось, что это очень долгий процесс, есть кучу памяти. А при этом надо еще обработку данных производить - по кодам искать контрагентов, номенклатуру ....

В итоге остановился на ADO подключении через ODВC. Запрос на получении таблицы различных кодов контрагентов (без повторений) отрабатывается очень быстро - буквально несколько секунд.
6. maxx 991 06.09.10 09:21 Сейчас в теме
(5) Меня скорость загрузки и затем работы устроила (по сравнению работы с
этими файлами в Excele), у меня было 2 файла DBF размером по 20 Мb в каждом около 200 тыс. записей. Загружались из DBF в таблицу значений минуты 3.
7. semario 10 27.01.11 12:01 Сейчас в теме
хорошая штука ADO... у меня была проблема из 5млн записей дбф - вывести последние 2 начисления и движения между ними... в фокспро прогер мучился, делал вторые сутки искал... а у меня за 1 час 20 нашел... сам удивился. Так что АДО все равно тема)))
8. semario 10 27.01.11 12:01 Сейчас в теме
хорошая штука ADO... у меня была проблема из 5млн записей дбф - вывести последние 2 начисления и движения между ними... в фокспро прогер мучился, делал вторые сутки искал... а у меня за 1 час 20 нашел... сам удивился. Так что АДО все равно тема)))
9. semario 10 27.01.11 12:01 Сейчас в теме
хорошая штука ADO... у меня была проблема из 5млн записей дбф - вывести последние 2 начисления и движения между ними... в фокспро прогер мучился, делал вторые сутки искал... а у меня за 1 час 20 нашел... сам удивился. Так что АДО все равно тема)))
10. Йожкин Кот 1006 27.01.11 12:54 Сейчас в теме
Хорошо бы реализовать конструктор запросов напрямую к dbf файлам (или любому другому источнику данных), чтобы получать на выходе уже готовый запрос sql.
11. pt_olga 61 22.10.11 15:01 Сейчас в теме
спасибо автору. Как раз аналогичная задача и стоит, объединить данные из DBF с данными из базы 1С.
Буду пробовать.
12. m2d3 13.04.12 06:10 Сейчас в теме
"В коносле"
ну сколько уже можно, когда уже народ овладеет окончаниями существительных?
13. nurislam 15.06.13 14:06 Сейчас в теме
Интересная работа.Пойду попробую.Спасибо автору.
Оставьте свое сообщение