Поиск дублей в запросах 1С: от простых фильтров до программных решений

Дубликаты данных в 1С:Предприятие — одна из самых распространённых проблем, с которой сталкиваются и бухгалтеры, и программисты. Они не только искажают отчётность, но и замедляют работу системы, увеличивают объём базы данных, а в критических случаях могут привести к ошибкам при обмене данными или интеграции с другими системами. Найти дубли в запросах 1С можно разными способами: от ручного анализа с помощью стандартных отчётов до написания сложных программных алгоритмов.

В этой статье мы разберём 5 рабочих методов поиска дублирующихся записей — от самых простых, которые освоит даже начинающий пользователь, до профессиональных техник для разработчиков. Вы узнаете, как выявить дубли по одному или нескольким полям, как автоматизировать процесс с помощью Запроса 1С и СКД, а также какие инструменты помогут очистить базу без риска потери данных. Особое внимание уделим типичным ошибкам, которые допускают при поиске дублей, и способам их избежать.

Если вы работаете с большими объёмами данных (например, в 1С:ERP или 1С:УТ), эта инструкция поможет сэкономить часы ручной проверки и минимизировать риски ошибок в отчётности.

1. Поиск дублей с помощью стандартных отчётов 1С

Самый быстрый способ найти дубли — воспользоваться встроенными отчётами 1С. Этот метод подходит для пользователей без навыков программирования и не требует изменения конфигурации. Рассмотрим, как это сделать на примере поиска дублирующихся контрагентов или номенклатуры.

Откройте раздел, где предположительно есть дубли (например, Справочники → Контрагенты). Далее:

• 📊 Перейдите в Отчёты → Стандартные отчёты → Анализ данных.
• 🔍 Выберите отчёт "Поиск дублирующихся значений" (в некоторых конфигурациях может называться "Поиск дублей").
• 📌 Укажите поле для поиска (например, Наименование или ИНН).
• 🖱️ Запустите отчёт и проанализируйте результаты.

Этот метод работает в большинстве типовых конфигураций (1С:Бухгалтерия, 1С:Управление торговлей, 1С:Зарплата и управление персоналом). Однако у него есть ограничения:

• ⚠️ Не все поля доступны для анализа (например, нельзя искать дубли по составным полям).
• ⚠️ Отчёт может не учитывать регистр или пробелы (например, "ООО Ромашка" и "ООО РОМАШКА" будут считаться дублями).

2. Использование запроса 1С для поиска дублей

Если стандартные отчёты не дают нужного результата, можно написать запрос на языке 1С. Этот метод гибкий и позволяет искать дубли по нескольким полям одновременно, а также применять дополнительные фильтры (например, игнорировать удалённые записи).

Пример запроса для поиска дублирующихся номенклатурных позиций по наименованию:

ВЫБРАТЬ
Номенклатура.Наименование КАК Наименование,
КОЛИЧЕСТВО(*) КАК Количество
ИЗ
Справочник.Номенклатура КАК Номенклатура
ГДЕ
НЕ Номенклатура.ПометкаУдаления
СГРУППИРОВАТЬ ПО
Номенклатура.Наименование
ИМЕЮЩИЕ
КОЛИЧЕСТВО(*) > 1

Чтобы найти дубли по нескольким полям (например, по Наименование и Артикул), модифицируйте запрос:

ВЫБРАТЬ
Номенклатура.Наименование КАК Наименование,
Номенклатура.Артикул КАК Артикул,
КОЛИЧЕСТВО(*) КАК Количество
ИЗ
Справочник.Номенклатура КАК Номенклатура
ГДЕ
НЕ Номенклатура.ПометкаУдаления
СГРУППИРОВАТЬ ПО
Номенклатура.Наименование,
Номенклатура.Артикул
ИМЕЮЩИЕ
КОЛИЧЕСТВО(*) > 1

Для удобства можно вывести результаты запроса в таблицу значений и добавить обработку для автоматического объединения дублей:

Результат = Новый ТаблицаЗначений;
Результат.Колонки.Добавить("Наименование");
Результат.Колонки.Добавить("Количество");

Запрос = Новый Запрос;
Запрос.Текст = "ВЫБРАТЬ ..."; // Ваш запрос
РезультатЗапроса = Запрос.Выполнить();
Выборка = РезультатЗапроса.Выбрать();

Пока Выборка.Следующий() Цикл
НоваяСтрока = Результат.Добавить();
НоваяСтрока.Наименование = Выборка.Наименование;
НоваяСтрока.Количество = Выборка.Количество;
КонецЦикла;

3. Поиск дублей с помощью системы компоновки данных (СКД)

Система компоновки данных (СКД) — мощный инструмент для анализа данных в 1С, который позволяет гибко настраивать отчёты, включая поиск дублирующихся записей. Преимущество СКД в том, что она предоставляет удобный интерфейс для фильтрации и группировки данных без написания кода.

Чтобы найти дубли с помощью СКД:

1. 📂 Создайте новый отчёт (Файл → Новый → Отчёт в конфигураторе).
2. 🔧 В конструкторе схемы компоновки данных добавьте нужный справочник (например, Справочник.Контрагенты).
3. 📊 В настройках группировки выберите поля, по которым нужно искать дубли (например, ИНН или Наименование).
4. 🔍 В настройках отбора добавьте условие "Количество() > 1".
5. 🖥️ Запустите отчёт и проанализируйте результаты.

Пример настройки СКД для поиска дублей по ИНН и КПП:

СКД позволяет не только находить дубли, но и экспортировать результаты в Excel или PDF для дальнейшего анализа. Кроме того, в отчёте можно добавить условное оформление, чтобы выделить цветом наиболее критичные дубли (например, с количеством повторений более 5).

Создать новую схему компоновки данных|Добавить источник данных (справочник или документ)|Настроить группировку по ключевым полям|Добавить отбор по количеству записей|Проверить результаты на тестовых данных-->

4. Автоматизированный поиск дублей с помощью обработок

Для регулярного поиска дублей удобно использовать внешние обработки. Они позволяют автоматизировать процесс, сохранять настройки и запускать проверку по расписанию. Одной из самых популярных обработок для поиска дублей является "Поиск и замена дублей" (доступна на Инфостарт и других площадках для 1С-разработчиков).

Как работать с обработкой:

• 📥 Скачайте обработку и подключите её в 1С (Файл → Открыть).
• 🔧 Выберите справочник или документ для анализа (например, Справочник.Контрагенты).
• 📌 Укажите поля для поиска дублей (можно выбрать несколько, например, Наименование + ИНН).
• ⚙️ Настройте параметры сравнения (учитывать регистр, пробелы, знаки препинания).
• 🖱️ Запустите поиск и проанализируйте результаты.

Преимущества использования обработок:

• ✅ Возможность сохранять шаблоны поиска для повторного использования.
• ✅ Поддержка нечёткого поиска (например, поиск похожих наименований с опечатками).
• ✅ Автоматическое объединение дублей или создание отчётов для ручной обработки.

Некоторые обработки также поддерживают интеграцию с 1С:EDT, что позволяет запускать поиск дублей прямо из среды разработки. Это особенно удобно для программистов, которые хотят добавить проверку дублей в свои собственные решения.

Иногда дубли неочевидны: они могут скрываться в разных регистрах, содержать опечатки или лишние символы (пробелы, тире, кавычки). В таких случаях стандартные методы поиска не срабатывают, и требуется более глубокий анализ.

ВЫБРАТЬ
ВЫРАЗИТЬ(Номенклатура.Наименование КАК СТРОКА(50)) КАК Наименование,
КОЛИЧЕСТВО(*) КАК Количество
ИЗ
Справочник.Номенклатура КАК Номенклатура
ГДЕ
НЕ Номенклатура.ПометкаУдаления
СГРУППИРОВАТЬ ПО
ВЫРАЗИТЬ(Номенклатура.Наименование КАК СТРОКА(50))
ИМЕЮЩИЕ
КОЛИЧЕСТВО(*) > 1

Процедура НайтиПохожиеНаименования()
Список = Новый СписокЗначений;
Для Каждого Элемент Из Справочник.Номенклатура Цикл
Если НЕ Элемент.ПометкаУдаления Тогда
Для Каждого Элемент2 Из Справочник.Номенклатура Цикл
Если НЕ Элемент2.ПометкаУдаления И Элемент <> Элемент2 Тогда
Если СтрРасстояниеЛевенштейна(Элемент.Наименование, Элемент2.Наименование) < 3 Тогда
Список.Добавить(Элемент.Наименование + " ~ " + Элемент2.Наименование);
КонецЕсли;
КонецЕсли;
КонецЦикла;
КонецЕсли;
КонецЦикла;
Сообщить(Список.Количество() + " пар похожих наименований найдено");
КонецПроцедуры

ВЫБРАТЬ
Контрагенты.ИНН + "|" + Контрагенты.КПП КАК Ключ,
КОЛИЧЕСТВО(*) КАК Количество
ИЗ
Справочник.Контрагенты КАК Контрагенты
ГДЕ
НЕ Контрагенты.ПометкаУдаления
СГРУППИРОВАТЬ ПО
Контрагенты.ИНН + "|" + Контрагенты.КПП
ИМЕЮЩИЕ
КОЛИЧЕСТВО(*) > 1

Процедура ВыполнитьПоискДублей() Экспорт
// Код поиска дублей (например, запрос из раздела 2)
Запрос = Новый Запрос;
Запрос.Текст = "ВЫБРАТЬ ...";
Результат = Запрос.Выполнить();

// Отправка результатов на email администратору
ТекстПисьма = "Найдены дублирующиеся записи:" + Символы.ПС;
Выборка = Результат.Выбрать();
Пока Выборка.Следующий() Цикл
ТекстПисьма = ТекстПисьма + Выборка.Наименование + " (" + Выборка.Количество + ")" + Символы.ПС;
КонецЦикла;

Почта = Новый ИнтернетПочта;
Почта.Адресат = "admin@company.ru";
Почта.Тема = "Отчёт по дублям в 1С";
Почта.Текст = ТекстПисьма;
Почта.Отправить();
КонецПроцедуры

Процедура ПередЗаписью(Отказ)
Если НЕ ПометкаУдаления Тогда
Запрос = Новый Запрос;
Запрос.Текст = "ВЫБРАТЬ РАЗРЕШЕННЫЕ КОЛИЧЕСТВО(*) КАК Количество
ИЗ Справочник.Контрагенты КАК К
ГДЕ К.ИНН = &ИНН И К.Ссылка <> &Ссылка";
Запрос.УстановитьПараметр("ИНН", ИНН);
Запрос.УстановитьПараметр("Ссылка", Ссылка);
Если Запрос.Выполнить().Выбрать().Количество > 0 Тогда
Сообщить("Внимание! Контрагент с таким ИНН уже существует!");
Отказ = Истина;
КонецЕсли;
КонецЕсли;
КонецПроцедуры

ВЫБРАТЬ
ЗаказыПокупателей.Номер КАК Номер,
ЗаказыПокупателей.Дата КАК Дата,
КОЛИЧЕСТВО(*) КАК Количество
ИЗ
Документ.ЗаказПокупателя КАК ЗаказыПокупателей
СГРУППИРОВАТЬ ПО
ЗаказыПокупателей.Номер,
ЗаказыПокупателей.Дата
ИМЕЮЩИЕ
КОЛИЧЕСТВО(*) > 1

ВЫБРАТЬ
ТоварыНаСкладах.Номенклатура КАК Номенклатура,
ТоварыНаСкладах.Склад КАК Склад,
КОЛИЧЕСТВО(*) КАК Количество
ИЗ
РегистрНакопления.ТоварыНаСкладах КАК ТоварыНаСкладах
СГРУППИРОВАТЬ ПО
ТоварыНаСкладах.Номенклатура,
ТоварыНаСкладах.Склад
ИМЕЮЩИЕ
КОЛИЧЕСТВО(*) > 1