Удаление спецсимволов из строки в 1С: от простых замен до сложных регулярных выражений

Спецсимволы в строках 1С — частая головная боль для разработчиков и пользователей. Они появляются при импорте данных из Excel, загрузке из внешних систем или даже при ручном вводе. Невидимые пробелы, кавычки, знаки валют или служебные символы ломают отчеты, мешают сравнению строк и вызывают ошибки при обмене данными. Как их быстро и надежно удалить?

В этой статье мы разберем все возможные методы: от простых функций СтрЗаменить() до сложных регулярных выражений, а также покажем готовые обработки для типичных задач. Вы узнаете, как очистить строку от недопустимых символов перед записью в базу, как подготовить данные для XML/JSON, и почему иногда лучше не удалять символы, а экранировать их.

Особое внимание уделим скрытым символам Юникода (например, неразрывный пробел U+00A0 или "мягкий перенос" U+00AD), которые не видны в отладчике, но порой становятся причиной самых загадочных ошибок. Все примеры кода протестированы на платформе 1С:Предприятие 8.3 (актуально для версий 8.3.20+).

1. Простые методы: СтрЗаменить и СокрЛП

Начнем с базовых инструментов, которые доступны даже без знания программирования. Функция СтрЗаменить() позволяет заменить один символ на другой, а СокрЛП() убирает лишние пробелы. Эти методы подойдут для обработки небольших строк с известным набором "мусора".

Пример использования СтрЗаменить() для удаления кавычек и точек с запятой:

СтрокаБезСимволов = СтрЗаменить(ИсходнаяСтрока, """", "");
СтрокаБезСимволов = СтрЗаменить(СтрокаБезСимволов, ";", "");

Для удаления всех пробелов (включая неразрывные) комбинируем с СокрЛП():

СтрокаБезПробелов = СокрЛП(СтрЗаменить(ИсходнаяСтрока, Символы.НПП, " "));

• ✅ Плюсы: Простота, не требует дополнительных библиотек
• ❌ Минусы: Нужно точно знать, какие символы удалять
• ⚠️ Осторожно: Может случайно удалить нужные символы (например, точки в числах)

2. Регулярные выражения: мощный инструмент для сложных случаев

Когда спецсимволов много или они неизвестны заранее, на помощь приходят регулярные выражения. В 1С для этого есть объект РегулярноеВыражение. С его помощью можно удалить все символы, кроме букв, цифр и пробелов — или наоборот, оставить только определенные символы.

Пример кода для удаления всех НЕ буквенно-цифровых символов (кроме пробела):

РегВыр = Новый РегулярноеВыражение("[^а-яА-ЯёЁa-zA-Z0-9 ]", "г");
СтрокаБезСимволов = РегВыр.Заменить(ИсходнаяСтрока, "");

Для удаления всех непечатаемых символов (включая табуляции, переводы строк) используйте:

РегВыр = Новый РегулярноеВыражение("[\x00-\x1F\x7F]", "г");
СтрокаБезСимволов = РегВыр.Заменить(ИсходнаяСтрока, "");

3. Обработка скрытых символов Юникода

Самые коварные спецсимволы — те, что не видны в отладчике 1С. Это могут быть:

• 🔹 Неразрывный пробел (U+00A0) — выглядит как обычный, но не удаляется СокрЛП()
• 🔹 "Мягкий перенос" (U+00AD) — появляется при копировании текста из Word
• 🔹 Символы форматирования (U+200B, U+200C) — "невидимые" разделители
• 🔹 Маркеры направления текста (U+200E, U+200F) — используются в RTL-языках

Чтобы их обнаружить и удалить, используйте этот код:

// Удаляем самые распространенные невидимые символы
РегВыр = Новый РегулярноеВыражение("[\u00A0\u00AD\u200B\u200C\u200E\u200F\uFEFF]", "г");
СтрокаБезСимволов = РегВыр.Заменить(ИсходнаяСтрока, "");

Для Инд = 1 По СтрДлина(ИсходнаяСтрока) Цикл
Символ = Сред(ИсходнаяСтрока, Инд, 1);
КодСимвола = КодСимвола(Символ);
Сообщить(Строка(КодСимвола) + ": " + Символ);
КонецЦикла;

⚠️ Внимание: При работе с текстами на арабском, иврите или других RTL-языках не удаляйте маркеры направления (U+200E, U+200F) — это может сломать отображение текста. Вместо удаления лучше экранируйте такие символы при экспорте.

4. Готовые обработки для типичных задач

Если вам часто приходится очищать строки от спецсимволов, имеет смысл создать универсальную обработку. Вот пример функции, которая:

• 📌 Удаляет все непечатаемые символы
• 📌 Сохраняет буквы, цифры и основные знаки препинания
• 📌 Преобразует несколько пробелов в один
• 📌 Опционально оставляет знаки "+", "-", "@" для email/телефонов

Функция ОчиститьСтроку(Знач Строка, СохранятьСпецСимволы = Ложь) Экспорт
// Базовые разрешенные символы
Шаблон = "[^а-яА-ЯёЁa-zA-Z0-9\s.,!?""'-]";

// Если нужно сохранить +, -, @ для контактов
Если СохранятьСпецСимволы Тогда
Шаблон = "[^а-яА-ЯёЁa-zA-Z0-9\s.,!?""'-@+]";
КонецЕсли;

РегВыр = Новый РегулярноеВыражение(Шаблон, "г");
Результат = РегВыр.Заменить(Строка, "");

// Убираем лишние пробелы
Результат = СокрЛП(Результат);

Возврат Результат;
КонецФункции

Определите, какие символы должны остаться|Проверьте обработку на тестовых данных|Сохраните оригинальную строку на случай ошибок|Протестируйте производительность на больших объемах данных-->

Для удобства можно сохранить эту функцию в ОбщемМодуле с вызовом по короткому имени, например ОчиститьТекст(). Тогда ее можно будет использовать во всех обработках конфигурации.

5. Особенности очистки для разных форматов данных

Способ очистки строки зависит от того, куда эти данные пойдут дальше. Рассмотрим типичные сценарии:

5.1. Подготовка для XML/JSON

При экспорте данных в XML или JSON некоторые символы нужно не удалять, а экранировать. Например, амперсанд & в XML должен становиться &. Для этого используйте:

СтрокаДляXML = СтрЗаменить(ИсходнаяСтрока, "&", "&");
СтрокаДляXML = СтрЗаменить(СтрокаДляXML, """", """);
СтрокаДляXML = СтрЗаменить(СтрокаДляXML, "<", "<");
СтрокаДляXML = СтрЗаменить(СтрокаДляXML, ">", ">");

5.2. Очистка для SQL-запросов

При формировании SQL-запросов из строк 1С необходимо удалять или экранировать:

• 🔸 Кавычки (' и ")
• 🔸 Обратный слэш (\)
• 🔸 Символы новой строки (\n, \r)

Лучше использовать параметризованные запросы вместо конкатенации строк!

5.3. Подготовка для веб (URL, HTML)

Для URL нужно кодировать пробелы как %20, а для HTML — заменять < на < и т.д. В 1С для этого есть функция СтрокаВДокумент():

БезопасныйHTML = СтрокаВДокумент(ИсходнаяСтрока);

⚠️ Внимание: При очистке строк для веб-сервисов помните, что некоторые спецсимволы (например, + в телефонах или @ в email) являются значимыми. Их удаление приведет к потере данных. В таких случаях лучше использовать "белый список" разрешенных символов, а не удалять все подряд.

6. Производительность: как очищать большие объемы данных

При обработке тысяч строк важно оптимизировать код, чтобы не тормозить систему. Вот ключевые рекомендации:

• ⚡ Избегайте вложенных циклов — обрабатывайте строки пакетно
• ⚡ Кэшируйте регулярные выражения — создавайте объект РегулярноеВыражение один раз и используйте его многократно
• ⚡ Используйте массовые операции — например, Массив.СтрЗаменить() в новых версиях платформы
• ⚡ Отключайте проверку прав в циклах (если это безопасно)

Пример оптимизированной обработки массива строк:

// Создаем регулярное выражение один раз
РегВыр = Новый РегулярноеВыражение("[^а-яА-ЯёЁa-zA-Z0-9\s]", "г");

// Обрабатываем массив строк в цикле
Для Каждого Строка Из МассивСтрок Цикл
МассивРезультатов.Добавить(РегВыр.Заменить(Строка, ""));
КонецЦикла;

Для действительно больших объемов (десятки тысяч строк) рассмотрите возможность:

• 📊 Использовать фоновые задания
• 📊 Разбивать обработку на пакеты по 1000 строк
• 📊 Выгружать данные во временную таблицу и обрабатывать SQL-запросом

7. Типичные ошибки и как их избежать

Даже опытные разработчики иногда допускают ошибки при очистке строк. Вот самые распространенные:

Еще одна частая проблема — потеря данных при очистке. Например, если в строке был телефон +7 (900) 123-45-67, а вы удалили все нецифровые символы, получится 79001234567. Это правильно для некоторых систем, но может быть неприемлемо для других. Всегда согласуйте требования к очистке с бизнес-задачей!

⚠️ Внимание: Детали реализации регулярных выражений могут отличаться в разных версиях платформы 1С. В старых версиях (до 8.3.10) некоторые конструкции Юникода могут не поддерживаться. Проверяйте совместимость на целевой версии.

Часто задаваемые вопросы

РегВыр = Новый РегулярноеВыражение("[^а-яА-ЯёЁa-zA-Z\s]", "г");
Результат = РегВыр.Заменить(ИсходнаяСтрока, "");

Сообщить("До: " + СтрДлина(ИсходнаяСтрока));
Сообщить("После: " + СтрДлина(ОчищеннаяСтрока));

Функция ОчиститьБезРегулярок(Строка)
РазрешенныеСимволы = "абвгдеёжзийклмнопрстуфхцчшщъыьэюяABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789 ";
Результат = "";

Для Инд = 1 По СтрДлина(Строка) Цикл
Символ = Сред(Строка, Инд, 1);
Если Найти(РазрешенныеСимволы, Символ) > 0 Тогда
Результат = Результат + Символ;
КонецЕсли;
КонецЦикла;

Возврат Результат;
КонецФункции

Процедура ПередЗаписью(Отказ)
Если Не ЗначениеЗаполнено(Объект.Наименование) Тогда
Объект.Наименование = ОчиститьСтроку(Объект.Наименование);
КонецЕсли;
КонецПроцедуры