В первый раз, когда я заметил проблему, это была вовсе не история водяного знака. пользователь вставил фрагмент конфигурации из чата с искусственным интеллектом в один из наших инструментов JSON, и синтаксический анализатор отклонил его с ошибкой, указывающей на символ, которого там не было. Я открыл строку в средстве просмотра кодовой точки и нашел пространство нулевой ширины, расположенное между двумя брекетами, невидимое в каждом редакторе, который я пробовал. Файл выглядел идеально и был сломан. Когда в августе 2026 года Anthropic объявила, что Claude's выходные данные будут нести невидимые маркеры, один и тот же класс персонажей превратился из случайной аварии с вставкой в то, что люди хотели проверить специально, поэтому я построил файл Удалитель водяных знаков Клода это показывает каждый скрытый символ в тексте и удаляет те, которым вы его говорите.
TL;DR: Инструмент Удалитель водяных знаков Клода сканирует вставленный текст для невидимых символов Юникода - пробелов нулевой ширины, селекторов вариаций, пробелов, направленных меток и других кодовых точек, не связанных с печатью, - выделяет каждый из них на месте своим именем кодовой точки и создает очищенную копию одним щелчком мыши. Он также нормализует интеллектуальные кавычки и типографские тире, если вы попросите об этом. Обнаружение и удаление как запускать клиентскую сторону в вашем браузере: ничего из вставленного не загружается, и инструмент работает в автономном режиме после загрузки.
Что такое текстовый водяной знак AI?
Текстовый водяной знак искусственного интеллекта - это сигнал, встроенный в сгенерированный текст, который позволяет программному обеспечению идентифицировать текст как написанный на машине позже. Версия, которая попала в новости в августе 2026 года, имеет уровень символов: невидимые кодовые точки Юникода, сплетенные между видимыми буквами, не несут никакого значения, которое читатель может видеть. Распространение Anthropic's описывало маркеры именно такого рода наряду с метаданными происхождения C2PA для изображений, отраслевым стандартом учетных данных контента, поддерживаемым Коалицией за распространение контента и аутентичность (Coalition for Content Provenance and Authenticity)https://c2pa.org/scipications/scipecifications/2.2/index.html).
Маркировка на уровне символов работает, потому что Юникод содержит сотни кодовых точек, которые отображаются как ничто. селекторы вариаций, определенные в стандарте Юникода для выбора вариантов глифов символа перед ними (https://www.unicode.org/faq/vs.html), отображать как нулевые пиксели при применении к обычным буквам. пробелы нулевой ширины и столярные элементы существуют для управления разрывом линии и лигатурами. последовательность из них, упавшая в абзац, невидима для человека и безошибочна для сканера.
Из этого дизайна следуют две вещи, и обе имеют значение для того, как вы должны относиться к нему. во-первых, метки перемещаются с копированием и вставкой, через базы данных, в git commits, в опубликованные страницы. во-вторых, они хрупкие по своей природе: они не переживают перепечатывания, и они могут ломать вещи на пути через системы, которые никогда не были предназначены для того, чтобы ожидать их.
Почему невидимые персонажи ломают реальные системы?
Потому что большинство программного обеспечения сравнивает байты, а не появления. две строки, которые выглядят одинаково, это разные ключи, разные имена файлов и разные значения в тот момент, когда человек несет скрытую кодовую точку. это сбои, которые я видел в своих собственных журналах с тех пор, как мы отправили детектор:
| Где приземляется | Что идет не так |
|---|---|
| Конфигурация JSON или YAML | Ошибки анализатора, указывающие на & quot;valid& quot; строку или клавиши, которые молча не совпадают |
| Исходный код | Компиляторы отклоняют идентификаторы; Различия обзора кода не показывают видимых изменений |
| Базы данных | Дублирующиеся строки, в которых уникальные ограничения отказываются объединяться |
| Электронные таблицы | VLOOKUP и объединяет промахнутые строки, которые существуют явно |
| Пределы характера | Количество завышается: твит, в котором написано 270 символов, отказывается публиковать сообщения |
| URL-адреса и slugs | Ссылки 404, потому что slug несет символ нулевой ширины |
| испыт | Ctrl+F не может найти фразу, на которую вы смотрите прямо |
Случай подсчета символов мы измеряем напрямую: наш счетчик слов подсчитывает кластеры графем, поэтому скрытые кодовые точки не надувают фигуру видимого символа, но платформа, считающая единицы UTF-16, видит каждую из них. Зазор между этими двумя числами часто является первым намеком на то, что текст несет что-то.
Что обнаруживает средство для удаления водяных знаков Клода?
Инструмент сканирует каждую категорию непечатаемых символов, которые отображаются в тексте, созданном искусственным интеллектом и текстовым процессором, а не только те, которые привязаны к любому отдельному поставщику:
| Категория | Кодовые точки | Почему оно там |
|---|---|---|
| Символы нулевой ширины | U+200B, U+200C, U+200D, U+FEFF | Управление разрывом линии, поведение столяра, блуждающие метки байтового порядка |
| Выборщики вариаций | U+FE00 до U+FE0F, от U+E0100 до U+E01EF | Выбор глифов; диапазон, наиболее упоминаемый в отчетах о водяных знаках |
| Специальные пространства | U+00A0, от U+2000 до U+200A, U+202F, U+3000 | Неразрывные и типографские пространства, которые читаются как обычные пространства |
| Направленные метки | U+200E, U+200F, от U+202A до U+202E | Двунаправленный текстовый контроль |
| Мягкий дефис и столяр слов | U+00AD, U+2060 | Невидимый, за исключением концов линий |
| Типографская пунктуация | Умные кавычки, эм и эн тире, многоточие | Видно, но покажите, когда вы хотите простой ASCII |
Каждое открытие выделяется на месте с его официальным именем Юникода и кодовой точкой, так что вы можете точно увидеть, что находится где, прежде чем принять решение. Удаление является для каждой категории: снимите символы нулевой ширины и селекторы вариаций, сохраните пробелы, если они нужны вашему макету, преобразуйте типографскую пунктуацию в простую ASCII или оставьте ее стилизованной. Очищенный текст и подсчет того, что изменилось, выходят на другую сторону.
Как проверить текст на наличие скрытых символов водяных знаков?
- Вставьте текст в детектор. Все работает в вашем браузере, поэтому черновики, работа с клиентом и неопубликованная копия безопасны для вставки.
- Читайте основные моменты. каждый невидимый символ отображается в виде маркированного токена с его кодовым именем в контексте, поэтому законное неразрывное пространство во французском предложении отличается от пространства нулевой ширины в середине английского слова.
- Выберите, что полоскать. по умолчанию удаляются символы без видимой функции и остается видимая типографика в покое.
- Скопируйте очищенный вывод и проверьте счетчики до и после, если вам нужно доказать, что осталось.
Если вы предпочитаете видеть необработанные кодовые точки самостоятельно, запустите текст через Преобразователь Unicode, который показывает каждый символ как его escape последовательность, Однострочный ниже делает то же самое в Узле для быстрой проверки точки:
const hidden = /[--︀-️]/g
const text = process.argv[2] ?? ''
console.log([...text.matchAll(hidden)].map(m =>
`U+${m[0].codePointAt(0).toString(16).toUpperCase().padStart(4, '0')} at index ${m.index}`
))
Пустой массив означает, что ни один из общих скрытых диапазонов не присутствует. Все остальное сообщает вам кодовую точку и место ее расположения.
Можно ли удалить водяные знаки искусственного интеллекта?
Для вашего собственного контента очистка скрытых символов - это обычная гигиена текста, та же операция, что и удаление параметров отслеживания с URL-адреса, которым вы собираетесь поделиться. Вы запросили текст, отредактировали его, публикуете под своим именем и в любом случае несете за него ответственность; невидимые кодовые точки, которые ломают парсеры и увеличивают количество, являются дефектом этого рабочего процесса, а не его особенностью.
Честный контрапункт заслуживает того, чтобы прямо заявить: маркировка происхождения существует для того, чтобы читатели, платформы и исследователи могли в масштабе рассказывать машинный текст из человеческого текста, и это законная цель. удаление маркеров из текста, чтобы пройти обнаружение там, где запрещается написание ИИ - градуированное эссе, публикация с политикой раскрытия информации, рынок, который запрещает генерируемые обзоры - является нарушением политики с водяным знаком или без него, а удаление символов не меняет то, что текст. На детекторы, которые работают со статистическими шаблонами, а не со скрытыми символами, не влияет очистка, о чем стоит знать, прежде чем кто-либо будет относиться к скрубу персонажей как к анонимности. Наша позиция скучна: раскрывайте то, что требует раскрытия, и сохраняйте опубликованный текст свободным от символов, которые вы не решили туда поместить.
Изменяет ли очистка то, как читается текст?
Нет. удаление символов нулевой ширины и селекторов вариаций удаляет кодовые точки, которые отображались как ничто, поэтому видимый текст идентичен символу. два изменения, в которые вы можете выбрать, видны по дизайну: преобразование умных кавычек и типографских тире в их эквиваленты ASCII, и сворачивание экзотических пространств в обычные. Оба выключены по умолчанию и каждое показывает количество замен, поэтому ничего не меняется бесшумно.The конвертер дел хорошо сочетается сразу после очистки, когда вы также нормализуете заголовки или идентификаторы.
А как насчет C2PA и водяных знаков изображения?
Текст и изображения помечаются по-разному. изображения от генераторов ИИ все чаще несут учетные данные контента C2PA: подписанные метаданные, описывающие, как был сделан файл, встроенные в контейнер файла, а не в пиксели. это метаданные в том же структурном смысле, что и камера EXIF, и применяется та же дисциплина - знайте, что несет файл, прежде чем опубликовать его. Наш Удалитель EXIF показывает каждое поле метаданных на фотографии и полностью отображает выбранное вами в браузере; руководство по изображению метаданных покрывает эту сторону в той же глубине, что и текст.
Чем это отличается от простого поиска и замены?
Вы не можете ввести невидимый символ в поле поиска, что делает ручную замену угадывающей игрой через несколько сотен кодовых точек кандидатов. слепая полоса регекса всего, что не ASCII, - это другой ров: она уничтожает законные акцентированные имена, символы валюты и нелатинский текст вместе с шумом. Работа детектора & #39;s - это средний путь - назовите каждого найденного скрытого персонажа в контексте и позвольте удалить категории с намерением. по той же причине избегайте & quot;cleaners& quot; которые загружают ваш текст на сервер для его обработки; текст, который вы очищаете, обычно является именно тем текстом, который вы еще не опубликовали. Этот - клиентский по конструкции, как и каждый инструмент в нем коллекция privacy-first, йо-
Часто задаваемые вопросы
Распространенные вопросы о невидимых персонажах и очистке текста ИИ отвечали так, как мы отвечаем на них в поддержку.
