DevToys Web Pro iconDevToys Web ProБлог
Оценете ни:
Изпробвайте разширението за браузър:

Детектор и премахване на невидими символи

Текст

Обобщение

Не са намерени невидими символи.

Визуализирано

Премахване на категории

Почистен резултат

  • Технически подробности

    Как работи детекторът на невидими знаци

    Какво прави инструментът

    Инструментът сканира текста за кодови точки на Unicode, които не показват видим глиф, и изброява всяка с нейния U+ код, официално име, позиция и брой по тип. Открива интервал с нулева ширина (U+200B), non-joiner и joiner с нулева ширина (U+200C, U+200D), word joiner (U+2060), маркер за ред на байтовете (U+FEFF), меко тире (U+00AD), неразделяем и други екзотични интервали (U+00A0, U+2007, U+202F), разделители на редове и абзаци и двупосочни контроли (U+202A–U+202E, U+2066–U+2069). Можете да ги покажете в текста и да премахнете всички или само избрани категории. Обработката се извършва локално в браузъра.

    Често срещани случаи на употреба от разработчици

    Разработчиците го използват, за да намерят интервал с нулева ширина, който проваля сравнение на низове, API ключ или парола, които не съвпадат, JSON файл, който не се чете заради BOM, или CSV заглавие, което изглежда идентично, но не е. Автори и редактори почистват текст, копиран от уеб страници, PDF файлове и чат инструменти. Специалистите по сигурност сканират изходен код и pull requests за bidi контроли от Trojan Source (CVE-2021-42574) и хитрости с homoglyph. Използва се и за почистване на текст от AI асистенти, съдържащ случайни знаци с нулева ширина или неразделяеми интервали, преди поставяне в CMS, електронна таблица или терминал.

    Категории знаци

    Знаците се разделят на групи: знаци с нулева ширина (U+200B–U+200D, U+2060, U+FEFF), варианти на интервала (NBSP U+00A0, en и em интервали U+2000 до U+200A, тесен NBSP U+202F, идеографски интервал U+3000), контроли за форматиране (меко тире U+00AD, невидими разделители U+2061 до U+2064), двупосочни контроли (LRE, RLE, PDF, LRO, RLO, LRI, RLI, FSI, PDI) и непечатаеми контролни знаци от диапазоните C0 и C1. Някои имат смисъл: ZWJ свързва последователности от емоджита, а ZWNJ е необходим в персийския и хинди правопис.

    Често срещани капани и гранични случаи

    Премахването на всичко не винаги е правилно: изтриването на ZWJ разваля емоджита като семейство или знамена, а премахването на ZWNJ променя думи в персийски, арабски и индийски писмености. Заменяйте NBSP с обикновен интервал, вместо да го изтривате, иначе думите ще се слеят. BOM в началото на файла често е по-добре да се премахне на ниво файл. Инструментите за подрязване и нормализация не премахват знаци с нулева ширина, а homoglyph (кирилица вместо латинско a) са видими знаци, затова изискват отделна проверка. За екраниране на текст вижте Text Escape; за броене вижте Text Analyzer.