DevToys Web Pro iconDevToys Web Proבלוג
דרגו אותנו:
נסו את תוסף הדפדפן:

מזהה ומסיר תווים בלתי נראים

טקסט

סיכום

לא נמצאו תווים בלתי נראים.

מוצג בצורה גלויה

הסר קטגוריות

פלט מנוקה

  • פרטים טכניים

    איך פועל גלאי התווים הבלתי נראים

    מה גלאי התווים הבלתי נראים עושה

    הכלי סורק טקסט בחיפוש אחר נקודות קוד של Unicode שאינן מציגות גליף גלוי, ומפרט כל אחת מהן עם קוד ה-U+ שלה, שמה הרשמי, מיקומה וספירה לפי סוג. הוא מזהה רווח ברוחב אפס (U+200B), מפריד ומחבר ברוחב אפס (U+200C, U+200D), מחבר מילים (U+2060), סימן סדר בתים (U+FEFF), מקף רך (U+00AD), רווחים בלתי שוברים ורווחים חריגים אחרים (U+00A0, U+2007, U+202F), מפרידי שורה ופסקה, ובקרות דו-כיווניות (U+202A עד U+202E, U+2066 עד U+2069). אפשר להציג אותם בתוך הטקסט ולהסיר את כולם או רק קטגוריות נבחרות. העיבוד מתבצע מקומית בדפדפן שלכם.

    מקרי שימוש נפוצים

    מפתחים משתמשים בו כדי למצוא את הרווח ברוחב אפס שגורם להשוואת מחרוזות להיכשל, מפתח API או סיסמה שאינם תואמים, קובץ JSON עם BOM שאינו מתנתח, או כותרת CSV שנראית זהה אך אינה זהה. כותבים ועורכים מנקים טקסט שהועתק מדפי אינטרנט, מקובצי PDF ומכלי צ'אט. בודקי אבטחה סורקים קוד מקור ו-pull requests בחיפוש אחר בקרות bidi מסוג Trojan Source (CVE-2021-42574) וטריקים של הומוגליפים. משתמשים בו גם לניקוי טקסט מעוזרי בינה מלאכותית שמכיל תווים תועים ברוחב אפס או רווחים בלתי שוברים לפני הדבקה ב-CMS, בגיליון אלקטרוני או במסוף.

    קטגוריות תווים

    התווים מתחלקים למספר קבוצות: תווים ברוחב אפס (U+200B עד U+200D, U+2060, U+FEFF), וריאנטים של רווח (NBSP U+00A0, רווחי en ו-em U+2000 עד U+200A, NBSP צר U+202F, רווח אידיאוגרפי U+3000), בקרות עיצוב (מקף רך U+00AD, מפרידים בלתי נראים U+2061 עד U+2064), בקרות דו-כיווניות (LRE, RLE, PDF, LRO, RLO, LRI, RLI, FSI, PDI), ותווי בקרה שאינם מודפסים מטווחי C0 ו-C1. חלקם בעלי משמעות: ZWJ מחבר רצפי אמוג'י ו-ZWNJ נדרש באיות הפרסי וההינדי.

    מלכודות ומגבלות

    הסרת הכול אינה תמיד נכונה: הסרת ZWJ שוברת אמוג'י כגון רצפי משפחה או דגל, והסרת ZWNJ משנה מילים בכתבים פרסי, ערבי והודיים. החליפו NBSP ברווח רגיל במקום למחוק אותו, אחרת המילים יתמזגו. BOM בתחילת קובץ עדיף לרוב להסיר ברמת הקובץ. כלי חיתוך ונורמליזציה אינם מסירים תווים ברוחב אפס, והומוגליפים (a קירילי במקום a לטיני) הם תווים גלויים, ולכן הם דורשים בדיקה נפרדת. לשם escaping של טקסט ראו Text Escape; לספירות ראו Text Analyzer.