Popravljač mojibake: popravka pokvarenog teksta
Pokvaren tekst
Ispravljen tekst
Ručna konverzija
Jednobajtni skupovi znakova i UTF-8 mogu se koristiti na obe strane. Shift_JIS, GB18030 i Big5 su samo za dekodiranje.
Tehnički detalji
Kako radi popravljač mojibake
Šta radi popravljač mojibake
Mojibake je tekst koji je napisan u jednom kodiranju znakova, a pročitan u drugom, pa se „é” prikazuje kao „é”, a zakrivljeni apostrof kao „’”. Alatka poništava grešku: ponovo kodira vaš tekst skupom znakova kao kojim je pogrešno pročitan da bi povratila izvorne bajtove, a zatim te bajtove dekodira skupom znakova u kojem su zaista bili. Isprobava sve kombinacije UTF-8, Windows-1252, ISO-8859-1, Windows-1251, KOI8-R, ISO-8859-2, Shift_JIS, GB18030 i Big5, ocenjuje svaki rezultat i prikazuje najbolju popravku uz rangiranu listu alternativa.
Uobičajene upotrebe
Programeri ga koriste za popravku izvoza baza podataka, CSV datoteka, naslova imejlova, redova logova i API odgovora u kojima su akcentovana slova postala à sekvence, za čišćenje teksta kopiranog sa stranice poslate sa pogrešnim zaglavljem skupa znakova i za utvrđivanje koji je sloj u pipeline-u dekodirao UTF-8 kao Latin-1. Takođe vraća ruski tekst prikazan kao Привет i pomaže da se proveri da popravka u kodu zaista daje željene znakove.
Podržana kodiranja i obrasci
Najčešći slučaj je UTF-8 pročitan kao Windows-1252 ili Latin-1: é, ü, ’, “ i emodžiji kao što je 😀. UTF-8 pročitan kao Windows-1251 daje ćirilične parove kao što su Р i С praćeni simbolima. Dvostruko kodiran tekst, kod kojeg se oštećenje desilo dvaput, popravlja se ponavljanjem UTF-8 koraka do tri puta. Ručni birači Kodiraj kao i Dekodiraj kao pokrivaju jednobajtne skupove znakova u oba smera; Shift_JIS, GB18030 i Big5 mogu se koristiti samo za dekodiranje.
Zamke i ograničenja
Popravka radi samo kada nijedan bajt nije izgubljen. Znakovi pitanja i zamenski znakovi U+FFFD u pokvarenom tekstu ne mogu se povratiti, a tekst koji je u nekoj fazi konvertovan sa gubicima ostaje oštećen. Automatski izbor je heuristika zasnovana na slovima, uobičajenim rečima i tipičnim mojibake sekvencama, pa veoma kratki stringovi mogu biti dvosmisleni: proverite tabelu alternativa ili koristite ručne birače. Ispravan tekst ostaje nepromenjen, a ulaz je ograničen na 1.000.000 znakova.