DevToys Web Pro iconDevToys Web Proব্লগ
আমাদের রেট দিন:
ব্রাউজার এক্সটেনশন ব্যবহার করে দেখুন:

Mojibake ফিক্সার: বিকৃত টেক্সট মেরামত করুন

বিকৃত টেক্সট

ঠিক করা টেক্সট

  • ম্যানুয়াল রূপান্তর

    এনকোড করুন
    ডিকোড করুন

    সিঙ্গেল-বাইট ক্যারেক্টার সেট ও UTF-8 উভয় দিকেই ব্যবহার করা যায়। Shift_JIS, GB18030 ও Big5 শুধু ডিকোডিংয়ের জন্য।

    প্রযুক্তিগত বিবরণ

    Mojibake ফিক্সার কীভাবে কাজ করে

    Mojibake ফিক্সার কী করে

    Mojibake হলো এমন টেক্সট যা এক ক্যারেক্টার এনকোডিংয়ে লেখা হয়েছে কিন্তু অন্যটিতে পড়া হয়েছে, ফলে "é" দেখায় "é" এবং বাঁকা অ্যাপোস্ট্রফি দেখায় "’"। টুলটি ভুলটি উল্টে দেয়: ভুলভাবে যে ক্যারেক্টার সেটে পড়া হয়েছিল সেটি দিয়ে আপনার টেক্সট পুনরায় এনকোড করে মূল বাইট ফিরিয়ে আনে, তারপর বাইটগুলো যে ক্যারেক্টার সেটে আসলে ছিল সেটি দিয়ে ডিকোড করে। এটি UTF-8, Windows-1252, ISO-8859-1, Windows-1251, KOI8-R, ISO-8859-2, Shift_JIS, GB18030 ও Big5-এর প্রতিটি সমন্বয় চেষ্টা করে, প্রতিটি ফলাফলের স্কোর দেয় এবং বিকল্পের একটি ক্রমানুসারে সাজানো তালিকাসহ সেরা সমাধান দেখায়।

    সাধারণ ব্যবহার

    ডেভেলপাররা এটি ব্যবহার করেন ডেটাবেস এক্সপোর্ট, CSV ফাইল, ইমেইলের বিষয়, লগ লাইন ও API রেসপন্স মেরামত করতে যেখানে অ্যাকসেন্ট à সিকোয়েন্সে পরিণত হয়েছে, ভুল charset হেডারসহ পরিবেশিত পেজ থেকে কপি করা টেক্সট পরিষ্কার করতে, এবং পাইপলাইনের কোন স্তর UTF-8-কে Latin-1 হিসেবে ডিকোড করেছে তা নির্ণয় করতে। এটি Привет হিসেবে দেখানো রুশ টেক্সটও পুনরুদ্ধার করে এবং কোডে করা সমাধান সত্যিই কাঙ্ক্ষিত অক্ষর তৈরি করছে কি না তা যাচাই করতে সাহায্য করে।

    সমর্থিত এনকোডিং ও প্যাটার্ন

    সবচেয়ে সাধারণ ক্ষেত্র হলো UTF-8-কে Windows-1252 বা Latin-1 হিসেবে পড়া: é, ü, ’, “ এবং 😀-এর মতো ইমোজি। UTF-8-কে Windows-1251 হিসেবে পড়লে Р ও С-এর মতো সিরিলিক জোড়া এবং তার পরে চিহ্ন তৈরি হয়। ডাবল-এনকোড করা টেক্সট, যেখানে ক্ষতি দুবার হয়েছে, UTF-8 ধাপ সর্বোচ্চ তিনবার পুনরাবৃত্তি করে মেরামত করা হয়। ম্যানুয়াল এনকোড করুন ও ডিকোড করুন সিলেক্টর সিঙ্গেল-বাইট ক্যারেক্টার সেট উভয় দিকে কভার করে; Shift_JIS, GB18030 ও Big5 শুধু ডিকোডিংয়ের জন্য ব্যবহার করা যায়।

    সমস্যা ও সীমাবদ্ধতা

    মেরামত শুধু তখনই কাজ করে যখন কোনো বাইট হারায়নি। বিকৃত টেক্সটে প্রশ্নচিহ্ন ও U+FFFD রিপ্লেসমেন্ট ক্যারেক্টার পুনরুদ্ধার করা যায় না, এবং কোনো পর্যায়ে লসি রূপান্তরিত টেক্সট ক্ষতিগ্রস্তই থাকে। স্বয়ংক্রিয় নির্বাচন অক্ষর, সাধারণ শব্দ ও সাধারণ mojibake সিকোয়েন্সের উপর ভিত্তি করা একটি হিউরিস্টিক, তাই খুব ছোট স্ট্রিং অস্পষ্ট হতে পারে: বিকল্প টেবিল দেখুন বা ম্যানুয়াল সিলেক্টর ব্যবহার করুন। সঠিক টেক্সট অপরিবর্তিত রাখা হয় এবং ইনপুট ১,০০০,০০০ অক্ষরে সীমাবদ্ধ।