‘মানুষের মতোই’ অনুবাদে দক্ষতা এআই-এর

কৃত্রিম বুদ্ধিমত্তা বা এআই দিয়ে ভাষা অনুবাদের ক্ষেত্রে মানুষের সমান নির্ভুল দক্ষতা অর্জন করেছেন মাইক্রোসফট-এর গবেষকরা।

সম্প্রতি মাইক্রোসফটের একদল গবেষক জানিয়েছেন, তারা মেশিন ট্রান্সলেটরে এআই ব্যবহার করে চীনা থেকে ইংরেজি ভাষায় অনুবাদের ক্ষেত্রে মানুষের সমান নির্ভুল দক্ষতা অর্জন করেছেন।

প্রতিষ্ঠানটির এশিয়া ও যুক্তরাষ্ট্রের ল্যাবের গবেষকরা জানান, তাদের এ অনুবাদ ব্যবস্থা ‘নিউজটেস্ট ২০১৭’ শীর্ষক লেখার পরীক্ষায় মানুষের সমান দক্ষতা অর্জন করেছে। এ অনুবাদ ব্যবস্থার উন্নয়নে এ শিল্পখাত সংশ্লিষ্ট পেশাদার ও অ্যাকাডেমিক পার্টনাররা অংশগ্রহণ করেছেন। ডব্লিউএমটি১৭ – গবেষণা সম্মেলনে এ অনুবাদ ব্যবস্থার ফলাফল প্রকাশ করা হয় বলে এক বিজ্ঞপ্তিতে জানিয়েছে প্রতিষ্ঠানটি।

এ ফলাফলের যথার্থতা যাচাইয়ে বাইরে থেকে দোভাষী মূল্যায়নকারীদের নিয়োগ দেওয়া হয়, যারা মাইক্রোসফটের ফলাফলের সঙ্গে মানুষের করা অনুবাদের ফলাফলের তুলনামূলক মূল্যায়ন করে দেখেন। 

আরুল মেনেজেস, পার্টনার রিসার্চ ম্যানেজার, মাইক্রোসফট মেশিন ট্রান্সলেশন টিম/মাইক্রোসফট

এ প্রকল্পে কাজ করা ন্যাচরাল ল্যাঙ্গুয়েজ প্রসেসিং গ্রুপের প্রধান এবং মাইক্রোসফট রিসার্চ এশিয়ার সহকারী ব্যবস্থাপনা পরিচালক মিং ঝৌ বলেন, “ডেটাসেটের ক্ষেত্রে মানুষের সমতুল্য হওয়ার মাইলফলক অর্জনে আমরা রোমাঞ্চিত। তবে, এক্ষেত্রে এখনও অনেক প্রতিকূলতা সামনে রয়েছে, যেমন-- রিয়াল-টাইম নিউজ স্টোরিতে ফলাফল যাচাইয়ের ব্যবস্থা।”

গবেষকরা অনুবাদের ওপর অনেক বছর ধরেই কাজ করছেন। তবে, তারা সম্প্রতি ডিপ নিউরাল নেটওয়ার্কস শীর্ষক ট্রেইনিং এআই সিস্টেম ব্যবহার করে গুরুত্বপূর্ণ সাফল্য অর্জন করেছেন বলে জানিয়েছে মাইক্রোসফট। এই সিস্টেম ‘স্ট্যাটিস্টিক্যাল মেশিন অনুবাদ’ নামে পরিচিত।

ডেটাসেটে মানুষের সমতুল্য দক্ষতা অর্জনের মাইলফলক অর্জনে সংখ্যা যোগ করার পাশাপাশি, প্রশিক্ষণ পদ্ধতি ব্যবহার করে অনুবাদ ব্যবস্থাকে আরও নিখুঁত করতে বেইজিং ও ওয়াশিংটনের রেডমন্ডে মাইক্রোসফটের তিনটি গবেষণাদল একসঙ্গে কাজ করেছে। অনেকক্ষেত্রেই এ পদ্ধতি একদম সঠিক না হওয়া পর্যন্ত মানুষের উচ্চারণভঙ্গি অনুসরণ করবে। 

মেশিন অনুবাদে মাইক্রোসফট আরেকটি পদ্ধতি ব্যবহার করেছে, তা হচ্ছে- ডুয়াল লার্নিং। এটি এক ধরনের তথ্য যাচাইয়ের মতো কাজ করে। প্রতিবার সিস্টেমে চীনা ভাষা থেকে ইংরেজি ভাষায় অনুবাদের জন্য কোনো বাক্য দেওয়া হলে, গবেষকদল বাক্যকে আবার ইংরেজি থেকে চীনা ভাষায় অনুবাদ করেন। স্বয়ংক্রিয়ভাবে অনুবাদের ক্ষেত্রে যথার্থতা নির্ণয়ে মানুষ সাধারণত এ পদ্ধতিই ব্যবহার করে বলে জানায় প্রতিষ্ঠানটি। এর পাশাপাশি, এটি সিস্টেমকে সুযোগ করে দেবে নিজ থেকে ভুল ঠিক করে নেওয়ার। ডুয়াল লার্নিং পদ্ধতিও উদ্ভাবন করেছে মাইক্রোসফটেরর গবেষণা দল। এ উদ্ভাবন অন্যান্য কাজের ক্ষেত্রেও কৃত্রিম বুদ্ধিমত্তাগত সহায়তায় ব্যবহারযোগ্য। 

তিয়ে-ইয়ান লিউ, প্রিন্সিপাল রিসার্চ ম্যানেজার উইথ মাইক্রোসফট রিসার্চ এশিয়া, বেইজিং/মাইক্রোসফট

অন্য একটি পদ্ধতি হচ্ছে, ডেলিবারেশন নেটওয়ার্কস। এটি মানুষের নিজের লেখা বারবার পড়ার মাধ্যমে সম্পাদনা ও সংশোধন করার মতো। গবেষকরা মেশিনকে শিক্ষা দিয়েছেন ত্রুটিহীন হওয়ার আগ পর্যন্ত অনুবাদের ক্ষেত্রে কীভাবে একই বাক্যের পুনরাবৃত্তি করতে হয়। 

এছাড়াও মেশিন অনুবাদে ইংরেজি থেকে চীনা এবং চীনা থেকে ইংরেজি ভাষার অনুবাদ ব্যবস্থায় জয়েন্ট ট্রেইনিং কৌশল ব্যবহার করা হয়েছে। এ পদ্ধতি ব্যবহার করা হয় ইংরেজি থেকে চীনা ভাষার অনুবাদের ক্ষেত্রে নতুন ইংরেজি বাক্য অনুবাদ করে চীনা ভাষায় নতুন বাক্যের সঙ্গে জোড়া লাগানোর ক্ষেত্রে। এই একই প্রক্রিয়া ঘটে ইংরেজি থেকে চীনা ভাষায় অনুবাদের ক্ষেত্রেও। এতে করে দুই ধরনের অনুবাদেই দক্ষতা ক্রমান্বয়ে বাড়তে থাকবে।

এক্ষেত্রে ‘অ্যাগ্রিমেন্ট রেগুলারাইজেশন’ নামের একটি পদ্ধতিও ব্যবহার করা হয়েছে। এ পদ্ধতির মাধ্যমে সিস্টেম বাম থেকে ডান কিংবা ডান থেকে বামে পড়ার মাধ্যমে অনুবাদ করতে পারে। এ কৌশল যদি একই অনুবাদের ক্ষেত্রে ব্যবহৃত হয় তবে এটি অনুবাদের ফলাফলকে বিশ্বাসযোগ্য করে তোলে। অনুবাদের সঠিক ছন্দ ধরে রাখার ক্ষেত্রে এ কৌশল অত্যন্ত কার্যকরী বলে দাবি প্রতিষ্ঠানটির।