ক্লাউডিয়ান - ডেটাকে আগের চেয়েও এআই-এর আরও কাছাকাছি নিয়ে আসা

ক্লাউডিয়ানের স্টোরেজ সিস্টেম, যা একজন এমআইটি প্রাক্তন ছাত্রের সহ-প্রতিষ্ঠিত, ব্যবসাগুলিকে ডেটা-ক্ষুধার্ত এআই মডেল এবং এজেন্টদের কাছে স্কেলে ডেটা সরবরাহ করতে সহায়তা করছে।

একটি স্কেলেবল এন্টারপ্রাইজ স্টোরেজ সিস্টেম যা স্টোরেজ এবং এআই মডেলের মধ্যে নির্বিঘ্নে ডেটা প্রবাহিত করতে সক্ষম করে। ছবি: মিডজার্নি

কৃত্রিম বুদ্ধিমত্তা ব্যবসার ডেটা সংরক্ষণ এবং অ্যাক্সেসের পদ্ধতি পরিবর্তন করছে। এর কারণ হল ঐতিহ্যবাহী ডেটা স্টোরেজ সিস্টেমগুলি একসাথে কয়েকজন ব্যবহারকারীর কাছ থেকে সহজ কমান্ড প্রক্রিয়া করার জন্য ডিজাইন করা হয়েছিল, যেখানে আজ লক্ষ লক্ষ এজেন্ট সহ কৃত্রিম বুদ্ধিমত্তা সিস্টেমগুলিকে ক্রমাগত এবং সমান্তরালভাবে বিপুল পরিমাণে ডেটা অ্যাক্সেস এবং প্রক্রিয়া করার প্রয়োজন হয়।

ঐতিহ্যবাহী স্টোরেজ সিস্টেমগুলিতে এখন জটিলতার অনেক স্তর রয়েছে, যা AI কে ধীর করে দেয় কারণ GPU - গ্রাফিক্স প্রসেসিং ইউনিট, যা AI এর "মস্তিষ্ক কোষ" হিসাবে বিবেচিত হয় - তে পৌঁছানোর আগে ডেটাকে অনেক স্তরের মধ্য দিয়ে যেতে হয়।

মাইকেল তসো (এমআইটি) এবং হিরোশি ওহতার সহ-প্রতিষ্ঠিত ক্লাউডিয়ান, এআই বিপ্লবের সাথে তাল মিলিয়ে ডেটা স্টোরেজকে সহায়তা করছে। কোম্পানিটি একটি স্কেলেবল এন্টারপ্রাইজ স্টোরেজ সিস্টেম তৈরি করেছে যা স্টোরেজ এবং এআই মডেলের মধ্যে নির্বিঘ্নে ডেটা প্রবাহকে সহায়তা করে।

এই সিস্টেমটি স্টোরেজে সমান্তরাল কম্পিউটিং প্রয়োগ করে জটিলতা হ্রাস করে, বৃহৎ-স্কেল ডেটাসেট সংরক্ষণ, পুনরুদ্ধার এবং প্রক্রিয়াকরণ করতে সক্ষম একটি একক সমান্তরাল প্রক্রিয়াকরণ প্ল্যাটফর্মে AI এবং ডেটা কার্যকারিতা একত্রিত করে, স্টোরেজ এবং GPU এবং CPU উভয়ের মধ্যে উচ্চ-গতির সরাসরি সংযোগের মাধ্যমে।

ক্লাউডিয়ানের ইন্টিগ্রেটেড কম্পিউট-স্টোরেজ প্ল্যাটফর্ম বাণিজ্যিক স্কেলে AI সরঞ্জাম তৈরিকে সহজ করে তোলে, একই সাথে এন্টারপ্রাইজগুলিকে এমন একটি স্টোরেজ অবকাঠামো প্রদান করে যা AI বিস্ফোরণের সাথে তাল মিলিয়ে চলতে পারে।

"মানুষ প্রায়শই AI সম্পর্কে ভুলে যায় যে, সবকিছুই ডেটার উপর নির্ভরশীল," তসো বলেন। "১০% বেশি ডেটা দিয়ে আপনি AI কর্মক্ষমতা ১০% বাড়াতে পারবেন না, এমনকি ১০ গুণ বেশি ডেটাও পাবেন না - আপনার ১,০০০ গুণ বেশি ডেটা প্রয়োজন। ডেটা এমনভাবে সংরক্ষণ করা যা পরিচালনা করা সহজ, এবং গণনা সেখানেই এম্বেড করা যাতে আপনি এটি যেমন আসে তেমনভাবে করতে পারেন, এটিকে স্থানান্তর না করেই - শিল্পটি সেখানেই এগিয়ে যাচ্ছে।"

অবজেক্ট স্টোরেজ এবং এআই

বর্তমানে, ক্লাউডিয়ানের প্ল্যাটফর্মটি একটি অবজেক্ট স্টোরেজ আর্কিটেকচার ব্যবহার করে, যেখানে সকল ধরণের ডেটা - ডকুমেন্ট, ভিডিও , সেন্সর ডেটা - মেটাডেটা সহ একক অবজেক্ট হিসাবে সংরক্ষণ করা হয়। অবজেক্ট স্টোরেজ একটি সমতল কাঠামোতে প্রচুর পরিমাণে ডেটা পরিচালনা করতে পারে, যা এটিকে অসংগঠিত ডেটা এবং এআই সিস্টেমের জন্য আদর্শ করে তোলে, তবে পূর্বে কম্পিউটারের মেমোরিতে অনুলিপি না করে সরাসরি এআই মডেলে ডেটা পাঠানো অসম্ভব ছিল - যার ফলে ল্যাটেন্সি এবং শক্তির অপচয় হয়।

জুলাই মাসে, ক্লাউডিয়ান ঘোষণা করে যে তারা একটি ভেক্টর ডাটাবেস সহ তার অবজেক্ট স্টোরেজ সিস্টেমটি সম্প্রসারিত করেছে, যা এমন একটি ফর্মে ডেটা সংরক্ষণ করে যা AI ব্যবহারের জন্য তাৎক্ষণিকভাবে উপলব্ধ। ডেটা গ্রহণের সাথে সাথে, ক্লাউডিয়ান রিয়েল টাইমে ডেটার ভেক্টর ফর্ম গণনা করে সুপারিশ ইঞ্জিন, অনুসন্ধান এবং AI সহকারীর মতো AI সরঞ্জামগুলিকে সমর্থন করার জন্য।

ক্লাউডিয়ান তাদের স্টোরেজ সিস্টেমকে সরাসরি তাদের জিপিইউগুলির সাথে কাজ করার জন্য এনভিআইডিআইএ-এর সাথে একটি অংশীদারিত্বের ঘোষণাও দিয়েছে। ক্লাউডিয়ান জানিয়েছে যে নতুন সিস্টেমটি দ্রুত এআই প্রক্রিয়াকরণ এবং কম কম্পিউটিং খরচের সুযোগ করে দেয়।

"প্রায় দেড় বছর আগে NVIDIA আমাদের সাথে যোগাযোগ করেছিল কারণ GPU গুলি কেবল তখনই কার্যকর যখন তাদের খাওয়ানোর জন্য ডেটা থাকে," Tso বলেন। "এখন মানুষ বুঝতে পারছে যে বিশাল পরিমাণে ডেটা স্থানান্তর করার চেয়ে ডেটাতে AI আনা সহজ। আমাদের স্টোরেজ সিস্টেমে প্রচুর AI ফাংশন অন্তর্নির্মিত রয়েছে, তাই আমরা যেখানে আমরা সংগ্রহ এবং সংরক্ষণ করি তার কাছাকাছি ডেটা প্রাক-প্রক্রিয়াকরণ এবং পোস্ট-প্রক্রিয়াকরণ করতে পারি।"

এআই-অগ্রাধিকারপ্রাপ্ত স্টোরেজ

ক্লাউডিয়ান বিশ্বব্যাপী প্রায় ১,০০০ ব্যবসা প্রতিষ্ঠানকে তাদের তথ্য থেকে সর্বাধিক মূল্য পেতে সাহায্য করছে, যার মধ্যে রয়েছে বৃহৎ নির্মাতা, আর্থিক প্রতিষ্ঠান, স্বাস্থ্যসেবা সুবিধা এবং সরকারি সংস্থা।

উদাহরণস্বরূপ, ক্লাউডিয়ানের স্টোরেজ প্ল্যাটফর্ম একটি প্রধান অটোমেকারকে AI ব্যবহার করে প্রতিটি প্রোডাকশন রোবটের রক্ষণাবেক্ষণের প্রয়োজন তা নির্ধারণ করতে সাহায্য করছে। ক্লাউডিয়ান গবেষণাপত্র এবং পেটেন্ট সংরক্ষণের জন্য মার্কিন জাতীয় গ্রন্থাগার অফ মেডিসিনের সাথে এবং টিউমার ডিএনএ সিকোয়েন্স সংরক্ষণের জন্য জাতীয় ক্যান্সার ডেটাবেসের সাথে অংশীদারিত্ব করে - সমৃদ্ধ ডেটাসেট যা AI নতুন চিকিৎসা বা নতুন আবিষ্কারের গবেষণায় সহায়তা করার জন্য প্রক্রিয়া করতে পারে।

"GPU গুলি একটি দুর্দান্ত সক্রিয়কারী," Tso বলেন। "মুরের সূত্র প্রতি দুই বছর অন্তর কম্পিউটিং শক্তি দ্বিগুণ করে, কিন্তু GPU গুলি একটি চিপে কাজগুলিকে সমান্তরাল করতে পারে, একাধিক GPU গুলিকে একসাথে শৃঙ্খলিত করতে পারে এবং মুরের সূত্রের বাইরে যেতে পারে। এই স্কেলটি AI কে বুদ্ধিমত্তার নতুন স্তরে ঠেলে দিচ্ছে, কিন্তু GPU গুলিকে তাদের সেরাটা দেওয়ার একমাত্র উপায় হল তাদের কম্পিউটিং শক্তির সমান হারে ডেটা খাওয়ানো - এবং এটি করার একমাত্র উপায় হল GPU এবং আপনার ডেটার মধ্যে থাকা সমস্ত স্তর অপসারণ করা।"

(এমআইটি অনুসারে)

সূত্র: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html