ক্লাউডিয়ান - আগের চেয়েও বেশি তথ্যকে কৃত্রিম বুদ্ধিমত্তার আরও কাছাকাছি নিয়ে আসা।

এমআইটির একজন প্রাক্তন ছাত্রের সহ-প্রতিষ্ঠিত ক্লাউডিয়ানের স্টোরেজ সিস্টেমগুলি ব্যবসাগুলিকে ডেটা-নিবিড় এআই মডেল এবং এজেন্টদের কাছে স্কেলে ডেটা সরবরাহ করতে সহায়তা করছে।

ব্যবসার জন্য একটি স্কেলেবল স্টোরেজ সিস্টেম, যা স্টোরেজ এবং এআই মডেলের মধ্যে নিরবচ্ছিন্ন ডেটা প্রবাহ সক্ষম করে। ছবি: মিডজার্নি

কৃত্রিম বুদ্ধিমত্তা ব্যবসায়িক প্রতিষ্ঠানের ডেটা সংরক্ষণ এবং অ্যাক্সেসের পদ্ধতি পরিবর্তন করছে। এর কারণ হল ঐতিহ্যবাহী ডেটা স্টোরেজ সিস্টেমগুলি একসাথে কয়েকজন ব্যবহারকারীর কাছ থেকে সহজ কমান্ড পরিচালনা করার জন্য ডিজাইন করা হয়েছিল, যেখানে আজকের লক্ষ লক্ষ এজেন্ট সহ কৃত্রিম বুদ্ধিমত্তা সিস্টেমগুলিকে ক্রমাগত এবং সমান্তরালভাবে বিপুল পরিমাণে ডেটা অ্যাক্সেস এবং প্রক্রিয়াকরণ করতে হয়।

ঐতিহ্যবাহী স্টোরেজ সিস্টেমে এখন অনেক জটিল স্তর রয়েছে, যা AI কে ধীর করে দেয় কারণ GPU-তে পৌঁছানোর আগে ডেটাকে একাধিক স্তরের মধ্য দিয়ে যেতে হয় - গ্রাফিক্স প্রসেসর, যা AI-এর "মস্তিষ্ক" হিসাবে বিবেচিত হয়।

ক্লাউডিয়ান - মাইকেল তসো (এমআইটি থেকে) এবং হিরোশি ওহতা দ্বারা সহ-প্রতিষ্ঠিত - এআই বিপ্লবের সাথে তাল মিলিয়ে ডেটা স্টোরেজকে সহায়তা করছে। কোম্পানিটি এন্টারপ্রাইজগুলির জন্য একটি স্কেলেবল স্টোরেজ সিস্টেম তৈরি করেছে, যা স্টোরেজ এবং এআই মডেলের মধ্যে নিরবচ্ছিন্ন ডেটা প্রবাহকে সক্ষম করে।

এই সিস্টেমটি স্টোরেজে সমান্তরাল কম্পিউটিং প্রয়োগ করে জটিলতা হ্রাস করে, বৃহৎ-স্কেল ডেটাসেট সংরক্ষণ, পুনরুদ্ধার এবং প্রক্রিয়াকরণ করতে সক্ষম একটি একক সমান্তরাল প্রক্রিয়াকরণ প্ল্যাটফর্মে AI কার্যকারিতা এবং ডেটা একত্রিত করে, স্টোরেজ এবং GPU এবং CPU উভয়ের মধ্যে উচ্চ-গতির সরাসরি সংযোগের মাধ্যমে।

ক্লাউডিয়ানের ইন্টিগ্রেটেড স্টোরেজ এবং কম্পিউটিং প্ল্যাটফর্ম বাণিজ্যিক-স্কেল এআই সরঞ্জামগুলির বিকাশকে সহজ করে তোলে এবং ব্যবসাগুলিকে এআই বুমের সাথে তাল মিলিয়ে চলতে সক্ষম স্টোরেজ অবকাঠামো প্রদান করে।

"মানুষ প্রায়শই AI সম্পর্কে একটা বিষয় উপেক্ষা করে, তা হলো, এটি সম্পূর্ণ ডেটার উপর নির্ভরশীল," সো বলেন। "১০% বেশি ডেটা রেখে, এমনকি ১০ গুণও না, আপনি AI কর্মক্ষমতা ১০% বৃদ্ধি করতে পারবেন না - আপনার ১,০০০ গুণ ডেটা প্রয়োজন। ডেটা এমনভাবে সংরক্ষণ করা যা পরিচালনা করা সহজ, একই সাথে গণনাগুলিকে এর মধ্যে এম্বেড করা যাতে ইনপুট দেওয়ার সাথে সাথে এটি প্রক্রিয়া করা যায় এবং এটিকে স্থানান্তর না করেই - এই দিকটিই শিল্পের দিকে এগিয়ে যাচ্ছে।"

অবজেক্ট স্টোরেজ এবং এআই

বর্তমানে, ক্লাউডিয়ানের প্ল্যাটফর্ম একটি অবজেক্ট স্টোরেজ আর্কিটেকচার ব্যবহার করে, যেখানে সকল ধরণের ডেটা - ডকুমেন্ট, ভিডিও , সেন্সর ডেটা - মেটাডেটা সহ একক অবজেক্ট হিসাবে সংরক্ষণ করা হয়। অবজেক্ট স্টোরেজ একটি সমতল কাঠামোতে প্রচুর পরিমাণে ডেটা পরিচালনা করতে পারে, যা অসংগঠিত ডেটা এবং এআই সিস্টেমের জন্য আদর্শ, তবে পূর্বে কম্পিউটার মেমোরিতে অনুলিপি না করে সরাসরি এআই মডেলে ডেটা পাঠানো অসম্ভব ছিল - যার ফলে ল্যাটেন্সি এবং উচ্চ শক্তি খরচ হয়।

গত জুলাই মাসে, ক্লাউডিয়ান ঘোষণা করেছিল যে তারা একটি ভেক্টর ডাটাবেস সহ তার অবজেক্ট স্টোরেজ সিস্টেম সম্প্রসারণ করেছে, যা তাৎক্ষণিকভাবে AI ব্যবহারের জন্য প্রস্তুত ফর্ম্যাটে ডেটা সংরক্ষণ করে। ডেটা লোড হয়ে গেলে, ক্লাউডিয়ান সুপারিশ ইঞ্জিন, সার্চ ইঞ্জিন এবং AI সহকারীর মতো AI সরঞ্জামগুলিকে সমর্থন করার জন্য ডেটার রিয়েল-টাইম ভেক্টর গণনা করে।

ক্লাউডিয়ান এনভিআইডিআইএ-এর সাথে অংশীদারিত্বের ঘোষণাও দিয়েছে, যাতে কোম্পানির জিপিইউ-এর সাথে সরাসরি কাজ করে এমন একটি স্টোরেজ সিস্টেম তৈরি করা যায়। ক্লাউডিয়ান বলেছে যে এই নতুন সিস্টেমটি দ্রুত এআই প্রক্রিয়াকরণ সক্ষম করে এবং কম্পিউটিং খরচ কমায়।

"প্রায় দেড় বছর আগে NVIDIA আমাদের সাথে যোগাযোগ করেছিল কারণ GPU গুলি কেবল তখনই কার্যকর যখন তাদের ডেটা 'ফিড' করার ধারাবাহিক প্রবাহ থাকে," Tso বলেন। "এখন মানুষ বুঝতে পারছে যে বিশাল ডেটা ব্লক স্থানান্তর করার চেয়ে ডেটাতে AI আনা সহজ। আমাদের স্টোরেজ সিস্টেম অনেক AI ফাংশনকে একীভূত করে, তাই আমরা যেখানে আমরা সংগ্রহ করি এবং সংরক্ষণ করি তার কাছাকাছি ডেটা প্রি-প্রসেস এবং পোস্ট-প্রসেস করতে পারি।"

এআই-পছন্দের স্টোরেজ

ক্লাউডিয়ান বিশ্বব্যাপী প্রায় ১,০০০ ব্যবসা প্রতিষ্ঠানকে তাদের তথ্যের মূল্য সর্বাধিক করতে সাহায্য করছে, যার মধ্যে রয়েছে প্রধান নির্মাতা, আর্থিক প্রতিষ্ঠান, স্বাস্থ্যসেবা সুবিধা এবং সরকারি সংস্থা।

উদাহরণস্বরূপ, ক্লাউডিয়ানের স্টোরেজ প্ল্যাটফর্ম একটি প্রধান অটোমেকারকে সমর্থন করছে যারা AI ব্যবহার করে পৃথক উৎপাদন রোবটগুলিতে কখন রক্ষণাবেক্ষণের প্রয়োজন তা নির্ধারণ করে। ক্লাউডিয়ান গবেষণাপত্র এবং পেটেন্ট সংরক্ষণের জন্য মার্কিন জাতীয় গ্রন্থাগার অফ মেডিসিনের সাথে এবং টিউমার ডিএনএ সিকোয়েন্স সংরক্ষণের জন্য জাতীয় ক্যান্সার ডেটাবেসের সাথে সহযোগিতা করে - সমৃদ্ধ ডেটাসেট যা AI প্রক্রিয়াজাত করে নতুন চিকিৎসা বা আবিষ্কারের গবেষণাকে সমর্থন করতে পারে।

"GPU গুলি একটি দুর্দান্ত চালিকা শক্তি," Tso বলেন। "মুরের সূত্র প্রতি দুই বছর অন্তর কম্পিউটিং শক্তি দ্বিগুণ করে, কিন্তু GPU গুলি একটি চিপে কাজগুলিকে সমান্তরাল করতে পারে, একাধিক GPU গুলিকে একসাথে সংযুক্ত করতে পারে এবং মুরের সূত্রের বাইরেও যেতে পারে। এই স্কেলটি AI কে বুদ্ধিমত্তার নতুন স্তরে ঠেলে দিচ্ছে, কিন্তু GPU গুলিকে পূর্ণ ক্ষমতায় কাজ করার একমাত্র উপায় হল তাদের কম্পিউটিং শক্তির সাথে মেলে এমন গতিতে ডেটা সরবরাহ করা - এবং এটি করার একমাত্র উপায় হল GPU এবং আপনার ডেটার মধ্যে থাকা সমস্ত মধ্যবর্তী স্তরগুলি দূর করা।"

(এমআইটি অনুসারে)

সূত্র: https://vietnamnet.vn/cloudian-dua-du-lieu-den-gan-ai-hon-bao-gio-het-2433241.html