জেনারেটিভ ডেটা ইন্টেলিজেন্স

এআই-এর বয়স - বড় মডেলগুলি আরও ভাল ডাটাবেস পছন্দের জন্য কল করে

তারিখ:

অংশীদার সামগ্রী হুয়াওয়ে ক্লাউড MWC24 বার্সেলোনার সময়ে হুয়াওয়ে ক্লাউড সামিট, প্রোডাক্ট ও সলিউশন লঞ্চ এবং ক্লাউড নেটিভ এলিট ক্লাব (CNEC) সেমিনার সহ "সেবা হিসাবে সবকিছুর সাথে বুদ্ধিমত্তাকে ত্বরান্বিত করার জন্য" ধারাবাহিক ইভেন্টের আয়োজন করেছে।

এই অনুষ্ঠানগুলি হুয়াওয়ের পরিকাঠামোকে কৃত্রিম বুদ্ধিমত্তা (AI) উদ্ভাবনের বীজতলা হিসাবে প্রদর্শন করার জন্য ডিজাইন করা হয়েছিল, যেখানে বিভিন্ন শিল্পের আধিকারিক এবং বিশেষজ্ঞরা সামগ্রিক প্রভাবের পাশাপাশি ডাটাবেস, বিগ ডেটা, মিডিয়া পরিষেবাগুলির সাথে AI মিশ্রিত করার গেম-পরিবর্তন সম্ভাবনা নিয়ে চিন্তা করছেন। এবং কম্পিউটিং আর্কিটেকচার।

Huawei ক্লাউড তিনটি ইভেন্টেই GaussDB উপস্থাপন করেছে। ক্লাউড সামিট চলাকালীন, হুয়াওয়ে ক্লাউডের CTO ব্রুনো ঝাং GaussDB বিতরণকৃত রিলেশনাল ডাটাবেস প্রবর্তন করেন, যা সাধারণত অর্থ, টেলিকম এবং সরকারি খাতে ব্যবহৃত হয়। "একটি শক্তিশালী ডাটাবেস হল একটি দৃঢ় ডেটা ফাউন্ডেশন যা বুদ্ধিমান ডিজিটাল আপগ্রেডকে সমর্থন করে," মিঃ ঝাং জোর দিয়েছিলেন।

ডাটাবেস স্থানান্তর, স্থাপনা এবং রক্ষণাবেক্ষণে AI ক্ষমতা প্রয়োগ করে, GaussDB AI অ্যাপ্লিকেশনের জন্য ডেটা প্রক্রিয়াকরণকে আরও দক্ষ করে তোলে, হুয়াওয়ে বলেছে।

ডাটাবেসের সর্বশেষ পুনরাবৃত্তি, যা 2023 সালে চালু করা হয়েছিল, সার্বক্ষণিক পরিষেবার প্রাপ্যতা, ভারী লোডের মধ্যে ধারাবাহিক উচ্চ কার্যকারিতা এবং উচ্চ সঙ্গতিপূর্ণ পরিস্থিতিতে স্থিতিশীলতার গর্ব করে। এটি নিরাপদ সোর্স কোড এবং এন্ড-টু-এন্ড এনক্রিপশন ব্যবস্থার সাথে CC EAL4+ সার্টিফিকেশনকেও সংযুক্ত করে।

হুয়াওয়ে সেন্ট্রাল সফ্টওয়্যার ইনস্টিটিউটের ডাটাবেস ল্যাবের পরিচালক ড. নিকোস এনটারমোস জোর দিয়েছিলেন যে ডাটাবেসগুলিতে Huawei-এর 20-এর বেশি বছরের অভিজ্ঞতার উপর প্রতিষ্ঠিত GaussDB, ডাটাবেস বুদ্ধিমত্তা এবং অটোমেশনের জন্য গ্রাহকদের উচ্চ প্রয়োজনীয়তা পূরণের লক্ষ্যে।

ডাঃ এনটার্মোস যোগ করেছেন যে এই প্রচেষ্টাটি ডাটা পাইপলাইনের মূল পর্যায়গুলি জুড়ে "স্ব-ড্রাইভিং" ক্ষমতা বৃদ্ধি করে যা ডেটাবেস পরামর্শ, উন্নয়ন, এবং অপারেশন এবং রক্ষণাবেক্ষণ (O&M) অন্তর্ভুক্ত করে। পরামর্শ পর্বের সময়, GaussDB স্বয়ংক্রিয়ভাবে সমাধান ডিজাইনের দক্ষতা উন্নত করতে বড় এবং ছোট মডেলগুলিকে সংযুক্ত করে উচ্চ-স্তরের ডিজাইন (HLDs) তৈরি করতে পারে, উদাহরণস্বরূপ। এই সুবিধা, তিনি অনুমান, সমাধান নকশা সময় প্রায় দুই সপ্তাহ থেকে প্রায় দুই দিন ছোট করতে পারেন.

উন্নয়ন পর্বে, GaussDB দরিদ্র SQL স্টেটমেন্টের জন্য স্বয়ংক্রিয় শনাক্তকরণ এবং উন্নতির পরামর্শ সহ প্রাকৃতিক ভাষা-টু-এসকিউএল এবং SQL-টু-এসকিউএল ক্ষমতার মাধ্যমে সরাসরি SQL স্টেটমেন্ট তৈরি করে। O&M পর্যায়ে, GaussDB স্বয়ংক্রিয়ভাবে পরিদর্শন, প্রতিবেদন তৈরি এবং ত্রুটির সীমানা নির্ধারণ করে এবং ত্রুটিপূর্ণ SQL স্টেটমেন্টের জন্য পরামর্শ প্রদান করে।

ড. এনটারমোস ব্যাখ্যা করেছেন যে জনপ্রিয় বাণিজ্যিক ডাটাবেসে ব্যবহৃত সাধারণ সিনট্যাক্সের সাথে ডাটাবেসের সামঞ্জস্যতা এটিকে একটি মাইগ্রেশন সমাধান করে তোলে যা ম্যানুয়াল হস্তক্ষেপ এবং মাইগ্রেশন খরচ কমিয়ে দেয়। GaussDB চীনের প্রধান ব্যাঙ্ক, জয়েন্ট-স্টক ব্যাঙ্ক এবং বীমা সিকিউরিটি কোম্পানিগুলির মূল সিস্টেমে, সেইসাথে ব্রাজিল এবং থাইল্যান্ডের প্রধান Huawei ক্লাউড গ্রাহকদের মধ্যে গৃহীত হয়েছে।

হুয়াওয়ে ক্লাউড মূল কৌশল হিসেবে AI-তে ফোকাস করে

জ্যাকলিন শি, হুয়াওয়ে ক্লাউড গ্লোবাল মার্কেটিং এবং সেলস সার্ভিসের প্রেসিডেন্ট, প্রায় সবকিছুকে নতুন আকার দেওয়ার জন্য AI এর বাধ্যতামূলক সম্ভাবনার প্রশংসা করেছেন। "হুয়াওয়ে ক্লাউডে, এআই একটি মূল কৌশল," মিসেস শি বলেছেন। “আপনি আমাদের সাথে ব্যাপক এআই সমাধান পেতে পারেন, যেমন এআই কম্পিউটিং পাওয়ার সলিউশন এবং পাঙ্গু মডেল। হুয়াওয়ে ক্লাউড দ্রুত বর্ধনশীল ক্লাউড প্রদানকারীদের মধ্যে একটি। আমরা আমাদের গ্রাহকদের জন্য অগ্রণী প্রযুক্তি, সেরা স্থানীয় পরিষেবা এবং আরও এবং আরও ভাল পছন্দ নিয়ে আসার আশা করি।”

"আমরা একটি নতুন স্তরের বুদ্ধিমত্তার সাক্ষী হচ্ছি, যা ফাউন্ডেশন মডেল এবং জেনারেটিভ এআই দ্বারা চালিত," মিঃ ঝাং প্রতিধ্বনিত। “এটি ভবিষ্যদ্বাণী করা হয়েছে যে 2026 সাল নাগাদ, 80 শতাংশেরও বেশি ব্যবসা কৃত্রিম বুদ্ধিমত্তা তৈরি করা সামগ্রী (AIGC) উৎপাদনে ব্যবহার করবে, 70 শতাংশ নকশা ও উন্নয়ন কাজের রূপান্তর করবে৷ 2028 সাল নাগাদ, 75 শতাংশ সফ্টওয়্যার প্রকৌশলী তাদের পাশে AI সহকারী থাকবে, যা 10 সালের শুরুতে মাত্র 2023 শতাংশ ছিল।"

হুয়াওয়ে ক্লাউডের চিফ প্রোডাক্ট অফিসার উইলিয়াম ফ্যাং যোগ করেছেন, “গ্রাহকরা সহযোগিতামূলক ভিন্নধর্মী কম্পিউটিং আর্কিটেকচার, উচ্চতর কর্মক্ষমতা সহ ক্লাউড-নেটিভ কম্পিউট, ব্যাপক ডেটা স্টোরেজ, নিরাপত্তা সম্মতি, লীন গভর্নেন্স এবং নমনীয় স্থাপনা চান৷ "এটি ক্লাউডের সাথে একীভূত করার মাধ্যমেই বুদ্ধিমত্তায় অগ্রগতি সম্ভব।"

গ্রাহকদের তাদের AI যাত্রার দ্রুত গতিতে সাহায্য করার জন্য, মিঃ ফ্যাং হুয়াওয়ে ক্লাউড অবকাঠামোর উন্নয়নের মূল সাফল্যের কারণ হিসাবে বৃহৎ ভাষার মডেল, বড় ডেটা এবং কম্পিউটিং শক্তিকে হাইলাইট করেছেন।

এর থেকেও বেশি, এমনকি প্রথাগত অ্যাপ্লিকেশনগুলির জন্য উত্পাদন, পরিষেবা দৃষ্টান্ত এবং ব্যবসায়িক মডেলগুলিকে নতুনভাবে সংজ্ঞায়িত করা হচ্ছে, বুদ্ধিমত্তা ত্বরান্বিত করার সময় AI এর বিশাল সম্ভাবনা এবং ব্যবসায়িক উদ্দেশ্যগুলির সাথে বাস্তবায়নের জন্য পদ্ধতিগত উদ্ভাবনের প্রয়োজন।

এই লক্ষ্যে, মিঃ ঝাং একটি দ্বিমুখী কৌশল প্রস্তাব করেছিলেন। "ক্লাউডের জন্য AI আপনার অভিজ্ঞতাকে উন্নত করতে AI এবং ফাউন্ডেশন মডেল ব্যবহার করে," তিনি বলেছিলেন। “তারা সফটওয়্যার ডেভেলপমেন্ট, ডিজিটাল কন্টেন্ট উত্পাদন এবং আরও অনেক কিছু সহ শিল্প অ্যাপ্লিকেশন এবং আমাদের নিজস্ব ক্লাউড পরিষেবাগুলিকে নতুন আকার দিচ্ছে৷ AI এর জন্য ক্লাউড AI গ্রহণকে নির্বিঘ্ন এবং দক্ষ করে তোলে। আর্কিটেকচারাল উদ্ভাবন, এআই-নেটিভ স্টোরেজ এবং ডেটা-এআই কনভারজেন্স আপনাকে এআই প্রশিক্ষিত করতে এবং ব্যবহার করার ক্ষমতা দেয় যা আগে কখনও হয়নি।”

Huawei ক্লাউডের পদ্ধতিগত উদ্ভাবন এবং শিল্প অনুশীলনগুলি সিস্টেম আর্কিটেকচার, কম্পিউট, স্টোরেজ, ডাটাবেস, বিগ ডেটা, অন্যান্যগুলির মধ্যে প্রযুক্তিগত উন্নয়নের পাশাপাশি স্বয়ংচালিত, আবহাওয়া, ভার্চুয়াল মানব, R&D এবং আরও অনেক কিছুর জন্য পাঙ্গু মডেলগুলিকে অন্তর্ভুক্ত করে।

পদ্ধতিগত AI-ব্যবসা সারিবদ্ধকরণ

এআই থ্রাস্টের জন্য ক্লাউড ব্যাখ্যা করে, মিঃ ঝাং বলেন, “ফাউন্ডেশন মডেল এবং তাদের অ্যাপ্লিকেশনগুলি এখন পর্যন্ত সবচেয়ে জটিল সফ্টওয়্যার এবং হার্ডওয়্যার সিস্টেম। উদাহরণস্বরূপ, আমরা গণনায় নতুন চ্যালেঞ্জ আবিষ্কার করেছি। এই কারণেই আমরা একটি CPU-কেন্দ্রিক আর্কিটেকচার থেকে একটি ভিন্নধর্মী পিয়ার-টু-পিয়ার ক্লাউড আর্কিটেকচারে স্থানান্তরিত করব, যেখানে বিভিন্ন গণনা সংস্থান সমানভাবে কাজ করে।"

ঝাং যোগ করেছেন যে ক্লাউড পরিষেবাগুলি ফাউন্ডেশন মডেলগুলির জন্য প্রয়োজনীয় হাইপারস্কেল, স্থিতিশীল এবং শক্তিশালী AI গণনা অর্জনের মূল চাবিকাঠি। এই ধরনের গণনা মুরের আইনকে ছাড়িয়ে গেছে। Huawei ক্লাউড টেলিকোসকে তার বিতরণকৃত কিংটিয়ান আর্কিটেকচার, এআই-নেটিভ স্টোরেজ, এন্ড-টু-এন্ড সিকিউরিটি এবং ডেটা-এআই কনভারজেন্স সহ বুদ্ধিমান ক্লাউড অবকাঠামো তৈরি করতে সাহায্য করছে।

QingTian আর্কিটেকচার পিয়ার-টু-পিয়ার ফুল-মেশ কম্পিউটিং সক্ষম করে বৃহৎ-স্কেল AI কম্পিউট ক্লাস্টারগুলির অগ্রগতি সীমাবদ্ধ করে বাধাগুলি দূর করে। একটি উচ্চ-গতির আন্তঃসংযোগ বাস নির্বিঘ্নে যোগাযোগ, সম্পদ ব্যবস্থাপনা, এবং ফাংশন কলিংকে একটি সর্বোত্তম গণনা পরিকাঠামোতে সংহত করে।

"আমরা চীনের মূল ভূখণ্ডে তিনটি প্রধান এআই কম্পিউট কেন্দ্র এবং 30টির বেশি উপ-কেন্দ্র স্থাপন করেছি," মিঃ ঝাং বলেছেন। "তারা ট্রিলিয়ন-প্যারামিটার মডেলগুলিকে সমর্থন করার জন্য হাইপারস্কেল ক্লাস্টার চালায়। শীঘ্রই, আমাদের AI ক্লাউড পরিষেবা বিশ্বব্যাপী গ্রাহকদের পরিষেবা দেওয়ার জন্য হংকং অঞ্চলে লাইভ হবে।”

উপরন্তু, এআই-নেটিভ স্টোরেজ ডেটা-নিবিড় প্রশিক্ষণ মডেল সমর্থন করে। একটি ত্রি-মুখী পদ্ধতির মধ্যে রয়েছে প্রসারিত মেমরি স্পেসিফিকেশন (EMS) মেমরি পরিষেবা যা 220 TB অতি-বড় ব্যান্ডউইথ এবং অতি-নিম্ন লেটেন্সি মাইক্রোসেকেন্ড পর্যন্ত প্যারামিটারের পেটাবাইট সঞ্চয় করে। এটি স্কেলেবল ফাইল সার্ভিস টার্বো দ্বারা পরিপূরক - উচ্চ থ্রুপুট এবং প্রতি সেকেন্ডে কয়েক মিলিয়ন ইনপুট/আউটপুট ক্রিয়াকলাপের জন্য একটি ক্যাশে পরিষেবা - এবং একটি অবজেক্ট স্টোরেজ সার্ভিস নলেজ লেক যা খরচ কার্যকরভাবে প্রশিক্ষণ এবং অনুমান ডেটা সঞ্চয় করে৷

Huawei ক্লাউডের এন্ড-টু-এন্ড সিকিউরিটি শিল্প গ্রাহকদের মডেল রানটাইম পরিবেশ, প্রশিক্ষণের ডেটা, নিজেদের মডেল, তৈরি সামগ্রী এবং অ্যাপ্লিকেশনগুলিকে রক্ষা করে৷

ফাউন্ডেশন মডেলগুলি ডেটা, ডাটাবেসের উপর উন্নতি লাভ করে

ফাউন্ডেশন মডেলগুলির প্রসারের জন্য মডেল প্রশিক্ষণ এবং অনুমানকে সমর্থন করার জন্য আরও দক্ষ উপায়ে মানসম্পন্ন ডেটা সরবরাহ করার প্রয়োজনীয়তা তৈরি হয়েছে।

"আমরা লেকফরমেশন, একটি ইউনিফাইড ডেটা রিসোর্স এবং মেটাডেটা প্রযুক্তি ব্যবহার করি, একাধিক ডেটা লেক বা গুদাম থেকে একটি যৌক্তিক ডেটা লেক তৈরি করতে," মিঃ ঝাং বলেছেন৷ "এর মানে হল যে ডেটার এক কপি একাধিক ডেটা অ্যানালিটিক্স ইঞ্জিন এবং এআই ইঞ্জিন দ্বারা ভাগ করা যেতে পারে, ডেটা মাইগ্রেশনের প্রয়োজন ছাড়াই৷ এছাড়াও, আমাদের AI4Data ইঞ্জিন সমগ্র ডেটা গভর্নেন্স প্রক্রিয়াকে - ডেটা ইন্টিগ্রেশন, ডেভেলপমেন্ট থেকে শুরু করে গুণমান এবং সম্পদ ব্যবস্থাপনা - আরও বুদ্ধিমান করে তোলে।"

সামিটে, হুয়াওয়ে ক্লাউড আরও বর্ণনা করেছে যে কীভাবে এর AI-ভিত্তিক উদ্ভাবন এবং ভার্চুয়াল মানব মডেল সহ পাঙ্গু মডেলের বিস্তৃত শিল্প দক্ষতা - একটি AI-প্রস্তুত পরিকাঠামোতে অবদান রেখেছে যা অনেক শিল্পকে পুনর্নির্মাণ করছে।

পাঙ্গু মডেলগুলি শিল্প জ্ঞান এবং বৃহৎ ভাষা মডেল (এলএলএম) ক্ষমতাগুলিকে একত্রিত করে একজন বিশেষজ্ঞ সহকারী তৈরি করতে যা সম্ভাব্যভাবে শিল্প, উদ্যোগ বা ব্যক্তিগত ব্যবহারকারীদের জন্য কাজকে আরও দক্ষ এবং সহজ করে তুলতে পারে।

ChatGPT-এর মতো এলএলএম-এর বিপরীতে, হুয়াওয়ে ক্লাউডের পাঙ্গু মডেলস 3.0-তে তিন-স্তর ডিকপল আর্কিটেকচার রয়েছে, কোম্পানি বলেছে। L0 স্তরে পাঁচটি ফাউন্ডেশন মডেল রয়েছে, যা বিদ্যুৎ শিল্প-নির্দিষ্ট অ্যাপ্লিকেশনগুলিতে সাধারণ দক্ষতা প্রদান করে। L1-এ শিল্প-নির্দিষ্ট মডেল রয়েছে যা শিল্প ডেটা ব্যবহার করে প্রশিক্ষিত হয়, যখন L2 নির্দিষ্ট শিল্প পরিস্থিতি এবং কাজের জন্য মডেল সরবরাহ করে।

মিঃ ঝাং এমন কিছু ঘটনা উদ্ধৃত করেছেন যেখানে পাঙ্গু টেলিকম মডেলটি টেলকোগুলিকে 90 শতাংশ পর্যন্ত নেটওয়ার্ক ত্রুটিগুলি মিনিটের মধ্যে স্বয়ংক্রিয়ভাবে সমাধান করতে সাহায্য করেছে যখন পাঙ্গু R&D মডেলটি বিকাশকারীদেরকে শুধুমাত্র একটি প্রম্পটে কোড তৈরি করতে এবং শুধুমাত্র একটি ক্লিকের মাধ্যমে কেস পরীক্ষা করতে সক্ষম করে৷ আবহাওয়ার পূর্বাভাসে, পঙ্গু একটি একক সার্ভারে 10 দিনের মধ্যে আরও সঠিকভাবে এবং 10 সেকেন্ডের মধ্যে একটি টাইফুনের পথের পূর্বাভাস দিতেও ব্যবহার করা হয়েছে, তিনি যোগ করেছেন।

আশ্চর্যজনকভাবে, পাঙ্গু ভার্চুয়াল মানব মডেল গ্রাহক পরিষেবা এবং লাইভস্ট্রিমিংয়ের জন্য 95 শতাংশ লিপ সিঙ্ক নির্ভুলতা নিয়ে গর্ব করে। ভার্চুয়াল মানুষ ই-কমার্স, সংবাদ সম্প্রচার, শিক্ষা এবং প্রশিক্ষণের মতো ক্ষেত্রে ব্যাপকভাবে ব্যবহৃত হয়।

স্বয়ংচালিত শিল্পে, পঙ্গু স্বয়ংক্রিয়ভাবে সমস্ত ধরণের জটিল ড্রাইভিং দৃশ্যের জন্য কর্নার কেস তৈরি করে, স্বায়ত্তশাসিত ড্রাইভিং মডেলগুলির নতুন দৃশ্যগুলি শিখতে যে সময় লাগে তা হ্রাস করে। আরো মডেল পাইপলাইনে আছে. পাঙ্গু মডেল এবং সম্পর্কিত ক্লাউড পরিষেবাগুলি বিশ্বস্ত নিরাপত্তা এবং পাবলিক ক্লাউড, ডেডিকেটেড জোন বা হাইব্রিড ক্লাউডে সম্মতির সাথে স্থাপন করা যেতে পারে।

সামিটে এই ঘোষণাগুলির সাথে, মিসেস শি ক্লাউড পরিষেবা এবং নতুন ব্যবসার একটি উন্মুক্ত ইকোসিস্টেম অফার করার জন্য হুয়াওয়ে ক্লাউডের পরিকল্পনার উপর চাপ দেন৷ কোম্পানী উল্লম্ব শিল্পের জন্য দৃশ্যকল্প-ভিত্তিক সমাধান তৈরি করতে গ্রাহক এবং অংশীদারদের সাথে সহযোগিতা করে যখন এটি KooVerse, Huawei ক্লাউডের পরিকাঠামো, বিশ্বব্যাপী সহজে অ্যাক্সেস এবং উচ্চ কার্যকারিতার জন্য প্রসারিত করে চলেছে।

এই নিবন্ধটি Huawei দ্বারা অবদান ছিল.

স্পট_আইএমজি

সর্বশেষ বুদ্ধিমত্তা

স্পট_আইএমজি