ডিপসিকের আশ্চর্যজনকভাবে সস্তা এআই মডেল, ডিপসেক ভি 3 এআই বাজারকে কাঁপিয়েছে, যার ফলে এনভিডিয়ার শেয়ারের দামের উল্লেখযোগ্য পরিমাণ হ্রাস পেয়েছে। যদিও ডিপসেক মাত্র million মিলিয়ন ডলার প্রশিক্ষণ ব্যয় দাবি করে, তবে আরও ঘনিষ্ঠ চেহারাটি আরও বেশি পরিমাণে বিনিয়োগের প্রকাশ করে।
%আইএমজিপি%চিত্র: ensigame.com
ডিপসেক ভি 3 এর উদ্ভাবনী আর্কিটেকচারটি এর পারফরম্যান্সের মূল চাবিকাঠি। এটি ব্যবহার করে:
- মাল্টি-টোকেন পূর্বাভাস (এমটিপি): বর্ধিত নির্ভুলতা এবং দক্ষতার জন্য একসাথে একাধিক শব্দের পূর্বাভাস দেওয়া।
- বিশেষজ্ঞদের মিশ্রণ (এমওই): 256 নিউরাল নেটওয়ার্ক নিয়োগ করা, প্রতিটি টোকেনের জন্য আটটি সক্রিয় করা, প্রশিক্ষণকে ত্বরান্বিত করা এবং কর্মক্ষমতা উন্নত করা।
- মাল্টি-হেডের সুপ্ত মনোযোগ (এমএলএ): তথ্য ক্ষতি হ্রাস করতে এবং গুরুত্বপূর্ণ সূক্ষ্মতাগুলি ক্যাপচার করার জন্য বারবার মূল বিশদটি বের করা।
%আইএমজিপি%চিত্র: ensigame.com
যাইহোক, সেমিয়ানালাইসিস ডিপসিকের প্রকৃত অবকাঠামো প্রকাশ করেছে: প্রায় 50,000 এনভিডিয়া হপার জিপিইউ, 10,000 এইচ 800, 10,000 এইচ 100, এবং অতিরিক্ত এইচ 20 জিপিইউ সহ একাধিক ডেটা সেন্টারে ছড়িয়ে পড়ে। এটি একটি ~ 1.6 বিলিয়ন সার্ভার বিনিয়োগ এবং অপারেশনাল ব্যয়ে ~ 944 মিলিয়ন ডলার উপস্থাপন করে। $ 6 মিলিয়ন চিত্রটি কেবল গবেষণা, পরিমার্জন, ডেটা প্রসেসিং এবং অবকাঠামো বাদ দিয়ে প্রাক-প্রশিক্ষণ জিপিইউ ব্যবহারকে প্রতিফলিত করে।
চীনা হেজ তহবিল হাই-ফ্লায়ারের সহায়ক সংস্থা ডিপসেক তার ডেটা সেন্টারের মালিক, নিয়ন্ত্রণ এবং দ্রুত উদ্ভাবন সরবরাহ করে। এর স্ব-অর্থায়িত প্রকৃতি তত্পরতা বাড়ায়। উচ্চ বেতন (কিছু গবেষকের জন্য বার্ষিক ১.৩ মিলিয়ন ডলারেরও বেশি) শীর্ষস্থানীয় চীনা প্রতিভা আকর্ষণ করে, যদিও সংস্থাটি বিদেশী বিশেষজ্ঞদের নিয়োগ দেয় না।
%আইএমজিপি%চিত্র: ensigame.com
এআই বিকাশে ডিপসিকের মোট বিনিয়োগ $ 500 মিলিয়ন ছাড়িয়েছে। এর পাতলা কাঠামোটি বৃহত্তর, আরও আমলাতান্ত্রিক সংস্থার তুলনায় দক্ষ উদ্ভাবনের অনুমতি দেয়।
%আইএমজিপি%চিত্র: ensigame.com
ডিপসেকের সাফল্য সুপরিচিত অর্থায়িত স্বতন্ত্র এআই সংস্থাগুলির প্রতিযোগিতামূলক সম্ভাবনাকে হাইলাইট করে। যদিও এর "বাজেট-বান্ধব" দাবিটি বিভ্রান্তিকর, তবে এর ব্যয় প্রতিযোগীদের তুলনায় উল্লেখযোগ্যভাবে কম রয়েছে। উদাহরণস্বরূপ, ডিপসিকের আর 1 মডেলের দাম 5 মিলিয়ন ডলার, চ্যাটজিপিটি 4 এর 100 মিলিয়ন ডলার তুলনায়। বাস্তবতা হ'ল যথেষ্ট বিনিয়োগ, প্রযুক্তিগত অগ্রগতি এবং একটি অত্যন্ত দক্ষ দলের সংমিশ্রণ।