NetApp ডেটাপেলাগোকে অধিগ্রহণ করবে, নিউক্লিয়াস ইউনিভার্সাল ডেটা প্রসেসিং ইঞ্জিন (UDPE) এর স্রষ্টা যা বিশ্লেষণ এবং জেনারেটিভ এআই-এর জন্য ভিন্নধর্মী গণনাকে ত্বরান্বিত করে।
ওপেন-সোর্স গ্লুটেন, ভেলোক্স এবং সাবস্ট্রেটের উপর নির্মিত, নিউক্লিয়াস স্পার্ক এবং ট্রিনোকে স্ট্যান্ডআউট খরচ-পারফরম্যান্স সরবরাহ করতে ব্যাপকভাবে গতি দেয়। এটি ডেটা মাইগ্রেশন বা ভেন্ডর লক-ইন ছাড়াই বিদ্যমান লেকহাউস, SQL, পাইথন, এয়ারফ্লো, মূকনাটক, পাওয়ার বিআই এবং আরও অনেক কিছুর সাথে নির্বিঘ্নে সংযোগ করে। 2021 সালে সিইও রাজন গোয়াল এবং CPO আনন্দ আইয়ার দ্বারা প্রতিষ্ঠিত, DataPelago 2024 সালের অক্টোবরে স্টিলথ থেকে বেরিয়ে আসে এবং $75 মিলিয়নেরও বেশি সংগ্রহ করে, যার মধ্যে $47 মিলিয়ন 2024 এর অর্থায়ন রাউন্ড রয়েছে।
নেটঅ্যাপের সিইও জর্জ কুরিয়ান বলেছেন যে এআই হার্ডওয়্যারের অগ্রগতি এন্টারপ্রাইজ ডেটা মান আনলক করার জন্য সমানভাবে সক্ষম ডেটা পরিকাঠামোর দাবি করে এবং অধিগ্রহণ প্রতিযোগিতামূলক পার্থক্যের জন্য চটপটে ডেটা প্রক্রিয়াকরণ সরবরাহ করার জন্য নেটঅ্যাপের ক্ষমতাকে শক্তিশালী করে।
একটি DataPelago ব্লগ উল্লেখ করেছে যে নিউক্লিয়াস নেটিভভাবে NetApp-এর ডেটা প্ল্যাটফর্মের মধ্যে এম্বেড করা হবে, যা স্টার্টআপ স্বাধীনভাবে অর্জন করতে পারে তার চেয়ে অনেক বেশি বিস্তৃত এন্টারপ্রাইজ গ্রহণকে সক্ষম করবে। এই বছরের শুরুতে, DataPelago ফাস্ট কোম্পানির 2026 সালের বিশ্বের সবচেয়ে উদ্ভাবনী কোম্পানির তালিকায় ডেটা সায়েন্সে চতুর্থ স্থানে রয়েছে।
প্রথাগত আর্কিটেকচারের বিপরীতে যা ডেটাসেটগুলিকে বহিরাগত CPU/GPU ক্লাস্টারে স্থানান্তরিত করে, নিউক্লিয়াস সরাসরি স্টোরেজ স্তরে ত্বরিত গণনা চালায়। Nvidia cuDF এর বিরুদ্ধে মানদণ্ড 10.5x দ্রুত প্রজেকশন, 10.1x দ্রুত ফিল্টার এবং 4.3x দ্রুত সমষ্টি দেখায়। ক্যোয়ারী ইঞ্জিন (স্পার্ক, ট্রিনো, ফ্লিঙ্ক) এবং পাইথন ফ্রেমওয়ার্ক (রে, ডাস্ক) এর মধ্যে অবস্থিত, এর স্ট্যাকের তিনটি মডুলার স্তর রয়েছে:
1.DataApp: স্পার্ক, ট্রিনো এবং অন্যান্য ইঞ্জিনে ত্বরণ ইনজেক্ট করার জন্য প্লাগেবল ইন্টিগ্রেশন মডিউল।
2.DataOS: অর্কেস্ট্রেশন লেয়ার স্কেলযোগ্য পারফরম্যান্স টিউনিংয়ের জন্য মিশ্র অ্যাক্সিলারেটরে ডেটা টাস্কগুলিকে গতিশীলভাবে ম্যাপ করে।
3.DataVM: ডোমেন-নির্দিষ্ট ISA সহ কাস্টম ভার্চুয়াল মেশিন, CPUs, GPUs, FPGAs এবং কাস্টম সিলিকনের জন্য ইউনিফাইড এক্সিকিউশন বিমূর্ততা প্রদান করে।
কোর ডেটা এক্সিকিউশন ফ্লো
1. ফ্রেমওয়ার্ক সংযোগকারীর মাধ্যমে ডেটা অ্যাক্সেস: স্ট্যান্ডার্ড ডেটা সংযোগকারীগুলির সাথে সামঞ্জস্যপূর্ণ স্পার্ক JAR প্লাগইন হিসাবে মোতায়েন করা হয়েছে, যা Parquet, ORC, Iceberg, Delta Lake, JSON এবং S3, GCS, ADLS, HDFS এবং অন-প্রিম অ্যারে সহ স্টোরেজ লক্ষ্যগুলিকে সমর্থন করে৷ স্ট্যান্ডার্ড ইঞ্জিন I/O স্তরগুলির মাধ্যমে নেটিভ কোয়েরি শব্দার্থ বজায় রাখার সময় ত্বরণ স্টোরেজ ইন্টিগ্রেশন পর্যন্ত প্রসারিত হয়।
2. কোয়েরি পরিকল্পনা এবং অপ্টিমাইজেশান: হোস্ট ইঞ্জিন একটি শারীরিক পরিকল্পনা তৈরি করে; DataApp এটিকে গ্লুটেন/সাবস্ট্রেটের মাধ্যমে একটি মধ্যবর্তী উপস্থাপনায় রূপান্তরিত করে। একটি বুদ্ধিমান অপ্টিমাইজার সর্বোত্তম ডেটা প্রবাহ গ্রাফ তৈরি করে এবং DataOS/DataVM সম্পাদনের জন্য CPU/GPU সংস্থানগুলি বরাদ্দ করে৷
3. ক্রস-হার্ডওয়্যার ডেটা ট্রান্সফার অপ্টিমাইজেশান: অপারেটর/কার্নেল ফিউশন এবং স্ট্রিমিং এক্সিকিউশন I/O ওভারহেড কাটার জন্য সম্পূর্ণ মধ্যবর্তী বস্তুকরণ দূর করে। জিরো-কপি শেয়ার্ড মেমরি সিপিইউ-জিপিইউ ডেটা ডুপ্লিকেশন হ্রাস করে, যখন ডাটাভিএম-এর আইএসএ LLVM, CUDA এবং ROCm-কে কলামার ভেক্টরাইজড প্রসেসিংয়ের মাধ্যমে সর্বোত্তম হার্ডওয়্যারে রুট করার জন্য কাজ করে। এই পরিবর্তনগুলি ক্রস-ডোমেন ডেটা শাফলিং কমিয়ে GPU ব্যবহারকে 80-90%-এ উন্নীত করে।
নিউক্লিয়াস অন-প্রিম এবং প্রধান পাবলিক ক্লাউড জুড়ে কাজ করে। এর স্পার্ক এক্সিলারেটর ডাটাব্রিক্স ফোটনের বিপরীতে 3-4x থ্রুপুট লাভ ডেলিভারি করে; এটি ওপেন টেবিল ফরম্যাট প্রসেসিং এবং আপস্ট্রিম/ডাউনস্ট্রিম স্পার্ক/ট্রিনো পাইপলাইনগুলিকে গুদাম খাওয়ানোর মাধ্যমে স্নোফ্লেকের সাথে একীভূত করে। DataPelago বলে যে নিউক্লিয়াস অবকাঠামোর খরচ 80% পর্যন্ত কমিয়ে দেয় এবং লিগ্যাসি পাইপলাইনের তুলনায় 10x দ্রুত কর্মক্ষমতা প্রদান করে। অপারেশনাল এবং এআই সিস্টেমের মধ্যে বাধ্যতামূলক ডেটা ডুপ্লিকেশন অপসারণ করে, এটি উল্লম্ব জুড়ে বৃহৎ বৈশ্বিক এন্টারপ্রাইজগুলিতে লাইভ স্থাপনার সাথে প্রাথমিক বাধা ধীরগতির এন্টারপ্রাইজ এআই রোলআউটকে দূর করে।
ডেটাপেলাগোর সিইও রাজন গোয়েল বলেছেন যে ফার্মের মূল লক্ষ্য AI উদ্ভাবনকে আটকে রেখে ডেটা প্রক্রিয়াকরণের বাধাগুলি সমাধান করা। NetApp-এর সাথে একীভূত হওয়া তার যুগান্তকারী ত্বরণ প্রযুক্তিকে NetApp-এর ব্যাপক ডেটা অবকাঠামো পোর্টফোলিওর সাথে যুক্ত করেছে; ব্যবসাগুলি জিপিইউ এবং মডেলগুলিতে প্রচুর পরিমাণে বিনিয়োগ করেছে তবুও খণ্ডিত ডেটা সাইলোতে ভুগছে যা হার্ডওয়্যারকে অপরিবর্তিত রেখে দেয় এবং সম্মিলিত স্ট্যাকটি বৃহৎ-স্কেল এআই স্থাপনাকে স্ট্রীমলাইন করে।
NetApp একটি ল্যান্ডমার্ক পোর্টফোলিও আপগ্রেড হিসাবে অধিগ্রহণকে ফ্রেম করে, AI-এর জন্য সত্যিকারের জিরো-কপি এন্টারপ্রাইজ ডেটা অ্যাক্টিভেশন দেওয়ার জন্য GPU-এক্সিলারেটেড প্রক্রিয়াকরণকে সরাসরি স্টোরেজ ওয়ার্কফ্লোতে নিয়ে আসে। লেনদেন আর্থিক অপ্রকাশিত থাকে; নিউক্লিয়াসের এন্টারপ্রাইজ ট্র্যাকশন, NetApp AIDE-এর সাথে টাইট সিনার্জি এবং ক্রমবর্ধমান এজেন্টিক AI চাহিদার প্রেক্ষিতে, ক্রয় মূল্যায়ন সম্ভবত DataPelago-এর মোট $75M তহবিলের 4-5x গুণে পৌঁছেছে। DataPelago সম্পূর্ণ মালিকানাধীন NetApp সাবসিডিয়ারি হিসেবে কাজ করবে।
মূল পার্থক্য: নিউক্লিয়াস বনাম কেভি ক্যাশে বনাম নেটঅ্যাপ এআইডিই
1.নিউক্লিয়াস এবং কেভি ক্যাশে পার্থক্য: নিউক্লিয়াস ডেটা জিপিইউ সার্ভারে পৌঁছানোর আগে প্রাক-ইনফারেন্স ডেটা ইনজেশন, ট্রান্সফর্মেশন এবং অনুসন্ধানকে অপ্টিমাইজ করে। এনভিডিয়ার কেভি ক্যাশে হল একটি ইন-জিপিইউ মেমরি অপ্টিমাইজেশান সক্রিয় শুধুমাত্র টোকেন জেনারেশনের দক্ষতা বাড়াতে জিপিইউ হার্ডওয়্যারে ডেটা আসার পরে। নিউক্লিয়াস কম্পিউটে ডেটা ডেলিভারির গতি বাড়ায়; কেভি ক্যাশে এক্সিলারেটরে ডেটা ল্যান্ড করার পরে মডেল রানটাইম অপ্টিমাইজ করে।
2.NetApp AIDE বনাম নিউক্লিয়াস UDPE: AIDE হল LLM এবং এজেন্টদের জন্য ONTAP/AFX-লকড AI প্রিপ্রসেসিং, অন্তর্নির্মিত ভেক্টর ডাটাবেস, মেটাডেটা ক্যাটালগিং, RAG সার্ভিং এবং Nvidia AI এন্টারপ্রাইজ ইন্টিগ্রেশন (মাইক্রোসার্ভ সহ) সহ মালিকানাধীন ETL হিসাবে কাজ করে। নিউক্লিয়াস স্টোরেজ-অজ্ঞেয়বাদী এবং জেনেরিক স্পার্ক/ট্রিনো কাজের চাপকে ত্বরান্বিত করে। AIDE-এর সাথে নিউক্লিয়াসকে একীভূত করা রূপান্তর, প্রশিক্ষণ, ফাইন-টিউনিং এবং ইনফরেন্স পাইপলাইনকে শক্তিশালী করবে, সরাসরি NetApp AFX স্টোরেজে ত্বরিত লেকহাউস ওয়ার্কলোড সক্ষম করবে; একটি এন্ড-টু-এন্ড AIDE+নিউক্লিয়াস বান্ডিলযুক্ত সমাধান পূর্বাভাসযোগ্য।
নেটঅ্যাপের সিপিও শ্যাম নায়ার মন্তব্য করেছেন নিউক্লিয়াস স্টোরেজ এ সফ্টওয়্যার-সংজ্ঞায়িত ত্বরণ প্রদান করে, সিপিইউ এবং জিপিইউ জুড়ে শূন্য-কপি ডেটা প্রস্তুতি, পরিচালনা এবং এআই অ্যাক্টিভেশন সক্ষম করে। NetApp যেকোনো প্রতিদ্বন্দ্বীর চেয়ে বেশি এন্টারপ্রাইজ মাল্টি-এনভায়রনমেন্ট ডেটা পরিচালনা করে, এবং AI প্রতিযোগিতার পরবর্তী তরঙ্গ তার উৎসে ডেটা প্রক্রিয়াকরণের উপর নির্ভর করে—DataPelago-এর ইঞ্জিনিয়ারিং দল এই কৌশলগত রোডম্যাপটিকে ত্বরান্বিত করে।
বেইজিং Qianxing Jietong প্রযুক্তি কোং, লি.
স্যান্ডি ইয়াং/গ্লোবাল স্ট্র্যাটেজি ডিরেক্টর
WhatsApp / WeChat: +86 13426366826
ইমেল: yangyd@qianxingdata.com
ওয়েবসাইট: www.qianxingdata.com/www.storagesserver.com
ব্যবসায়িক ফোকাস:
আইসিটি প্রোডাক্ট ডিস্ট্রিবিউশন/সিস্টেম ইন্টিগ্রেশন অ্যান্ড সার্ভিসেস/ইনফ্রাস্ট্রাকচার সলিউশন
20+ বছরের আইটি বিতরণের অভিজ্ঞতার সাথে, আমরা বিশ্বস্ত পণ্য এবং পেশাদার পরিষেবা প্রদানের জন্য শীর্ষস্থানীয় বিশ্ব ব্র্যান্ডগুলির সাথে অংশীদারি করি।
"একটি বুদ্ধিমান বিশ্ব গড়তে প্রযুক্তির ব্যবহার" আপনার বিশ্বস্ত আইসিটি পণ্য পরিষেবা প্রদানকারী!
আপনার বার্তাটি 20-3,000 টির মধ্যে হতে হবে!
Bengali
