কোম্পানির খবর সেরেনেডিবি সুপারফাস্ট এস৩ ডেটা সার্চ ইঞ্জিন চালু করেছে।

জার্মান স্টার্টআপ সেরেনেডিবি এর ক্রুমমেলানকে বিশ্বের দ্রুততম ডাটাবেস সার্চ ইঞ্জিন বলে দাবি করা হয়, যা একটি পণ্যের মধ্যে অনুসন্ধান এবং বিশ্লেষণকে একত্রিত করে।

কোম্পানিটি বলছে, এআই এজেন্টরা প্রতি সেকেন্ডে শত শত হাইব্রিড ফাইন্ড-এন্ড-কাউন্ট ক্যোয়ারী চালায়, তবুও উৎপাদনে থাকা প্রতিটি ডাটাবেজ মানব ব্যবহারকারীদের জন্য তৈরি করা হয়েছে।এর Krummelanke ইঞ্জিন উচ্চ গতির এজেন্ট-স্কেল ডাটাবেস অনুসন্ধান পরিচালনা করার জন্য ডিজাইন করা হয়. ক্রুমমেলানকে ওপেন সোর্স Apache 2 এর অধীনে।0, Postgres এবং Elastic এর সাথে সামঞ্জস্যপূর্ণ এবং S3 এ সংরক্ষিত ডেটাতে পূর্ণ-পাঠ্য অনুসন্ধান চালাতে পারে।

সহ-প্রতিষ্ঠাতা এবং প্রধান নির্বাহী আলেকজান্ডার মালানডিন বলেছেনঃ “এজেন্টিক ভবিষ্যত, সর্বোপরি, একটি ডেটা লোড সমস্যা। আজ একটি এআই এজেন্ট একটি একক ফুল পরিদর্শন করা একটি একক মৌমাছি। যা আসছে তা হল জাঁকজমকঃপ্রতিটি প্রতিষ্ঠানে কর্মচারীদের তুলনায় আরো এজেন্টমানব ব্যবহারকারীদের জন্য নির্মিত অবকাঠামো এই লোড থেকে বাঁচার জন্য যথেষ্ট দ্রুত বা ব্যয়বহুল নয়।এজেন্টিক ভবিষ্যতে একটি নতুন প্রজন্মের ডাটাবেস প্রয়োজন: একটি ইঞ্জিনে অতি দ্রুত অনুসন্ধান এবং অতি দ্রুত বিশ্লেষণ, যেখানে অনুসন্ধান অপারেশনগুলি ন্যানোসেকেন্ডে পরিমাপ করা হয় এবং বিলিয়ন রেকর্ডের উপর একটি প্রশ্ন মিলিসেকেন্ডে ফিরে আসে।যেটা এজেন্টদের প্রথম শ্রেণীর ব্যবহারকারী হিসেবে দেখবে, তাদের স্কেল সহ্য করে, এবং যেখানে থাকে সেখানে ডেটা পৌঁছায়। এটাই আমরা তৈরি করেছি, এবং সেরেনেডিবি ক্রুমমেলানকে দিয়ে আমরা এটি উৎপাদন করছি।

সেরেনেডিবি নোট করে যে স্নোফ্লেক, বিগকুইরি, ডাকডিবি ওভার পার্কেট এবং লেকহাউসের মতো বিশ্লেষণ ইঞ্জিনগুলি সাধারণত ডিফল্টরূপে এস 3 থেকে সরাসরি কলামার ডেটা পড়ে।বড় ক্রমিক স্ক্যান অবজেক্ট স্টোরেজের বিলম্বের প্রোফাইলের সাথে খাপ খায়, সম্পূর্ণ পাঠ্য অনুসন্ধানের বিপরীতে। সম্পূর্ণ পাঠ্য অনুসন্ধানের জন্য একটি বিপরীত সূচক প্রয়োজন যা শব্দ বা সংখ্যাগুলির মতো সামগ্রী আইটেমগুলি তালিকাভুক্ত করে এবং টেবিল বা নথির মধ্যে তাদের অবস্থানে ম্যাপ করে।বিপরীত সূচক অনুসন্ধান অনেক এলোমেলো অ্যাক্সেস উৎপন্ন করেসাধারণত, লুসেন ভিত্তিক সার্চ ইঞ্জিনগুলি প্রধান লেকহাউস ডেটা স্টোর থেকে পৃথক দ্রুত স্থানীয় স্টোরেজে সূচকগুলি সঞ্চয় করে।SereneDB বলে যে একটি ইলাস্টিক স্থাপনার ভিতরে "অনুসন্ধানযোগ্য" ডেটা মানে ফ্ল্যাশে একটি দ্বিতীয় কপি বজায় রাখা, সবচেয়ে ব্যয়বহুল স্টোরেজ স্তর উপলব্ধ।

আমরা জিজ্ঞাসা করেছি কিভাবে SereneDB এর অনুসন্ধান ক্লাউডিয়ান হাইপারস্টোর অনুসন্ধানের মতো সাধারণ অবজেক্ট স্টোরেজ ডেটা অনুসন্ধানের থেকে আলাদা।

সিটিও আন্দ্রে আব্রামভ আমাদের বলেছেনঃ ক্লাউডিয়ান একটি এস-৩ সামঞ্জস্যপূর্ণ স্টোরেজ সরবরাহকারী এবং হাইপারসার্চ একটি সেবা যা বালতিতে সংযুক্ত।এটি সংরক্ষিত বস্তুর মেটাডেটা সংগ্রহ করে এবং একটি অন্তর্নিহিত অনুসন্ধান উপাদান ভিতরে যে মেটাডেটা সূচক; এটি একটি পৃথক সূচক সিস্টেম যা ডেটা অনুলিপি করে পূরণ করা হয়। অনেক পরিষেবা এই ভাবে অনুসন্ধান বাস্তবায়ন করে এবং তারা ভাল কাজ করে।

সার্চ ইঞ্জিনের মূল স্তরে, তবেঃ বিশ্বব্যাপী কেবলমাত্র কয়েকটি মূল অনুসন্ধান প্রযুক্তি এবং গ্রন্থাগার রয়েছেঃ Lucene, Tantivy, এবং SereneDB দ্বারা নির্মিত IResearch। Elasticsearch, OpenSearch,সোলার এবং অন্যান্য অনেকগুলি লুসেন ডেরিভেটিভ এবং কপি-প্রথম মডেল অনুসরণ করে. তারা স্থানীয়ভাবে না থাকা ডেটা অনুসন্ধান করতে পারে না, তাই অনুসন্ধান করার জন্য যে কোনও ডেটা বের করতে হবে, স্থানান্তর করতে হবে এবং অনুসন্ধান ক্লাস্টারে ডুপ্লিকেট করতে হবে।

সেরেনেডিবি ভিন্নভাবে কাজ করেঃ ¢ সেরেনেডিবি ডেটা ইনডেক্স করে যেখানে এটি ইতিমধ্যে বসবাস করে। এস 3 এ পার্কেট ফাইল এবং আইসবার্গ টেবিলগুলি সত্যের উত্স হিসাবে রয়ে গেছে। আমরা কেবল প্রাপ্ত সূচকটি সঞ্চয় করি।BM25 র্যাঙ্কিং সহ অনুসন্ধান নিজেই, ভেক্টর এবং জিও অনুসন্ধান ️ একটি ছোট স্থানীয় হট সেট সঙ্গে যে সূচক বিরুদ্ধে চালায়। আইসবার্গ ব্যবহারের ক্ষেত্রে একটি বাস্তব উদাহরণ হিসেবে কাজ করেঃ একটি গ্রাহক S3 একটি আইসবার্গ টেবিল পরিবর্তন লিখে,SereneDB এই আপডেটগুলি সংগ্রহ করে, এবং তাদের উপর অনুসন্ধান এবং বিশ্লেষণ পরিবেশন করে। আপনি একই টেবিলে SereneDB নোডের যে কোন সংখ্যা নির্দেশ করতে পারেন।

আমরা জিজ্ঞাসা করেছি যে, অবজেক্ট স্টোরেজ, ডাটাবেস বা লেকহাউস বিক্রেতারা Lucene এবং এর বংশোদ্ভূতগুলির বিকল্প হিসাবে SereneDB এর অনুসন্ধান ইঞ্জিনটি গ্রহণ করতে পারে কিনা।আমরা শুধু ইলাস্টিক সার্চকে প্রতিস্থাপন করতে পারবো না, ওপেনসার্চ, সোলার, ক্রেটডিবি যা বিশুদ্ধ লুসেন ডেরাইভেটিভ, কিন্তু বিশ্লেষণাত্মক ক্ষমতা দিয়ে তাদের উন্নত করে।আমরা ইলাস্টিক সার্চ থেকে মাইগ্রেশন কভার ডেডিকেটেড ডকুমেন্টেশন বজায় রাখা..

কোম্পানিটি তার সার্চ ইঞ্জিনের গতিকে জনপ্রিয় বিকল্পগুলির সাথে তুলনা করে এবং তাদের চেয়ে ভাল পারফরম্যান্সের জন্য বেঞ্চমার্ক চালিয়েছে।✅এই বেঞ্চমার্কগুলির সাথে আমাদের লক্ষ্য ছিল প্রমাণ করা যে সেরেনেডিবি ঐতিহ্যগত অনুসন্ধান স্ট্যাকের চেয়ে দ্রুত এবং আধুনিক বিকল্প..

বেঞ্চমার্ক বিবরণ

SereneDB এর SearchBench এর মধ্যে রয়েছে ৯২টি অনুসন্ধান এবং বিশ্লেষণ ক্যোয়ারী যা ১০০ মিলিয়ন এবং ১ বিলিয়ন ওপেন টেলিমেট্রি লগ রেকর্ডের বিরুদ্ধে চালানো হয়েছে,ক্লিকহাউস দ্বারা প্রকাশিত টেক্সটবেঞ্চ ডেটাসেট প্রতি রেকর্ডে 15 টি সঞ্চিত কলাম সহ. সমস্ত পরীক্ষা একটি একক সার্ভারে চালানো হয়. প্রতিটি প্রতিযোগী ইঞ্জিন প্রকাশিত কনফিগারেশন পরামিতি ব্যবহার করে tuned ছিল, প্রতি ক্যোয়ারী একটি 60 সেকেন্ড টাইমআউট সঙ্গে.এই সীমা অতিক্রম করা যেকোনো ক্যোয়ারী শেষ হয়নি বলে চিহ্নিত করা হয়.

একটি ডজনেরও বেশি জনপ্রিয় অনুসন্ধান ইঞ্জিনের জন্য বেঞ্চমার্ক ফলাফল একটি ড্যাশবোর্ডে উপলব্ধ। পরীক্ষিত ইঞ্জিনগুলির মধ্যে চারটি কনফিগারেশনে ইলাস্টিকসার্চ অন্তর্ভুক্ত রয়েছে, ওপেনসার্চ, প্যারেডডডিবি, ক্রেটডিবি, আরঙ্গোডিবি,সারি এবং কলাম স্টোর রূপগুলির সাথে টাইগারডিবি, এবং ভ্যানিলা পোস্টগ্রেস, অতিরিক্ত ইঞ্জিন যোগ করা হবে। টাইমিং প্রতি ক্যোয়ারিতে তিনটি রান ব্যবহার করে, শেষ দুটি রান থেকে সেরা ফলাফল গ্রহণ করে।একক ক্লায়েন্ট থেকে এক সময়ে একটি ক্যোয়ারী চালানো হয় এবং ফলাফল ক্যাশিং নিষ্ক্রিয় করা হয়ড্যাশবোর্ড লেটেনসির পরিবর্তে থ্রুপুট পরিমাপ করে।

ড্যাশবোর্ডের ফলাফল কোষগুলি প্রতিটি অনুসন্ধানের জন্য দ্রুততম ইঞ্জিনের তুলনায় পারফরম্যান্স অনুপাত দেখায়, যেখানে দ্রুততম ফলাফল 1.0x এর সমান।সামগ্রিক স্কোরটি এই 92 টি প্রতি প্রশ্নের অনুপাতের জ্যামিতিক গড় হিসাবে গণনা করা হয়. SereneDB ব্যাখ্যা করে যে এই স্ট্যান্ডার্ড রেসিও গড় পদ্ধতি একটি একক আউটলিয়ার ক্যোয়ারীকে ফলাফলগুলিকে বিকৃত করতে বাধা দেয়।

SereneDB ১০০ মিলিয়ন রেকর্ড ডেটাসেটে ১.০৫x এবং ১ বিলিয়ন রেকর্ড ডেটাসেটে ১.০৭x এর জ্যামিতিক গড় অর্জন করে।এটি হয় দ্রুততম ইঞ্জিন বা সর্বোচ্চ গতির কয়েক শতাংশের মধ্যে. ইলাস্টিকসার্চ ১০০ মিলিয়ন ডেটাসেটে ২.৮x জ্যামিতিক গড় সহ দ্বিতীয় স্থানে রয়েছে। টাইগারডাটা কলাম স্টোর ১ বিলিয়ন ডেটাসেটে ২.২৪x স্কোর করে, অনেকগুলি টাইমআউট সহ।ভ্যানিলা পোস্টগ্রেস ১০০ মিলিয়ন ডেটাসেটে ২০৪x এবং ৫০১ বিলিয়ন ডেটাসেটে ৬৯x।

জটিল ড্যাশবোর্ড ভিউ ছাড়াও বিক্রেতাদের মধ্যে তুলনা সহজ করার জন্য, আমরা একটি চার্ট তৈরি করেছি যা স্ক্রিনশট ডেটার উপর ভিত্তি করে 100 মিলিয়ন বেঞ্চমার্ক থেকে অর্ডারযুক্ত জ্যামিতিক গড় স্কোর দেখায়।

পারফরম্যান্স ফাঁক অত্যন্ত বিস্তৃত, তাই আমরা 10 এর উপরে স্কোর বাদ দিয়েছি এবং চার্টটি পুনরায় আঁকছি। যেমন SereneDB বলে, এর অনুসন্ধান ইঞ্জিন পরীক্ষিত গ্রুপে নেতৃত্ব দেয়।

সেরেনেডিবি প্রতিষ্ঠা ও অর্থায়ন

সেরেনেডিবি ২০২৫ সালে বার্লিনে প্রতিষ্ঠিত হয়েছিল আলেকজান্ডার ম্যালানডিন, ইএমসি, ডেল এবং আরঙ্গোডিবি-তে পূর্বের এন্টারপ্রাইজ বিক্রয় অভিজ্ঞতার সাথে সিইও; কুইস্ট সফটওয়্যারের অনুসন্ধান গবেষণা ও উন্নয়ন ব্যাকগ্রাউন্ড সহ সিটিও আন্দ্রে অ্যাব্রামভ,EMC এবং ArangoDB; এবং ভ্যালেরি মিরোনভ, এর আগে আরঙ্গোডিবি এবং ওয়াইডিবি-তে মূল প্রকৌশলী। আট জনের প্রকৌশলী দলটি ১৬ বছরেরও বেশি সময় ধরে সহযোগিতা করেছে।এর মূল অনুসন্ধান আইআররিসার্চ ২০১৪ সাল থেকে উন্নয়নশীল.

স্টার্টআপটি ডিসেম্বর ২০২৫ সালে এনটুরাইজ এবং হাই-টেক গ্রান্ডারফান্ডসের নেতৃত্বে প্রাক-সিড তহবিলের জন্য ২.১ মিলিয়ন ডলার ঘোষণা করেছিল।

SereneDB Krummelanke Apache 2.0 লাইসেন্সের অধীনে ওপেন সোর্স এবং GitHub এ উপলব্ধ।

বেইজিং চিয়ানসিং জিয়েটং টেকনোলজি কোং লিমিটেড।
স্যান্ডি ইয়াং/গ্লোবাল স্ট্র্যাটেজি ডিরেক্টর
হোয়াটসঅ্যাপ / ওয়েচ্যাটঃ +৮৬ ১৩৪২৬৩৬৬৮২৬
ইমেইল: yangyd@qianxingdata.com
ওয়েবসাইটঃ www.qianxingdata.com/www.storagesserver.com
ব্যবসায়িক ফোকাসঃ
আইসিটি প্রোডাক্ট বিতরণ/সিস্টেম ইন্টিগ্রেশন ও সার্ভিসেস/ইনফ্রাস্ট্রাকচার সমাধান
২০+ বছরের আইটি বিতরণ অভিজ্ঞতার সাথে, আমরা বিশ্বব্যাপী শীর্ষস্থানীয় ব্র্যান্ডগুলির সাথে অংশীদার হয়ে নির্ভরযোগ্য পণ্য এবং পেশাদার পরিষেবা সরবরাহ করি।
👉একটি বুদ্ধিমান বিশ্ব গড়ে তুলতে প্রযুক্তি ব্যবহার করুন 👉আপনার বিশ্বস্ত আইসিটি পণ্য পরিষেবা প্রদানকারী!