NVIDIA Mellanox MCX653106A-HDAT সার্ভার অ্যাডাপ্টার অ্যাকশনে।

NVIDIA Mellanox MCX653106A-HDAT সার্ভার অ্যাডাপ্টার অ্যাকশনে।

পটভূমি ও চ্যালেঞ্জঃ বিতরণকৃত ডাটাবেস পারফরম্যান্স ওয়াল

একটি বিশ্বব্যাপী আর্থিক সেবা কোম্পানি একটি উচ্চ ফ্রিকোয়েন্সি ট্রেডিং প্ল্যাটফর্ম পরিচালনা তাদের বিতরণ ইন-মেমরি ডাটাবেস ক্লাস্টার একটি সমালোচনামূলক কর্মক্ষমতা সিলিং সম্মুখীন.৪৮ টি কমোডিটি সার্ভার নিয়ে গঠিত যা একটি কাস্টম কী-ভ্যালু স্টোর চালায়, প্রতি সেকেন্ডে লক্ষ লক্ষ লেনদেন পরিচালনা করার জন্য ডিজাইন করা হয়েছিল। যাইহোক, ট্রেডিং ভলিউম বেড়ে যাওয়ার সাথে সাথে নেটওয়ার্ক অবকাঠামো প্রধান বোতলঘাট হয়ে ওঠে।বিদ্যমান 25GbE অ্যাডাপ্টার, টিসিপি / আইপি দিয়ে কাজ করে, অনির্দেশ্য লেটেনসি চালু করে যা মাঝে মাঝে লেনদেনের সমাপ্তির সময়কে কোম্পানির কঠোর 500 মাইক্রোসেকেন্ডের পরিষেবা-স্তরের চুক্তির বাইরে ঠেলে দেয়।

অবকাঠামো দল দুটি মৌলিক সমস্যা চিহ্নিত করেছে। প্রথমত, টিসিপি/আইপি স্ট্যাকটি ক্লাস্টারে প্রায় ৩৫% সিপিইউ রিসোর্স ব্যবহার করে,ইনকামিং ক্যোয়ারী প্রক্রিয়াকরণের জন্য ডাটাবেস ইঞ্জিনের ক্ষমতা সীমাবদ্ধ করাদ্বিতীয়ত, RDMA সমর্থনের অভাবের অর্থ হল যে প্রতিটি ইন্টার-নোড যোগাযোগের জন্য একাধিক মেমরি কপি এবং কার্নেল ক্রসিং প্রয়োজন,প্রতি বার্তায় 15-20 মাইক্রোসেকেন্ডের ওভারহেড যোগ করা ✓ একটি সিস্টেমে একটি উল্লেখযোগ্য শাস্তি যেখানে প্রতিটি মাইক্রোসেকেন্ড গণনা করা হয়কোম্পানিটির এমন একটি সমাধানের প্রয়োজন ছিল যা একই সাথে সিপিইউ ওভারহেড হ্রাস করে এবং তাদের বিদ্যমান ইথারনেট কাঠামোর সাথে সামঞ্জস্য বজায় রেখে নির্ধারক নিম্ন-ল্যাটেনসি যোগাযোগ সরবরাহ করতে পারে।

সমাধান ও বাস্তবায়নঃ MCX653106A-HDAT এর সাথে RoCE বাস্তবায়ন

উপলব্ধ নেটওয়ার্কিং সমাধানগুলির একটি বিস্তৃত মূল্যায়নের পরে, কোম্পানিটিএনভিআইডিআইএ মেলানক্স এমসিএক্স 653106 এ-এইচডিএটিএই পিসিআইই নেটওয়ার্ক কার্ডটি পূর্ববর্তী প্রজন্মের অ্যাডাপ্টারগুলিকে প্রতিস্থাপন করে, সমস্ত ৪৮ টি ডাটাবেস সার্ভারে স্থাপন করা হয়েছিল।MCX653106A-HDAT ConnectX অ্যাডাপ্টার PCIe নেটওয়ার্ক কার্ডউচ্চ ব্যান্ডউইথ, হার্ডওয়্যার-গতিসম্পন্ন RoCEv2 এবং GPUDirect সমর্থন এর প্রয়োজনীয় সংমিশ্রণ প্রদান করা হয়েছে যা বিদ্যমান ইথারনেট অবকাঠামো জুড়ে সত্যিকারের RDMA যোগাযোগ সক্ষম করে।

এই অভিযানটি একটি সাবধানে পরিচালিত পদ্ধতি অনুসরণ করেঃ

• অবকাঠামো প্রস্তুতিঃপ্রতিটি সার্ভারMCX653106A-HDAT ইথারনেট অ্যাডাপ্টার কার্ড, দ্বৈত-পোর্ট 25GbE SFP28 লিঙ্কগুলির মাধ্যমে রিডান্ডেন্ট টপ-অফ-র্যাক সুইচগুলিতে সংযুক্ত।সুইচগুলি ক্ষতিহীন ইথারনেট পরিবহন নিশ্চিত করার জন্য অগ্রাধিকার প্রবাহ নিয়ন্ত্রণ (পিএফসি) এবং সুস্পষ্ট ঘনত্ব বিজ্ঞপ্তি (ইসিএন) দিয়ে কনফিগার করা হয়েছিল.
• আরডিএমএ কনফিগারেশনঃদলটি বিশেষ অগ্রাধিকার সারিগুলিতে RoCEv2 সক্ষম করেছে, একটি ঘনত্ব পরিচালনার কৌশল বাস্তবায়ন করে যা স্ট্যান্ডার্ড টিসিপি / আইপি ট্র্যাফিক থেকে আরডিএমএ ট্র্যাফিককে বিচ্ছিন্ন করে।
• ডাটাবেস ইন্টিগ্রেশনঃডিস্ট্রিবিউটেড কী-ভ্যালু স্টোরটি আরডিএমএ-সচেতন নেটওয়ার্ক লাইব্রেরিগুলির সাথে পুনরায় কম্পাইল করা হয়েছিল, যা হোস্ট সিপিইউ জড়িত না হয়ে ডাটাবেস নোডগুলির মধ্যে সরাসরি মেমরি-টু-মেমরি স্থানান্তর সক্ষম করে।
• বৈধতাঃএকটি ধাপে ধাপে রোলআউট চালানো হয়েছিল, নডের একটি উপসেট দিয়ে শুরু করে, তারপরে কর্মক্ষমতা লাভ এবং স্থিতিশীলতা নিশ্চিত করার জন্য লোড টেস্টিং।

এর মতেMCX653106A-HDAT ডেটা শীট, অ্যাডাপ্টারটি পিসিআইই জেনার 4.0 x16 সমর্থন করে,ভবিষ্যতে 50GbE বা 100GbE গতি আপগ্রেডের জন্য হেডরুম বজায় রেখে দ্বৈত 25GbE পোর্টগুলিকে সম্পূর্ণরূপে স্যাচুরেট করার জন্য 256 GB/s পর্যন্ত হোস্ট ব্যান্ডউইথ সরবরাহ করেদলটি লক্ষ্য করেছে যে অ্যাডাপ্টারটি সম্পূর্ণরূপেMCX653106A-HDAT সামঞ্জস্যপূর্ণতাদের বিদ্যমান সার্ভার হার্ডওয়্যারের সাথে, যা পিসিআইই জেনার 3.0 এবং 4 উভয়ই সমর্থন করে।0, ধাপে ধাপে আপগ্রেডের পথকে সহজ করে।

দ্যMCX653106A-HDAT স্পেসিফিকেশনতারা লেটেন্সি কমাতে ইন্টারপুট কোয়েলেসিং প্যারামিটার সামঞ্জস্য করেছে,ডাটাবেস প্রতিলিপি ট্র্যাফিক সর্বোচ্চ QoS চিকিত্সা পেয়েছে তা নিশ্চিত করার জন্য প্রতি সারি অগ্রাধিকার সেটিংস কনফিগার করা, এবং রিয়েল টাইমে ফ্যাব্রিকের স্বাস্থ্য পর্যবেক্ষণের জন্য অ্যাডাপ্টারের অন্তর্নির্মিত টেলিমেট্রি ব্যবহার করে।

ফলাফল ও পরিমাপযোগ্য উপকারিতা

কর্মক্ষমতা উন্নতি তাৎক্ষণিক এবং উল্লেখযোগ্য উভয়ই ছিল, যা সরাসরি কোম্পানির ট্রেডিং অপারেশনকে প্রভাবিত করেছিলঃ

পরিমাণগত পরিমাপ ছাড়াও,এনভিআইডিআইএ মেলানক্স এমসিএক্স 653106 এ-এইচডিএটিদলটি যে অপারেশনাল উপকারগুলি প্রত্যাশা করেনি তা প্রদান করে। নির্ধারক লেটেন্সি 100 মাইক্রোসেকেন্ডের নিচে ক্রমাগত ক্যোয়ারী প্রতিক্রিয়া নিশ্চিত করে,ব্যবসায়িক ক্লায়েন্টদের কাছে আত্মবিশ্বাসের সাথে আরও কঠোর SLA গ্যারান্টি প্রদান করতে সক্ষম করে. মুক্ত সিপিইউ কোরগুলি ডাটাবেস ক্যোয়ারী প্রসেসিংয়ের দিকে পুনঃনির্দেশিত হয়েছিল, কার্যকরভাবে নতুন হার্ডওয়্যার যুক্ত না করে ক্লাস্টারের লেনদেনের ক্ষমতা বৃদ্ধি করে।

টিমটি এডাপ্টারের উন্নত টেলিমেট্রি ব্যবহার করে ফ্যাব্রিকের ঘনত্বের নিদর্শনগুলিতে দৃশ্যমানতা অর্জন করেছে, যা সক্রিয় ক্ষমতা পরিকল্পনা এবং কর্মক্ষমতা অপ্টিমাইজেশান সক্ষম করে।MCX653106A-HDAT ইথারনেট অ্যাডাপ্টার কার্ড সমাধানএটি কর্মক্ষমতা ত্বরান্বিতকারী এবং অপারেশনাল ইন্টেলিজেন্স প্ল্যাটফর্ম উভয়ই প্রমাণিত হয়েছে।

সংক্ষিপ্ত বিবরণ এবং প্রত্যাশা

এই মোতায়েনটি প্রমাণ করেছে যেMCX653106A-HDATএনভিআইডিআইএ মেলানোক্স থেকে একটি নেটওয়ার্ক আপগ্রেডের চেয়েও বেশি এটি বিতরণ সিস্টেম কর্মক্ষমতা একটি কৌশলগত বিনিয়োগ। হার্ডওয়্যার-আউটলোড RoCEv2 সক্ষম করে,অ্যাডাপ্টার 80% এরও বেশি অনুসন্ধানের বিলম্ব হ্রাস করেছে, ডাটাবেস থ্রুপুট 3.6x বৃদ্ধি, এবং উল্লেখযোগ্যভাবে অবকাঠামো দক্ষতা উন্নত।উল্লেখযোগ্য মূলধন সঞ্চয়.

দলটি এখন অতিরিক্ত ব্যবহারের ক্ষেত্রে অনুসন্ধান করছেএনভিআইডিআইএ মেলানক্স এমসিএক্স 653106 এ-এইচডিএটি, যার মধ্যে রয়েছে উচ্চ-কার্যকারিতা ব্লক স্টোরেজ এবং GPU- ত্বরিত বিশ্লেষণের জন্য NVMe-oF রিয়েল-টাইম ঝুঁকি মডেলিং।MCX653106A-HDAT দাম, যখন অপারেশনাল সঞ্চয় এবং কর্মক্ষমতা লাভের সাথে মূল্যায়ন করা হয়,বিশেষত ডেডিকেটেড ইনফিনিব্যান্ড অবকাঠামো স্থাপন বা অতিরিক্ত কম্পিউটার নোড সংগ্রহের ব্যয়ের তুলনায় বিনিয়োগের উপর একটি আকর্ষণীয় রিটার্ন উপস্থাপন করেছে.

সক্রিয়ভাবে মূল্যায়নকারী সংস্থাগুলির জন্যবিক্রির জন্য MCX653106A-HDATবিকল্প, এই কেস স্টাডি দেখায় যে অ্যাডাপ্টার বাস্তব বিশ্বের উৎপাদন পরিবেশে কম বিলম্ব, উচ্চ-থ্রুপুট নেটওয়ার্কিং এর তার প্রতিশ্রুতি প্রদান করে।হার্ডওয়্যার ত্বরণের সংমিশ্রণ, বিস্তৃত টেলিমেট্রি এবং বিদ্যমান ইথারনেট অবকাঠামোর সাথে নির্বিঘ্নে সামঞ্জস্যতাএনভিআইডিআইএ মেলানক্স এমসিএক্স 653106 এ-এইচডিএটিআধুনিক, পারফরম্যান্স-ইনটেন্সিভ ডেটা সেন্টার আর্কিটেকচারের একটি মৌলিক উপাদান।