এটি একটি গেস্ট পোস্ট সহ-লিখিত অ্যালেক্স নাউমভ, smava-এর প্রিন্সিপাল ডেটা আর্কিটেক্ট৷
smava GmbH জার্মানির নেতৃস্থানীয় আর্থিক পরিষেবা সংস্থাগুলির মধ্যে একটি, ব্যক্তিগত ঋণকে স্বচ্ছ, ন্যায্য এবং গ্রাহকদের জন্য সাশ্রয়ী করে তোলে৷ ডিজিটাল প্রক্রিয়ার উপর ভিত্তি করে, smava 20 টিরও বেশি ব্যাঙ্ক থেকে ঋণের অফার তুলনা করে। এইভাবে, ঋণগ্রহীতারা দ্রুত, ডিজিটালাইজড এবং দক্ষ উপায়ে তাদের জন্য সবচেয়ে অনুকূল ডিলগুলি বেছে নিতে পারেন।
smava মার্কেট লিডার হওয়ার জন্য ডেটা-চালিত সিদ্ধান্তগুলিতে বিশ্বাস করে এবং সুবিধা গ্রহণ করে। ডেটা প্ল্যাটফর্ম টিম কোম্পানির সমস্ত বিভাগ এবং শাখাগুলিতে ডেটা পণ্য সরবরাহ করে smava-এ ডেটা-চালিত সিদ্ধান্তগুলিকে সমর্থন করার জন্য দায়ী। বিভাগগুলি ইঞ্জিনিয়ারিং থেকে সেলস এবং মার্কেটিং পর্যন্ত দলগুলিকে অন্তর্ভুক্ত করে। শাখাগুলি পণ্য দ্বারা পরিসীমা, যথা B2C ঋণ, B2B ঋণ, এবং পূর্বে B2C বন্ধকী। কোম্পানির অভ্যন্তরে ব্যবহৃত ডেটা পণ্যগুলির মধ্যে অন্যান্যদের মধ্যে ব্যবহারকারীর ভ্রমণ, অপারেশনাল রিপোর্ট এবং বিপণন প্রচারাভিযানের ফলাফলের অন্তর্দৃষ্টি অন্তর্ভুক্ত। ডেটা প্ল্যাটফর্মটি প্রতিদিন গড়ে 60 হাজার প্রশ্ন পরিবেশন করে। ব্যবসা এবং ডেটা উত্সের বিকাশের সাথে সাথে অবিচ্ছিন্ন বৃদ্ধির সাথে ডাটা ভলিউম দ্বি-সংখ্যার টিবিতে রয়েছে।
smava-এর ডেটা প্ল্যাটফর্ম টিম বিভিন্ন SLA-এর সাথে স্টেকহোল্ডারদের কাছে ডেটা সরবরাহ করার চ্যালেঞ্জের মুখোমুখি হয়েছিল, যেখানে খরচ-দক্ষ থাকার পাশাপাশি স্কেল বাড়ানোর নমনীয়তা বজায় রাখা হয়েছিল। দৈনিক প্রতিবেদন তৈরি করতে 3 ঘন্টা পর্যন্ত সময় লেগেছে, যা দিনের বেলায় পুনরায় গণনার প্রয়োজন হলে ব্যবসায়িক সিদ্ধান্ত গ্রহণকে প্রভাবিত করে। স্ব-পরিষেবা বিশ্লেষণের গতি বাড়ানোর জন্য এবং ডেটার উপর ভিত্তি করে উদ্ভাবনকে উত্সাহিত করার জন্য, কোনও দলকে বিকেন্দ্রীকৃত পদ্ধতিতে তাদের নিজস্বভাবে ডেটা পণ্য তৈরি করার অনুমতি দেওয়ার উপায়গুলি সরবরাহ করার জন্য একটি সমাধান প্রয়োজন ছিল। ডেটা পণ্য তৈরি এবং পরিচালনা করতে, smava ব্যবহার করে আমাজন রেডশিফ্ট, একটি ক্লাউড ডেটা গুদাম।
এই পোস্টে, আমরা দেখাই কিভাবে Smava তাদের ডেটা প্ল্যাটফর্ম ব্যবহার করে অপ্টিমাইজ করেছে অ্যামাজন রেডশিফ্ট সার্ভারহীন এবং আমাজন রেডশিফ্ট ডেটা শেয়ারিং অপ্রত্যাশিত কাজের চাপের জন্য ডান-আকারের চ্যালেঞ্জগুলি কাটিয়ে উঠতে এবং মূল্য-কর্মক্ষমতা আরও উন্নত করতে। অপ্টিমাইজেশনের মাধ্যমে, smava 50% পর্যন্ত খরচ সাশ্রয় করেছে এবং আগের বিশ্লেষণ পরিকাঠামোর তুলনায় তিনগুণ দ্রুত রিপোর্ট তৈরি করেছে।
সমাধান ওভারভিউ
একটি ডেটা-চালিত কোম্পানি হিসাবে, smava তাদের অ্যানালিটিক্স ব্যবহারের কেসগুলিকে শক্তিশালী করতে AWS ক্লাউডের উপর নির্ভর করে। তাদের গ্রাহকদের সেরা ডিল এবং ব্যবহারকারীর অভিজ্ঞতা আনতে, smava অনুসরণ করে আধুনিক ডেটা আর্কিটেকচার বিশ্লেষণাত্মক প্রক্রিয়াকরণ এবং ডেটা খরচের জন্য একটি পরিমাপযোগ্য, টেকসই ডেটা স্টোর এবং উদ্দেশ্য-নির্মিত ডেটা স্টোর হিসাবে ডেটা লেকের সাথে নীতিগুলি।
স্মাভা বিভিন্ন বাহ্যিক এবং অভ্যন্তরীণ ডেটা উত্স থেকে ডেটা লেকের উপর ভিত্তি করে একটি অবতরণ পর্যায়ে প্রবেশ করে আমাজন সিম্পল স্টোরেজ সার্ভিস (Amazon S3)। ডেটা গ্রহণ করতে, smava কাস্টম স্ক্রিপ্ট দ্বারা পরিপূরক জনপ্রিয় তৃতীয়-পক্ষ গ্রাহক ডেটা প্ল্যাটফর্মের একটি সেট ব্যবহার করে।
Amazon S3 এ ডেটা অবতরণ করার পর, smava ব্যবহার করে এডাব্লুএস আঠালো ডেটা ক্যাটালগ এবং ক্রলার স্বয়ংক্রিয়ভাবে উপলব্ধ ডেটা ক্যাটালগ করতে, মেটাডেটা ক্যাপচার করতে, এবং একটি ইন্টারফেস প্রদান করে যা সমস্ত ডেটা সম্পদ অনুসন্ধানের অনুমতি দেয়।
ডেটা বিশ্লেষক যারা ডেটা লেকের ব্যবহারে কাঁচা সম্পদগুলিতে অ্যাক্সেসের প্রয়োজন অ্যামাজন অ্যাথেনা, অ্যাডহক প্রশ্নগুলির সাথে অনুসন্ধানের জন্য একটি সার্ভারহীন, ইন্টারেক্টিভ বিশ্লেষণ পরিষেবা৷ সংগঠন জুড়ে সমস্ত বিভাগ দ্বারা ডাউনস্ট্রিম খরচের জন্য, smava-এর ডেটা প্ল্যাটফর্ম দল নিম্নলিখিতগুলি অনুসরণ করে কিউরেটেড ডেটা পণ্য প্রস্তুত করে নিষ্কাশন, লোড, এবং রূপান্তর (ELT) প্যাটার্ন। smava তাদের ক্লাউড ডেটা গুদাম হিসাবে Amazon Redshift ব্যবহার করে ডেটা রূপান্তর, সঞ্চয় এবং বিশ্লেষণ করতে এবং ব্যবহার করে আমাজন রেডশিফ্ট স্পেকট্রাম SQL ব্যবহার করে ডেটা লেক থেকে স্ট্রাকচার্ড এবং সেমি-স্ট্রাকচার্ড ডেটা দক্ষতার সাথে অনুসন্ধান এবং পুনরুদ্ধার করতে।
smava অনুসরণ করে ডেটা ভল্ট মডেলিং কাঁচা ভল্ট, বিজনেস ভল্ট, এবং ডেটা মার্টের পর্যায়গুলির সাথে শেষ গ্রাহকদের জন্য ডেটা পণ্য প্রস্তুত করার পদ্ধতি। Raw Vault ডেটা উৎস থেকে সরাসরি লোড করা বস্তুর বর্ণনা করে এবং ডেটা লেকে অবতরণ পর্যায়ের একটি অনুলিপি উপস্থাপন করে। বিজনেস ভল্টটি Raw ভল্ট থেকে প্রাপ্ত ডেটা দিয়ে তৈরি এবং ব্যবসার নিয়ম অনুসারে রূপান্তরিত হয়। অবশেষে, ডেটা একটি নির্দিষ্ট ব্যবসায়িক লাইনের জন্য নির্দিষ্ট ডেটা পণ্যগুলিতে একত্রিত হয়। এই হল তথ্য হাট মঞ্চ বিজনেস ভল্ট এবং ডেটা মার্ট পর্যায়ের ডেটা পণ্যগুলি এখন গ্রাহকদের জন্য উপলব্ধ৷ Smava ব্যবসায়িক বুদ্ধিমত্তা, ডেটা ভিজ্যুয়ালাইজেশন এবং আরও বিশ্লেষণের জন্য মূকনাট্য ব্যবহার করার সিদ্ধান্ত নিয়েছে। তথ্য রূপান্তর সঙ্গে পরিচালিত হয় dbt কর্মপ্রবাহ পরিচালনা এবং দলের সহযোগিতাকে সহজ করতে।
নিম্নলিখিত চিত্রটি অপ্টিমাইজেশনের আগে উচ্চ-স্তরের ডেটা প্ল্যাটফর্মের আর্কিটেকচার দেখায়।
ডেটা প্ল্যাটফর্মের প্রয়োজনীয়তার বিবর্তন
smava তিনটি ডেটা স্টেজ হোস্ট করার জন্য একটি একক Redshift ক্লাস্টার দিয়ে শুরু করেছে। তারা প্রভিশনড ক্লাস্টার নোড বেছে নিয়েছে RA3 প্রকার সঙ্গে সংরক্ষিত উদাহরণ (RIs) খরচ অপ্টিমাইজেশান জন্য. যেহেতু ডেটা ভলিউম বছরে 53% বৃদ্ধি পেয়েছে, তাই বিভিন্ন বিশ্লেষণমূলক কাজের চাপের জটিলতা এবং প্রয়োজনীয়তাও বেড়েছে।
smava ক্লাস্টারের ডান সাইজিং এবং ব্যবহার করে ক্রমবর্ধমান ডেটা ভলিউমকে দ্রুত সমাধান করেছে অ্যামাজন রেডশিফ্ট কনকারেন্সি স্কেলিং সর্বোচ্চ কাজের চাপের জন্য। তদুপরি, Smava উদ্ভাবনের গতি বাড়ানোর জন্য একটি স্ব-পরিষেবা পদ্ধতিতে সমস্ত দলকে তাদের নিজস্ব ডেটা পণ্য তৈরি করার বিকল্প দিতে চেয়েছিল। কেন্দ্রীয়ভাবে পরিচালিত ডেটা পণ্যগুলির সাথে কোনও হস্তক্ষেপ এড়াতে, বিকেন্দ্রীভূত পণ্য বিকাশের পরিবেশগুলিকে কঠোরভাবে বিচ্ছিন্ন করা দরকার। ডেটা প্ল্যাটফর্ম টিম দ্বারা কিউরেট করা বিভিন্ন পণ্য পর্যায়ের বিচ্ছিন্নতার জন্যও একই প্রয়োজনীয়তা প্রয়োগ করা হয়েছিল।
ডেটা শেয়ারিং এবং রেডশিফ্ট সার্ভারলেস সহ আর্কিটেকচার অপ্টিমাইজ করা
বিবর্তিত প্রয়োজনীয়তা পূরণের জন্য, Smava একক প্রভিশন করা Redshift ক্লাস্টারকে একাধিক ডেটা গুদামে বিভক্ত করে কাজের চাপকে আলাদা করার সিদ্ধান্ত নিয়েছে, প্রতিটি গুদাম একটি ভিন্ন পর্যায়ে পরিবেশন করছে। উপরন্তু, smava বিদ্যমান পণ্য পাইপলাইনে হস্তক্ষেপের ঝুঁকি ছাড়াই নতুন ডেটা পণ্য বিকাশের জন্য বিজনেস ভল্টে নতুন স্টেজিং পরিবেশ যুক্ত করেছে। ডেটা প্ল্যাটফর্ম টিমের কেন্দ্রীয়ভাবে পরিচালিত ডেটা পণ্যগুলির সাথে কোনও হস্তক্ষেপ এড়াতে, smava একটি অতিরিক্ত রেডশিফ্ট ক্লাস্টার চালু করেছে, বিকেন্দ্রীভূত কাজের চাপগুলিকে আলাদা করে।
smava একটি জটিল ডেটা রেপ্লিকেশন পাইপলাইন পরিচালনা না করেই কাজের চাপ বিচ্ছিন্নতা অর্জনের জন্য একটি আউট-অফ-দ্য-বক্স সমাধান খুঁজছিল।
লঞ্চের পরপরই রেডশিফ্ট ডেটা শেয়ারিং 2021 সালে সক্ষমতা, ডেটা প্ল্যাটফর্ম দল স্বীকার করেছে যে এটিই সেই সমাধান যা তারা খুঁজছিল। smava বিভিন্ন ভোক্তা ক্লাস্টারে পড়ার অ্যাক্সেসের জন্য প্রযোজক ক্লাস্টার থেকে ডেটা উপলব্ধ করার জন্য ডেটা ভাগ করে নেওয়ার বৈশিষ্ট্যটি গ্রহণ করেছে, সেই সমস্ত ভোক্তা ক্লাস্টারগুলির প্রত্যেকটি আলাদা পর্যায়ে পরিবেশন করছে।
রেডশিফ্ট ডেটা শেয়ারিং ডেটা কপি করার প্রয়োজন ছাড়াই রেডশিফ্ট ক্লাস্টার জুড়ে তাত্ক্ষণিক, দানাদার এবং দ্রুত ডেটা অ্যাক্সেস সক্ষম করে। এটি ডেটাতে লাইভ অ্যাক্সেস সরবরাহ করে যাতে ব্যবহারকারীরা সর্বদা সর্বাধিক আপ-টু-ডেট এবং সামঞ্জস্যপূর্ণ তথ্য দেখতে পান যেহেতু এটি ডেটা গুদামে আপডেট করা হয়েছে। ডেটা ভাগ করে নেওয়ার মাধ্যমে, আপনি একই বা ভিন্ন AWS অ্যাকাউন্টে এবং অঞ্চল জুড়ে Redshift ক্লাস্টারগুলির সাথে নিরাপদে লাইভ ডেটা ভাগ করতে পারেন।
রেডশিফ্ট ডেটা ভাগ করে নেওয়ার সাথে, smava ডেটার প্রতিলিপি না করেই পৃথক ভোক্তা ক্লাস্টারে ডেটা ওয়ার্কলোডগুলিকে আলাদা করে ডেটা আর্কিটেকচারকে অপ্টিমাইজ করতে সক্ষম হয়েছিল। নিম্নলিখিত চিত্রটি একক রেডশিফ্ট ক্লাস্টারকে একাধিক ক্লাস্টারে বিভক্ত করার পরে উচ্চ-স্তরের ডেটা প্ল্যাটফর্ম আর্কিটেকচারকে চিত্রিত করে।
একটি স্ব-পরিষেবা ডেটা মার্ট প্রদানের মাধ্যমে, smava ব্যবহারকারীদের ডেটার সমস্ত দিকগুলিতে অ্যাক্সেস প্রদান করে ডেটা গণতন্ত্রীকরণ বাড়িয়েছে। তারা দলগুলিকে ডেটা আবিষ্কার, অ্যাডহক বিশ্লেষণ, প্রোটোটাইপিং এবং পরিপক্ক ডেটা পণ্যগুলির সম্পূর্ণ জীবনচক্র পরিচালনার জন্য কাস্টম সরঞ্জামগুলির একটি সেট সরবরাহ করেছে।
পৃথক ক্লাস্টারগুলি থেকে অপারেশনাল ডেটা সংগ্রহ করার পরে, ডেটা প্ল্যাটফর্ম দল আরও সম্ভাব্য অপ্টিমাইজেশানগুলি চিহ্নিত করেছে: Raw Vault ক্লাস্টারটি 24/7 স্থির লোডের অধীনে ছিল, কিন্তু বিজনেস ভল্ট ক্লাস্টারগুলি শুধুমাত্র রাতে আপডেট করা হয়েছিল। খরচের জন্য অপ্টিমাইজ করতে, smava ব্যবহার করে বিরতি এবং পুনরায় শুরু করার ক্ষমতা রেডশিফ্ট প্রভিশনড ক্লাস্টারের। এই ক্ষমতাগুলি ক্লাস্টারগুলির জন্য দরকারী যেগুলি নির্দিষ্ট সময়ে উপলব্ধ হওয়া প্রয়োজন৷ যখন ক্লাস্টারটি বিরাম দেওয়া হয়েছে, অন-ডিমান্ড বিলিং স্থগিত করা হয়েছে৷ শুধুমাত্র ক্লাস্টারের স্টোরেজ চার্জ বহন করে।
বিরতি এবং পুনঃসূচনা বৈশিষ্ট্যটি স্মাভাকে খরচের জন্য অপ্টিমাইজ করতে সাহায্য করেছে, তবে ক্লাস্টার ক্রিয়াকলাপগুলিকে ট্রিগার করার জন্য এটির অতিরিক্ত অপারেশনাল ওভারহেড প্রয়োজন। অতিরিক্তভাবে, উন্নয়ন ক্লাস্টারগুলি কাজের সময় অলস সময়ের সাপেক্ষে রয়ে গেছে। এই চ্যালেঞ্জগুলি শেষ পর্যন্ত 2022 সালে Redshift Serverless গ্রহণ করার মাধ্যমে সমাধান করা হয়েছিল। ডেটা প্ল্যাটফর্ম টিম বিজনেস ডেটা ভল্ট স্টেজ ক্লাস্টারগুলিকে Redshift Serverless-এ স্থানান্তর করার সিদ্ধান্ত নিয়েছে, যা তাদের শুধুমাত্র ব্যবহারে, নির্ভরযোগ্য এবং দক্ষতার সাথে ডেটা গুদামের জন্য অর্থ প্রদান করতে দেয়।
রেডশিফ্ট সার্ভারলেস সেই ক্ষেত্রে আদর্শ যখন কম্পিউটের প্রয়োজনীয়তার ভবিষ্যদ্বাণী করা কঠিন হয় যেমন পরিবর্তনশীল কাজের চাপ, অলস সময়ের সাথে পর্যায়ক্রমিক কাজের চাপ এবং স্পাইক সহ স্থির-রাষ্ট্রীয় কাজের চাপ। উপরন্তু, নতুন কাজের চাপ এবং আরও সমসাময়িক ব্যবহারকারীদের সাথে ব্যবহারের চাহিদা বিকশিত হওয়ার সাথে সাথে, Redshift Serverless স্বয়ংক্রিয়ভাবে সঠিক গণনা সংস্থান সরবরাহ করে এবং ম্যানুয়াল হস্তক্ষেপের প্রয়োজন ছাড়াই ডেটা গুদাম সীমাহীন এবং স্বয়ংক্রিয়ভাবে স্কেল করে। RA3 নোড সহ রেডশিফ্ট সার্ভারলেস এবং প্রভিশন করা রেডশিফ্ট ক্লাস্টারগুলির মধ্যে উভয় দিকেই ডেটা শেয়ারিং সমর্থিত, তাই স্মাভা আর্কিটেকচারে কোনও পরিবর্তনের প্রয়োজন ছিল না। নিম্নোক্ত চিত্রটি Redshift Serverless-এ যাওয়ার পর উচ্চ-স্তরের আর্কিটেকচার সেটআপ দেখায়।
smava একটি ট্রাঙ্ক-ভিত্তিক উন্নয়ন পদ্ধতি অবলম্বন করে একটি নির্বিঘ্ন CI/CD পাইপলাইনের মাধ্যমে Redshift Serverless এবং dbt-এর সুবিধাগুলিকে একত্রিত করেছে। Git সংগ্রহস্থলের পরিবর্তনগুলি স্বয়ংক্রিয়ভাবে একটি পরীক্ষার পর্যায়ে স্থাপন করা হয় এবং স্বয়ংক্রিয় ইন্টিগ্রেশন পরীক্ষা ব্যবহার করে যাচাই করা হয়। এই পদ্ধতিটি বিকাশকারীদের দক্ষতা বৃদ্ধি করেছে এবং উৎপাদনের গড় সময়কে দিন থেকে মিনিটে হ্রাস করেছে।
smava একটি আর্কিটেকচার গ্রহণ করেছে যা প্রভিশনড এবং সার্ভারবিহীন রেডশিফ্ট ডেটা গুদাম উভয়ই ব্যবহার করে, সাথে কাজের চাপগুলিকে আলাদা করার জন্য ডেটা ভাগ করে নেওয়ার ক্ষমতা। তাদের প্রয়োজনের জন্য সঠিক স্থাপত্য নিদর্শন নির্বাচন করে, Smava নিম্নলিখিতগুলি সম্পন্ন করতে সক্ষম হয়েছিল:
- ডেটা পাইপলাইন সরলীকরণ করুন এবং অপারেশনাল ওভারহেড হ্রাস করুন
- বৈশিষ্ট্য প্রকাশের সময় দিন থেকে মিনিটে কমিয়ে দিন
- অলস সময় কমিয়ে এবং কাজের চাপ সঠিক আকারে মূল্য-কর্মক্ষমতা বাড়ান
- মূল সেটআপ খরচের 50% এ তিনগুণ পর্যন্ত দ্রুত রিপোর্ট তৈরি (দ্রুত গণনা এবং উচ্চ সমান্তরালকরণ) অর্জন করুন
- সমস্ত বিভাগের তত্পরতা বৃদ্ধি করুন এবং ডেটাতে অ্যাক্সেসকে গণতান্ত্রিক করে ডেটা-চালিত সিদ্ধান্ত গ্রহণকে সমর্থন করুন
- সমস্ত বিভাগ জুড়ে দলের জন্য স্ব-পরিষেবা ডেটা সক্ষমতা প্রকাশ করে এবং সম্পূর্ণ গ্রাহক যাত্রা কভার করার জন্য A/B পরীক্ষার ক্ষমতা জোরদার করে উদ্ভাবনের গতি বাড়ান।
এখন, smava-এর সমস্ত বিভাগ ডেটা-চালিত, নির্ভুল এবং চটপটে সিদ্ধান্ত নেওয়ার জন্য উপলব্ধ ডেটা পণ্যগুলি ব্যবহার করছে।
ভবিষ্যতের দৃষ্টি
ভবিষ্যতের জন্য, Smava অপারেশনাল মেট্রিক্সের উপর ভিত্তি করে ডেটা প্ল্যাটফর্ম অপ্টিমাইজ করা চালিয়ে যাওয়ার পরিকল্পনা করেছে। তারা সেল্ফ-সার্ভিস ডেটা মার্ট ক্লাস্টারের মতো আরও প্রভিশনড ক্লাস্টারকে সার্ভারলেস করার কথা ভাবছে। উপরন্তু, Smava চালানোর জন্য সমান্তরাল ডেটা পাইপলাইনের সংখ্যা বাড়াতে ELT অর্কেস্ট্রেশন টুলচেনকে অপ্টিমাইজ করছে। এটি রেডশিফ্ট সংস্থানগুলির ব্যবহার বাড়াবে এবং খরচ কমানোর অনুমতি দেবে৷
ডেটা পণ্য তৈরির জন্য বিকেন্দ্রীকৃত, স্ব-পরিষেবা প্রবর্তনের সাথে, smava একটি ধাপ এগিয়েছে ডাটা মেশ আর্কিটেকচার. ভবিষ্যতে, ডেটা প্ল্যাটফর্ম টিম তাদের পরিষেবা ব্যবহারকারীদের প্রয়োজনীয়তা আরও মূল্যায়ন করার এবং ফেডারেটেড ডেটা গভর্নেন্সের মতো আরও ডেটা জাল নীতিগুলি প্রতিষ্ঠা করার পরিকল্পনা করেছে।
উপসংহার
এই পোস্টে, আমরা দেখিয়েছি কিভাবে Smava তাদের ডেটা প্ল্যাটফর্মকে অপ্টিমাইজ করেছে পরিবেশ এবং কাজের চাপগুলিকে আলাদা করে রেডশিফ্ট সার্ভারলেস এবং ডেটা শেয়ারিং বৈশিষ্ট্যগুলি ব্যবহার করে। এই রেডশিফ্ট পরিবেশগুলি তাদের পরিকাঠামোর সাথে ভালভাবে সংহত, চাহিদা অনুযায়ী স্কেলিংয়ে নমনীয় এবং অত্যন্ত উপলব্ধ, এবং তাদের ন্যূনতম প্রশাসনিক প্রচেষ্টা প্রয়োজন। সামগ্রিকভাবে, স্মাভা মোট প্ল্যাটফর্মের খরচ 50% কমিয়ে তিন গুণ কর্মক্ষমতা বাড়িয়েছে। উপরন্তু, প্রতিবেদন তৈরির সময়ের জন্য বিদ্যমান SLA বজায় রেখে তারা অপারেশনাল ওভারহেডকে ন্যূনতম পর্যন্ত কমিয়েছে। অধিকন্তু, Smava তাদের বাজারের সময়কে দ্রুততর করার জন্য স্ব-পরিষেবা ডেটা পণ্যের ক্ষমতা প্রদান করে উদ্ভাবনের সংস্কৃতিকে শক্তিশালী করেছে।
আপনি যদি অ্যামাজন রেডশিফ্ট ক্ষমতা সম্পর্কে আরও জানতে আগ্রহী হন তবে আমরা সাম্প্রতিকতম দেখার পরামর্শ দিই AWS ইভেন্টস চ্যানেলে অ্যামাজন রেডশিফ্ট সেশনে নতুন কি আছে পরিষেবাটিতে সম্প্রতি যোগ করা বৈশিষ্ট্যগুলির একটি ওভারভিউ পেতে। এছাড়াও আপনি অন্বেষণ করতে পারেন স্ব-পরিষেবা, হ্যান্ড-অন অ্যামাজন রেডশিফ্ট ল্যাব একটি নির্দেশিত পদ্ধতিতে মূল Amazon Redshift কার্যকারিতা নিয়ে পরীক্ষা করার জন্য।
আপনি আরও গভীরে ডুব দিতে পারেন রেডশিফ্ট সার্ভারহীন ব্যবহারের ক্ষেত্রে এবং ডেটা শেয়ারিং ব্যবহারের ক্ষেত্রে. উপরন্তু, চেক আউট ডেটা শেয়ারিং সেরা অনুশীলন এবং আবিষ্কার করুন কিভাবে অন্যান্য গ্রাহকরা রেডশিফ্ট ডেটা ভাগ করে নেওয়ার সাথে খরচ এবং পারফরম্যান্সের জন্য অপ্টিমাইজ করেছেন আপনার নিজের কাজের চাপের জন্য অনুপ্রাণিত হতে।
আপনি যদি বই পছন্দ করেন, চেক আউট অ্যামাজন রেডশিফ্ট: ও'রিলির দ্বারা নির্ধারিত গাইড, যেখানে লেখকরা Amazon Redshift-এর ক্ষমতার বিশদ বিবরণ দেন এবং আপনাকে সংশ্লিষ্ট নিদর্শন এবং কৌশলগুলির অন্তর্দৃষ্টি প্রদান করেন।
লেখক সম্পর্কে
অ্যালেক্স নাউমভ তিনি smava GmbH-এর একজন প্রধান ডেটা আর্কিটেক্ট, এবং ডেটা বিভাগে রূপান্তর প্রকল্পগুলির নেতৃত্ব দেন। অ্যালেক্স এর আগে 10 বছর পরামর্শক এবং ডেটা/সলিউশন আর্কিটেক্ট হিসাবে বিভিন্ন ডোমেনে কাজ করেছেন, যেমন টেলিকমিউনিকেশন, ব্যাঙ্কিং, এনার্জি এবং ফিনান্স, বিভিন্ন টেক স্ট্যাক ব্যবহার করে এবং বিভিন্ন দেশে। ডেটা-চালিত এবং তারা যা করে তাতে সেরা হওয়ার জন্য ডেটা এবং রূপান্তরকারী সংস্থাগুলির প্রতি তাঁর দুর্দান্ত আবেগ রয়েছে।
লিঙ্গলি ঝেং AWS বিশ্বব্যাপী বিশেষজ্ঞ সংস্থায় একজন বিজনেস ডেভেলপমেন্ট ম্যানেজার হিসেবে কাজ করে, DACH অঞ্চলের গ্রাহকদের অ্যামাজন অ্যানালিটিক্স পরিষেবা থেকে সেরা মূল্য পেতে সহায়তা করে। ডেটা অ্যানালিটিক্স, AI, এবং ML-এর উপর ফোকাস সহ শক্তি, অটোমেশন এবং সফ্টওয়্যার শিল্পে 12 বছরেরও বেশি অভিজ্ঞতার সাথে, তিনি গ্রাহকদের ডিজিটাল রূপান্তরের মাধ্যমে বাস্তব ব্যবসায়িক ফলাফল অর্জনে সহায়তা করার জন্য নিবেদিত।
আলেকজান্ডার স্পিভাক তিনি AWS-এর একজন সিনিয়র স্টার্টআপ সলিউশন আর্কিটেক্ট, EMEA উত্তর জুড়ে B2B ISV গ্রাহকদের উপর ফোকাস করছেন। এডব্লিউএস-এর আগে, আলেকজান্ডার সফ্টওয়্যার ডেভেলপমেন্ট এবং আর্কিটেকচারে বিভিন্ন ভূমিকা সহ আর্থিক পরিষেবার ব্যস্ততায় পরামর্শক হিসাবে কাজ করেছিলেন। তিনি ডেটা বিশ্লেষণ, সার্ভারহীন আর্কিটেকচার এবং দক্ষ সংস্থা তৈরির বিষয়ে উত্সাহী।
এই পোস্টটি প্রযুক্তিগত নির্ভুলতার জন্য ডেভিড গ্রিনশটাইন, সিনিয়র অ্যানালিটিক্স সলিউশন আর্কিটেক্ট দ্বারা পর্যালোচনা করা হয়েছে।
- এসইও চালিত বিষয়বস্তু এবং পিআর বিতরণ। আজই পরিবর্ধিত পান।
- PlatoData.Network উল্লম্ব জেনারেটিভ Ai. নিজেকে ক্ষমতায়িত করুন। এখানে প্রবেশ করুন.
- প্লেটোএআইস্ট্রিম। Web3 ইন্টেলিজেন্স। জ্ঞান প্রসারিত. এখানে প্রবেশ করুন.
- প্লেটোইএসজি। কার্বন, ক্লিনটেক, শক্তি, পরিবেশ সৌর, বর্জ্য ব্যবস্থাপনা. এখানে প্রবেশ করুন.
- প্লেটো হেলথ। বায়োটেক এবং ক্লিনিক্যাল ট্রায়াল ইন্টেলিজেন্স। এখানে প্রবেশ করুন.
- উত্স: https://aws.amazon.com/blogs/big-data/how-smava-makes-loans-transparent-and-affordable-using-amazon-redshift-serverless/
- : আছে
- : হয়
- :কোথায়
- $ ইউপি
- 10
- 100
- 12
- 125
- 20
- 2021
- 2022
- 60
- a
- সক্ষম
- সম্পর্কে
- প্রবেশ
- ডেটাতে অ্যাক্সেস
- সম্পাদন
- অনুযায়ী
- অ্যাকাউন্টস
- সঠিকতা
- সঠিক
- অর্জন করা
- অর্জন
- দিয়ে
- Ad
- যোগ
- যোগ
- অতিরিক্ত
- উপরন্তু
- উদ্দেশ্য
- প্রশাসন
- গৃহীত
- দত্তক
- সুবিধা
- সাশ্রয়ী মূল্যের
- পর
- কর্মতত্পর
- AI
- Alex
- আলেকজান্ডার
- সব
- অনুমতি
- অনুমতি
- এছাড়াও
- সর্বদা
- মর্দানী স্ত্রীলোক
- অ্যামাজন ওয়েব সার্ভিসেস
- মধ্যে
- an
- বিশ্লেষণ
- বিশ্লেষকরা
- বিশ্লেষণমূলক
- বিশ্লেষণাত্মক
- বৈশ্লেষিক ন্যায়
- বিশ্লেষণ করা
- এবং
- কোন
- ফলিত
- অভিগমন
- স্থাপত্য
- স্থাপত্য
- রয়েছি
- AS
- আ
- সম্পদ
- At
- লেখক
- লেখক
- অটোমেটেড
- স্বয়ংক্রিয়ভাবে
- স্বয়ংক্রিয়তা
- সহজলভ্য
- গড়
- এড়াতে
- ডেস্কটপ AWS
- B2B
- B2C
- ব্যাংকিং
- ব্যাংক
- ভিত্তি
- BE
- পরিণত
- হয়েছে
- আগে
- বিশ্বাস
- সুবিধা
- সর্বোত্তম
- মধ্যে
- বিলিং
- ব্লগ
- বই
- orrowণগ্রহীতা
- উভয়
- শাখা
- আনা
- ব্যবসায়
- ব্যবসা উন্নয়ন
- ব্যবসায়িক বুদ্ধি
- কিন্তু
- by
- ক্যাম্পেইন
- CAN
- ক্ষমতা
- সামর্থ্য
- গ্রেপ্তার
- মামলা
- তালিকা
- চ্যালেঞ্জ
- চ্যালেঞ্জ
- পরিবর্তন
- চার্জ
- চেক
- বেছে নিন
- নির্বাচন
- বেছে
- মেঘ
- গুচ্ছ
- সহযোগিতা
- সংগ্রহ
- মিলিত
- কোম্পানি
- কোম্পানি
- তুলনা
- সম্পূর্ণ
- জটিল
- জটিলতা
- গনা
- সহগামী
- বিবেচনা করা
- সঙ্গত
- পরামর্শকারী
- ভোক্তা
- কনজিউমার্স
- খরচ
- অবিরত
- অনুরূপ
- মূল্য
- খরচ বাঁচানো
- খরচ
- দেশ
- আবরণ
- সৃষ্টি
- তৈরি করা হচ্ছে
- সৃষ্টি
- সংস্কৃতি
- প্লেলিস্টে যোগ করা
- প্রথা
- ক্রেতা
- গ্রাহক তথ্য
- গ্রাহকদের
- দৈনিক
- উপাত্ত
- তথ্য এক্সেস
- ডেটা বিশ্লেষণ
- ডেটা লেক
- ডেটা প্ল্যাটফর্ম
- তথ্য আদান প্রদান
- ডেটা ভিজ্যুয়ালাইজেশন
- তথ্য গুদাম
- তথ্য গুদাম
- তথ্য চালিত
- ডেভিড
- দিন
- দিন
- প্রতিষ্ঠান
- বিকেন্দ্রীভূত
- সিদ্ধান্ত নিয়েছে
- সিদ্ধান্ত মেকিং
- সিদ্ধান্ত
- কমান
- নিবেদিত
- গভীর
- চূড়ান্ত
- প্রদান করা
- চাহিদা
- গণতন্ত্রায়ন
- গণতন্ত্রায়নের
- বিভাগ
- বিভাগের
- মোতায়েন
- বিস্তারিত
- বিকাশ
- ডেভেলপারদের
- উন্নয়ন
- DID
- বিভিন্ন
- কঠিন
- ডিজিটাল
- ডিজিটাল ট্রান্সফরমেসন
- দিকনির্দেশ
- সরাসরি
- আবিষ্কার করা
- আবিষ্কার
- ডুব
- do
- ডোমেইনের
- নিচে
- সময়
- প্রতি
- দক্ষতা
- দক্ষ
- দক্ষতার
- প্রচেষ্টা
- EMEA
- সম্ভব
- শেষ
- শক্তি
- অঙ্গীকার
- প্রকৌশল
- পরিবেশের
- স্থাপন করা
- থার (eth)
- মূল্যায়ন
- ঘটনাবলী
- গজান
- বিবর্তিত
- বিকশিত হয়
- বিদ্যমান
- অভিজ্ঞতা
- পরীক্ষা
- অন্বেষণ
- অন্বেষণ করুণ
- বহিরাগত
- মুখোমুখি
- ন্যায্য
- দ্রুত
- দ্রুত
- অনুকূল
- বৈশিষ্ট্য
- বৈশিষ্ট্য
- পরিশেষে
- অর্থ
- আর্থিক
- অর্থনৈতিক সেবা সমূহ
- নমনীয়তা
- নমনীয়
- কেন্দ্রবিন্দু
- মনোযোগ
- অনুসরণ
- অনুসরণ
- জন্য
- ভোক্তাদের জন্য
- পূর্বে
- অগ্রবর্তী
- লালনপালন করা
- থেকে
- সম্পূর্ণ
- বৈশিষ্ট্য
- অধিকতর
- তদ্ব্যতীত
- ভবিষ্যৎ
- উত্পাদন করা
- প্রজন্ম
- জার্মানি
- পাওয়া
- git
- দাও
- জিএমবিএইচ
- শাসন
- মহান
- বড় হয়েছি
- ক্রমবর্ধমান
- উন্নতি
- অতিথি
- অতিথি পোস্ট
- কৌশল
- পরিচালিত
- ছিল
- হাত
- ঘটা
- আছে
- জমিদারি
- he
- সাহায্য
- সাহায্য
- উচ্চস্তর
- ঊর্ধ্বতন
- অত্যন্ত
- নিমন্ত্রণকর্তা
- ঘন্টার
- কিভাবে
- এইচটিএমএল
- HTTPS দ্বারা
- আদর্শ
- চিহ্নিত
- অলস
- প্রকাশ
- প্রভাব
- উন্নত করা
- in
- অন্তর্ভুক্ত করা
- সুদ্ধ
- বৃদ্ধি
- বর্ধিত
- স্বতন্ত্র
- শিল্প
- তথ্য
- পরিকাঠামো
- ইনোভেশন
- ভিতরে
- অর্ন্তদৃষ্টি
- অনুপ্রাণিত
- দৃষ্টান্ত
- তাত্ক্ষণিক
- সংহত
- ইন্টিগ্রেশন
- বুদ্ধিমত্তা
- ইন্টারেক্টিভ
- আগ্রহী
- ইন্টারফেস
- হস্তক্ষেপ
- হস্তক্ষেপ
- অভ্যন্তরীণ
- হস্তক্ষেপ
- মধ্যে
- উপস্থাপিত
- উপস্থাপক
- ভূমিকা
- ভিন্ন
- বিচ্ছিন্নতা
- isv
- IT
- যাতায়াতের
- চাবি
- হ্রদ
- অবতরণ
- জমি
- শুরু করা
- নেতা
- নেতৃত্ব
- বিশালাকার
- শিক্ষা
- জীবনচক্র
- মত
- লাইন
- জীবিত
- লাইভ ডেটা
- বোঝা
- ঋণ
- ঋণ
- খুঁজছি
- প্রণীত
- বজায় রাখার
- করা
- তৈরি করে
- মেকিং
- পরিচালনা করা
- পরিচালিত
- পরিচালক
- পরিচালক
- পদ্ধতি
- ম্যানুয়াল
- অনেক
- বাজার
- বাজারের নেতা
- Marketing
- পরিণত
- সম্মেলন
- জাল
- মেটাডাটা
- প্রণালী বিজ্ঞান
- ছন্দোবিজ্ঞান
- সর্বনিম্ন
- মিনিট
- ML
- অধিক
- পরন্তু
- মর্টগেজ
- সেতু
- পদক্ষেপ
- বহু
- যথা
- প্রয়োজন
- প্রয়োজন
- চাহিদা
- নতুন
- না।
- নোড
- উত্তর
- এখন
- সংখ্যা
- বস্তু
- of
- অফার
- on
- চাহিদা সাপেক্ষে
- ONE
- কেবল
- অপারেটিং
- কর্মক্ষম
- অপারেশনস
- অপ্টিমাইজেশান
- অপ্টিমিজ
- অপ্টিমাইজ
- সর্বোচ্চকরন
- পছন্দ
- or
- অর্কেস্ট্রারচনা
- ক্রম
- সংগঠন
- সংগঠন
- মূল
- অন্যান্য
- অন্যরা
- বাইরে
- শেষ
- সামগ্রিক
- পরাস্ত
- ওভারভিউ
- নিজের
- গতি
- সমান্তরাল
- আবেগ
- কামুক
- প্যাটার্ন
- নিদর্শন
- বিরতি
- বিরাম দেওয়া হয়েছে
- বেতন
- শিখর
- প্রতি
- কর্মক্ষমতা
- পর্যাবৃত্ত
- ব্যক্তিগত
- ব্যক্তিগত ঋণ
- পাইপলাইন
- পরিকল্পনা সমূহ
- মাচা
- প্ল্যাটফর্ম
- Plato
- প্লেটো ডেটা ইন্টেলিজেন্স
- প্লেটোডাটা
- জনপ্রিয়
- জনবহুল
- পোস্ট
- সম্ভাব্য
- ক্ষমতা
- ভবিষ্যদ্বাণী করা
- পছন্দ করা
- প্রস্তুত করা
- প্রস্তুত করে
- আগে
- পূর্বে
- অধ্যক্ষ
- নীতিগুলো
- পূর্বে
- প্রসেস
- প্রক্রিয়াজাতকরণ
- সৃজনকর্তা
- পণ্য
- পণ্য উন্নয়ন
- উত্পাদনের
- পণ্য
- প্রকল্প
- প্রোটোটাইপিং
- প্রদান
- প্রদত্ত
- উপলব্ধ
- প্রদানের
- প্রশ্নের
- দ্রুত
- পরিসর
- কাঁচা
- পড়া
- সাম্প্রতিক
- সম্প্রতি
- স্বীকৃত
- সুপারিশ করা
- হ্রাস করা
- হ্রাসপ্রাপ্ত
- হ্রাস
- হ্রাস
- এলাকা
- অঞ্চল
- মুক্তি
- রয়ে
- প্রতিলিপি
- রিপোর্ট
- প্রতিবেদন
- প্রতিবেদন
- সংগ্রহস্থলের
- প্রতিনিধিত্ব করে
- প্রয়োজন
- প্রয়োজনীয়
- প্রয়োজন
- আবশ্যকতা
- Resources
- দায়ী
- ফলাফল
- জীবনবৃত্তান্ত
- পর্যালোচনা
- অধিকার
- ঝুঁকি
- ভূমিকা
- নিয়ম
- চালান
- বিক্রয়
- বিক্রয় ও বিপণন
- একই
- জমা
- মাপযোগ্য
- স্কেল
- দাঁড়িপাল্লা
- আরোহী
- স্ক্রিপ্ট
- নির্বিঘ্ন
- নির্বিঘ্নে
- নিরাপদে
- দেখ
- স্ব সেবা
- জ্যেষ্ঠ
- আলাদা
- পৃথক
- Serverless
- স্থল
- সেবা
- সেবা
- ভজনা
- সেশন
- সেট
- সেটআপ
- শেয়ার
- শেয়ারিং
- সে
- প্রদর্শনী
- দেখিয়েছেন
- শো
- সহজ
- সহজতর করা
- একক
- So
- সফটওয়্যার
- সফটওয়্যার উন্নয়ন
- সমাধান
- সলিউশন
- মীমাংসিত
- উৎস
- সোর্স
- বিশেষজ্ঞ
- নির্দিষ্ট
- স্পীড
- স্পাইক
- এসকিউএল
- স্ট্যাক
- পর্যায়
- ইন্টার্নশিপ
- উপস্থাপনকারী
- অংশীদারদের
- শুরু
- প্রারম্ভকালে
- স্থিত
- অবিচলিত
- ধাপ
- স্টোরেজ
- দোকান
- দোকান
- শক্তিশালী
- বলকারক
- কাঠামোবদ্ধ
- বিষয়
- এমন
- সমর্থন
- সমর্থিত
- সমর্থক
- স্থগিত
- মনের উপরে স্পষ্ট ছবির ন্যায় ছাপ
- লাগে
- বাস্তব
- টীম
- দল
- প্রযুক্তি
- কারিগরী
- প্রযুক্তি
- টেলিযোগাযোগ
- পরীক্ষা
- পরীক্ষা
- চেয়ে
- যে
- সার্জারির
- ভবিষ্যৎ
- তাদের
- তাহাদিগকে
- এইগুলো
- তারা
- তৃতীয় পক্ষের
- এই
- সেগুলো
- হাজার
- তিন
- দ্বারা
- সময়
- বার
- থেকে
- একসঙ্গে
- গ্রহণ
- সরঞ্জাম
- মোট
- প্রতি
- রুপান্তর
- রুপান্তর
- রূপান্তরের
- রুপান্তরিত
- রূপান্তর
- স্বচ্ছ
- ট্রিগার
- অধীনে
- অনিশ্চিত
- আলোচ্য সময় পর্যন্ত
- আপডেট
- ব্যবহার
- ব্যবহার
- ব্যবহৃত
- ব্যবহারকারী
- ব্যবহারকারীর অভিজ্ঞতা
- ব্যবহারকারী
- ব্যবহারসমূহ
- ব্যবহার
- ব্যবহার
- যাচাই
- মূল্য
- পরিবর্তনশীল
- বৈচিত্র্য
- বিভিন্ন
- খিলান
- কল্পনা
- আয়তন
- ভলিউম
- চেয়েছিলেন
- গুদাম
- ছিল
- পর্যবেক্ষক
- উপায়..
- উপায়
- we
- ওয়েব
- ওয়েব সার্ভিস
- আমরা একটি
- ছিল
- কি
- কখন
- যে
- যখন
- হু
- ব্যাপক
- উইকিপিডিয়া
- ইচ্ছা
- সঙ্গে
- ছাড়া
- কাজ করছে
- কর্মপ্রবাহ
- কাজ
- কর্মঘন্টা
- কাজ
- কর্মশালা
- বিশ্বব্যাপী
- বছর
- বছর
- আপনি
- আপনার
- ইউটিউব
- zephyrnet