অ্যাপাচি কাফকা থেকে ডেটা নিবিষ্ট করুন

উত্স নোড: 747576

এটি অংশ শেখার পথ: IBM স্ট্রিম দিয়ে শুরু করুন.

সারাংশ

এই ডেভেলপার কোড প্যাটার্নে, আমরা আপনাকে Apache Kafka দ্বারা চালিত একটি স্ট্রিমিং অ্যাপ্লিকেশন তৈরি করার মূল বিষয়গুলি নিয়ে চলেছি, রিয়েল-টাইম ডেটা পাইপলাইন এবং স্ট্রিমিং অ্যাপ তৈরির জন্য ব্যবহৃত সবচেয়ে জনপ্রিয় ওপেন সোর্স বিতরণকৃত ইভেন্ট-স্ট্রিমিং প্ল্যাটফর্মগুলির মধ্যে একটি। অ্যাপ্লিকেশনটি ডেটার জন্য IBM Cloud Pak®-এ IBM স্ট্রিম ব্যবহার করে তৈরি করা হবে।

বিবরণ

এই প্যাটার্নে, আমরা আপনাকে Apache Kafka দ্বারা চালিত একটি স্ট্রিমিং অ্যাপ্লিকেশন তৈরি করার মূল বিষয়গুলি নিয়ে চলেছি। আমাদের অ্যাপটি ডেটার জন্য IBM Cloud Pak-এ IBM স্ট্রিম ব্যবহার করে তৈরি করা হবে। IBM স্ট্রীমস একটি বিল্ট-ইন IDE (স্ট্রিম ফ্লোস) প্রদান করে যা আপনাকে দৃশ্যত একটি স্ট্রিমিং অ্যাপ তৈরি করতে দেয়। ডেটা প্ল্যাটফর্মের জন্য আইবিএম ক্লাউড পাক অতিরিক্ত সহায়তা প্রদান করে, যেমন একাধিক ডেটা উত্সের সাথে একীকরণ, অন্তর্নির্মিত বিশ্লেষণ, জুপিটার নোটবুক এবং মেশিন লার্নিং।

আমাদের Apache Kafka পরিষেবার জন্য, আমরা IBM ক্লাউডে IBM ইভেন্ট স্ট্রীম ব্যবহার করব, যা কাফকা প্ল্যাটফর্মে নির্মিত একটি উচ্চ-থ্রুপুট বার্তা বাস। নিম্নলিখিত উদাহরণগুলিতে, আমরা এটিকে একটি উত্স এবং ক্লিকস্ট্রিম ডেটার লক্ষ্য হিসাবে দেখাব — ব্যবহারকারীর ক্লিকগুলি থেকে নেওয়া ডেটা যখন তারা অনলাইন শপিং ওয়েবসাইটগুলি ব্রাউজ করে।

ফ্লো

flow

  1. ব্যবহারকারী আইবিএম স্ট্রিমগুলিতে স্ট্রিমিং অ্যাপ তৈরি করে।
  2. স্ট্রিমিং অ্যাপ বার্তা পাঠাতে/প্রাপ্তির জন্য IBM ইভেন্ট স্ট্রীমের মাধ্যমে কাফকা পরিষেবা ব্যবহার করে।
  3. জুপিটার নোটবুকটি আইবিএম স্ট্রিম অ্যাপ থেকে তৈরি করা হয়েছে।
  4. ব্যবহারকারী জুপিটার নোটবুকে স্ট্রিমিং অ্যাপ চালায়।
  5. জুপিটার নোটবুক আইবিএম ইভেন্ট স্ট্রীমের মাধ্যমে বার্তা পাঠাতে/গ্রহণ করতে কাফকা পরিষেবা অ্যাক্সেস করে।

নির্দেশনা

শুরু করতে প্রস্তুত? দ্য README পদক্ষেপগুলি ব্যাখ্যা করে:

  1. রেপো ক্লোন করুন
  2. IBM ক্লাউডে প্রভিসন ইভেন্ট স্ট্রীম
  3. নমুনা কাফকা কনসোল পাইথন অ্যাপ তৈরি করুন
  4. ডেটার জন্য ক্লাউড পাকে আইবিএম স্ট্রিম পরিষেবা যোগ করুন
  5. ডেটার জন্য Cloud Pak-এ একটি নতুন প্রকল্প তৈরি করুন
  6. ডেটার জন্য Cloud Pak-এ একটি স্ট্রিম ফ্লো তৈরি করুন
  7. উৎস হিসাবে কাফকার সাথে একটি স্ট্রিম ফ্লো তৈরি করুন
  8. একটি নোটবুক তৈরি করতে স্ট্রিম ফ্লো বিকল্প ব্যবহার করুন
  9. জেনারেট করা স্ট্রিম ফ্লো নোটবুক চালান

এই প্যাটার্ন অংশ শেখার পথ: IBM স্ট্রিম দিয়ে শুরু করুন. সিরিজটি চালিয়ে যেতে এবং IBM স্ট্রীম সম্পর্কে আরও জানতে, শিরোনামের একটি কোড প্যাটার্ন দেখুন একটি Python API ব্যবহার করে একটি স্ট্রিমিং অ্যাপ তৈরি করুন.

সূত্র: https://developer.ibm.com/patterns/add-event-streams-and-a-db-in-python-to-clickstream/

সময় স্ট্যাম্প:

থেকে আরো আইবিএম বিকাশকারী

ওয়াটসন স্টুডিও লোকাল ব্যবহার করে হর্টনওয়ার্কস ডেটা প্ল্যাটফর্মে একটি স্প্যাম ফিল্টার মডেল তৈরি করুন, প্রশিক্ষণ দিন এবং স্থাপন করুন

উত্স নোড: 1849288
সময় স্ট্যাম্প: অক্টোবর 29, 2018

একটি ওয়েব অ্যাপ তৈরি করুন যা মেশিন লার্নিং এক্সচেঞ্জে হোস্ট করা মডেল অ্যাসেট এক্সচেঞ্জ থেকে একটি মডেল ব্যবহার করে যোগব্যায়ামকে চিনতে পারে

উত্স নোড: 1573049
সময় স্ট্যাম্প: অক্টোবর 2, 2019