এই নির্দেশিকা ব্যাখ্যা করবে কিভাবে S3 বাকেট থেকে ডেটা আনতে ক্রলার তৈরি করতে হয়।
S3 বালতি থেকে ডেটা আনার জন্য কীভাবে ক্রলার তৈরি করবেন?
AWS-এ একটি ক্রলার তৈরি করতে, “ AWS আঠালো আমাজন ড্যাশবোর্ড থেকে পরিষেবা:
ক্লিক করুন ' ডাটাবেস একটি ডাটাবেস তৈরি করতে ডেটা ক্যাটালগ বিভাগ থেকে ” বোতাম:
ক্লিক করুন ' ডাটাবেস যোগ করুন ” কনফিগারেশন শুরু করতে বোতাম:
ডাটাবেসের নাম লিখুন এবং 'এ ক্লিক করার আগে সবকিছু ঐচ্ছিক বলে ছেড়ে দিন। ডাটাবেস তৈরি করুন 'বোতাম:
ডাটাবেস সফলভাবে তৈরি করা হয়েছে:
এর পরে, কেবল 'এ যান' ক্রলার বাম প্যানেল থেকে এটি ক্লিক করে পৃষ্ঠা:
ক্লিক করুন ' ক্রলার তৈরি করুন 'বোতাম:
ক্রলারের নাম টাইপ করুন এবং 'এ ক্লিক করুন পরবর্তী 'বোতাম:
ক্লিক করুন ' একটি তথ্য উৎস যোগ করুন তথ্যের উৎস নির্বাচন করতে ” বোতাম:
ডাটা যেখানে সংরক্ষিত আছে তা পরীক্ষা করতে, S3 পরিষেবাতে যান:
S3 বালতিতে যান যেখানে ডেটা আপলোড করা হয়। ব্যবহারকারী পারে সৃষ্টি একটি বালতি এবং আপলোড AWS S3 ড্যাশবোর্ড থেকে এটির ডেটা:
ক্লিক করুন ' S3 ব্রাউজ করুন ডেটার পথ বেছে নিতে বোতাম:
ডেটা ধারণকারী ফোল্ডারটি নির্বাচন করুন, তারপরে ক্লিক করুন ' পছন্দ করা 'বোতাম:
S3 পাথ নির্বাচন করা হয়েছে, এখন ক্লিক করুন “ একটি S3 ডেটা উৎস যোগ করুন 'বোতাম:
একবার ডেটা উত্স যোগ করা হলে, কেবল 'এ ক্লিক করুন পরবর্তী 'বোতাম:
IAM ভূমিকা যোগ করুন এবং তারপরে ক্লিক করুন “ পরবর্তী 'বোতাম:
আগে তৈরি করা টার্গেট ডাটাবেস লিখুন এবং তারপর টেবিলের জন্য নাম টাইপ করুন:
ক্রলারের জন্য চাহিদার সময়সূচী নির্বাচন করুন এবং 'এ ক্লিক করুন পরবর্তী 'বোতাম:
ক্রলার পর্যালোচনা করুন এবং 'এ ক্লিক করুন ক্রলার তৈরি করুন 'বোতাম:
ক্রলারটি সফলভাবে তৈরি করা হয়েছে, ক্লিক করুন “ চালান এটি নির্বাচন করার পরে বোতাম:
ক্রলার চালানোর জন্য এটি কয়েক মুহূর্ত লাগবে এবং এটি ডেটা আনবে এবং ডেটা সংরক্ষণ করার জন্য একটি টেবিল তৈরি করবে:
প্রবেশ করুন ' টেবিল আঠালো ড্যাশবোর্ড থেকে পৃষ্ঠা:
তার নামের উপর ক্লিক করে টেবিল নির্বাচন করুন:
আনা তথ্যের মেটাডেটা সহ গল্পের বিবরণ প্রদর্শিত হয়েছে:
পৃষ্ঠাটি নীচে স্ক্রোল করুন এবং ডেটা ধারণকারী টেবিলটি দেখতে বিভাগটি নির্বাচন করুন:
S3 বালতি থেকে ডেটা আনার জন্য এটি একটি ক্রলার তৈরি করা।
উপসংহার
S3 বাকেট থেকে ডেটা আনার জন্য একটি ক্রলার তৈরি করতে, AWS Glue-এ একটি ডাটাবেস তৈরি করুন যেখানে ক্রল করা ডেটা সংরক্ষণ করা হবে। ডেটার উৎস (S3 বাকেট) এবং টার্গেট ডাটাবেস প্রদান করে আঠালো ড্যাশবোর্ড থেকে ক্রলার কনফিগার করুন। ক্রলারটি চালান এবং S3 বালতি থেকে ডেটাবেস টেবিলে ডেটা আনুন কারণ এই নির্দেশিকাটি পুঙ্খানুপুঙ্খভাবে ব্যাখ্যা করেছে৷