S3 কি HDFS এর উপর ভিত্তি করে?
S3 কি HDFS এর উপর ভিত্তি করে?

ভিডিও: S3 কি HDFS এর উপর ভিত্তি করে?

ভিডিও: S3 কি HDFS এর উপর ভিত্তি করে?
ভিডিও: কোন ফাইল সিস্টেম HDFS বা Amazon S3 ব্যবহার করতে হবে 2024, এপ্রিল
Anonim

S3 আসলে ক্লাউডে একটি অসীম স্টোরেজ কিন্তু এইচডিএফএস এটি না. এইচডিএফএস ফিজিক্যাল মেশিনে হোস্ট করা হয়, তাই আপনি সেখানে যেকোনো প্রোগ্রাম চালাতে পারেন। আপনি কিছু কার্যকর করতে পারবেন না S3 এটি শুধুমাত্র অবজেক্ট স্টোর হিসাবে এবং FS নয়।

তাহলে, s3 কি একটি বিতরণকৃত ফাইল সিস্টেম?

S3 একটি নয় বিতরণ করা ফাইল সিস্টেম . এটি একটি বাইনারি অবজেক্ট স্টোর যা কী-মানের জোড়ায় ডেটা সঞ্চয় করে। এটি মূলত এক ধরনের NoSQL ডাটাবেস। প্রতিটি বালতি হল একটি নতুন "ডাটাবেস", যার কীগুলি হল আপনার "ফোল্ডার পাথ" এবং মানগুলি হল বাইনারি অবজেক্ট ( নথি পত্র ).

কেউ জিজ্ঞাসা করতে পারে, AWS কি Hadoop এর উপর ভিত্তি করে? হাডুপ একটি কাঠামো যা একাধিক কম্পিউটার জুড়ে বৃহৎ ডেটা সেট প্রক্রিয়াকরণে সহায়তা করে। এতে মানচিত্র/কমাও (সমান্তরাল প্রক্রিয়াকরণ) এবং এইচডিএফএস (বিতরিত ফাইল সিস্টেম)। এডব্লিউএস একটি তথ্য গুদাম হয় নির্মিত মূলত ParaAccel দ্বারা বিকশিত একটি মালিকানাধীন প্রযুক্তির উপরে।

এর পাশাপাশি, আমি কীভাবে s3 থেকে HDFS-এ ফাইল স্থানান্তর করব?

উত্তর. সরাসরি নেই S3 থেকে HDFS এ ফাইল কপি করার উপায় স্থানীয় মাধ্যমে না গিয়ে নথি পত্র . যাইহোক, আপনি নেটিভ কল করার জন্য একটি স্ট্যান্ডার্ড জব-এ tSystem কম্পোনেন্ট ব্যবহার করতে পারেন হাডুপ কমান্ড যা আপনি সাধারণত ব্যবহার করেন ফাইল কপি করুন , উদাহরণ স্বরূপ, s3 -dist-cp.

S3 ডাটাবেস কি?

আমাজন S3 বা Amazon Simple Storage Service হল Amazon Web Services (AWS) দ্বারা অফার করা একটি পরিষেবা যা একটি ওয়েব পরিষেবা ইন্টারফেসের মাধ্যমে অবজেক্ট স্টোরেজ প্রদান করে। আমাজন S3 Amazon.com তার গ্লোবাল ই-কমার্স নেটওয়ার্ক চালানোর জন্য যে স্কেলযোগ্য স্টোরেজ অবকাঠামো ব্যবহার করে।

প্রস্তাবিত: