ความแข็งแรงของ Hadoop

Apache Hadoop เป็นซอฟต์แวร์โอเพนซอร์สจาก JAVA โดยทั่วไปเฟรมเวิร์คใช้เพื่อเรียกใช้ฮาร์ดแวร์ (เซิร์ฟเวอร์) แบบคลัสเตอร์ที่มีขนาดใหญ่ มีการออกแบบมาเพื่อขยายจากเซิร์ฟเวอร์หนึ่งเครื่องไปยังเครื่องนับพันเครื่องซึ่งส่งผลให้เกิดความผิดพลาดในระดับสูง การสร้างส่วนบนของฮาร์ดแวร์ขึ้นอยู่กับความสามารถของซอฟต์แวร์ในการรับรู้และจัดการกับความล้มเหลวของตัวเอง

ลัทธิการสร้าง Hadoop โดย Doug Cutting และ Michael J. Cafarella ดั๊กดั๊กของ Yahoo พบว่าเขาสามารถเปลี่ยนชื่อลูกช้างของเด็กชาย "Hadoop" ได้ แต่เดิมสนับสนุนการจัดจำหน่าย Nutch search engine โครงการเพื่อจัดระเบียบดัชนีจำนวนมาก

ในฐานะคนธรรมดา Hadoop เป็นวิธีที่แอพพลิเคชันสามารถจัดการกับข้อมูลจำนวนมากพร้อมกับเซิร์ฟเวอร์จำนวนมาก ประการแรก Google ได้สร้าง Map Reduction สำหรับการสร้างดัชนีข้อมูลไว้สูงแล้วตามด้วย Yahoo! เขาสร้าง Hadoop เพื่อใช้งาน Map Reduce Function ของตัวเอง ลดแผนที่ : Task Tracker-Framework ที่เข้าใจและมอบหมายงานให้กับโหนดของคลัสเตอร์ แอ็พพลิเคชันมีส่วนแบ่งการทำงานที่เล็กลงและแต่ละงานสามารถกำหนดให้กับกลุ่มต่างๆของคลัสเตอร์ได้ มันถูกออกแบบมาเพื่อจัดการกับข้อผิดพลาดโดยอัตโนมัติตามกรอบ

HDFS – ระบบไฟล์แบบกระจาย Hadoop นี่คือระบบไฟล์ขนาดใหญ่ที่ครอบคลุมโหนดทั้งหมดในกลุ่ม Hadoop สำหรับจัดเก็บข้อมูล เชื่อมต่อระบบไฟล์กับโหนดภายในจำนวนมากเพื่อแปลงไฟล์เป็นระบบไฟล์ขนาดใหญ่ HDFS อนุมานได้ว่าโหนดจะล้มเหลวดังนั้นความน่าเชื่อถือจะผ่านโหนดหลาย ๆ

Big Data พูดถึงยุคไอทีที่ทันสมัย ​​Hadoop แสดงวิธีการใช้ข้อมูลขนาดใหญ่ ทำให้การวิเคราะห์ง่ายขึ้นมากเมื่อพิจารณาจากข้อมูลที่มีอยู่ ในเฟรม Hadoop ผู้ใช้รายใหญ่มีความภาคภูมิใจอย่างยิ่งเช่น IBM, Google, Yahoo !, Facebook, Amazon, Foursquare, eBay เป็นต้น Infact Facebook อ้างว่ากลุ่ม Hadoop Cluster ที่ใหญ่ที่สุดคือ 21PB วัตถุประสงค์เชิงพาณิชย์ของ Hadoop ได้แก่ การวิเคราะห์ข้อมูลการรวบรวมข้อมูลเว็บการประมวลผลข้อความและการประมวลผลภาพ

ข้อมูลโลกส่วนใหญ่ไม่ได้ใช้และธุรกิจส่วนใหญ่ไม่ได้พยายามที่จะใช้ข้อมูลนี้ ลองจินตนาการดูว่าคุณจะสามารถเก็บข้อมูลทั้งหมดที่สร้างโดยธุรกิจของคุณได้หรือไม่และหากมีวิธีวิเคราะห์ Hadoop นำพลังนี้ไปใช้กับองค์กร

Source by Aditi Tiwari

Leave a Reply

Your email address will not be published. Required fields are marked *