Takeaway:
แพลตฟอร์มการวิเคราะห์ Hadoop มีข้อ จำกัด ที่สำคัญบางประการเกี่ยวกับความเร็วและความซับซ้อน แต่ผู้นำอุตสาหกรรมกำลังทำงานเพื่อเปลี่ยนแปลงสิ่งนั้น
ไมค์โอลสันซีอีโอของ Cloudera กล่าวว่าแพลตฟอร์มการวิเคราะห์ Hadoop มีข้อ จำกัด ที่สำคัญบางประการเกี่ยวกับความเร็วและความซับซ้อน อย่างไรก็ตามผู้นำในอุตสาหกรรมรวมถึงผู้ที่อยู่ใน บริษัท ของเขากำลังทำงานเพื่อเปลี่ยนแปลงมั่นใจว่าเครื่องมือการวิจัยนี้จะมีการพัฒนาในรูปแบบพื้นฐานในไม่กี่ปีข้างหน้าในการประชุม Strata Conference เมื่อปีที่แล้วโอลสันขอให้ผู้ชมจินตนาการว่าถ้ามันถูกสร้างขึ้นในวันนี้ Hadoop จะได้รับการออกแบบที่แตกต่างกันโดยระบุว่าการเปลี่ยนแปลงบางอย่างสามารถเปิดเกตเวย์ใหม่เพื่อการวิจัยในสาขาต่างๆเช่นการศึกษาพลังงานและการเกษตร นักดาราศาสตร์และนักวิทยาศาสตร์อ้างการอ้างถึง Carl Sagan, Olson เน้นถึงความสำคัญของการทำลายข้อมูลระดับสูงสำหรับผู้ชมที่มากขึ้น
“ ฉันคิดว่าเราพร้อมที่จะค้นพบสิ่งสำคัญสำหรับธุรกิจและสังคม” โอลสันกล่าว
ตัวอย่างหนึ่งเขากล่าวว่าการค้นพบทางวิทยาศาสตร์เกิดขึ้นได้จากการทำงานของผู้เชี่ยวชาญทางวิทยาศาสตร์ที่ Large Hadron Collider ในสวิตเซอร์แลนด์ จากข้อมูลของ Olson เป็นการประเมินข้อมูลรายวัน 37 เทราไบต์ซึ่งนำไปสู่ความก้าวหน้าที่สำคัญเช่นการค้นพบ Higgs-Boson ในลุ่มน้ำซึ่งเปิดเผยประเด็นสำคัญของสสารและพลังงาน โอลสันกล่าวเสริมว่า Hadoop ช่วยในการทำโครงการวิจัยพื้นฐานเหล่านี้โดยการเก็บข้อมูลจำนวนมหาศาลไว้ในที่เก็บเดียว แต่มันยากที่จะโต้ตอบกับข้อมูลนั้นในแบบเรียลไทม์
การอธิบายถึงวิธีการที่ Hadoop และเทคโนโลยีที่คล้ายคลึงกันสามารถช่วยให้นักวิทยาศาสตร์ในสาขาสำคัญ ๆ เช่นการดูแลสุขภาพได้ Olson ได้ประกาศโครงการ Impala ซึ่งเป็นสิ่งที่ บริษัท ของเขาทำงานมาเป็นเวลาสองปีโดยมีการทดสอบเบต้าสองไตรมาส ลูกค้า โครงการอิมพาลากล่าวว่าโอลสันเป็นเทคโนโลยี "โอเพ่นซอร์ส 100%" พร้อมกับใบอนุญาต Apache ที่ทำงานร่วมกับ Hadoop ในฐานะ "เครื่องมือเคียวรีตามเวลาจริง" สิ่งนี้โอลสันกล่าวว่าอนุญาตให้สิ่งที่เขาเรียกว่า "ความเร็วของการสอบถามความคิด" ซึ่งผู้ใช้สามารถถามคำถามรับคำตอบและกำหนดคำถามใหม่เพื่อใช้กลุ่มข้อมูลที่สำคัญได้อย่างมีประสิทธิภาพ
"นี่เป็นวิธีใหม่ในการรับข้อมูลของคุณ" โอลสันกล่าวโดยสรุปว่าความก้าวหน้าประเภทนี้จะทำลายโอกาสเปิดเพิ่มเติมเพื่อแก้ปัญหาที่สำคัญในสหรัฐอเมริกาและต่างประเทศได้อย่างไร