Oozie Orchestration: Workflows, Coordinators, and Data Pipelines

การจัดการการพึ่งพาข้อมูลที่ซับซ้อนในสภาพแวดล้อมแบบกระจายต้องใช้เอนจิ้นการจัดลำดับงานที่มีประสิทธิภาพเพื่อให้แน่ใจว่างานจะทำงานตามลำดับที่ถูกต้องในเวลาที่เหมาะสม หลักสูตรนี้จะมอบเส้นทางที่มีโครงสร้างเพื่อทำความเข้าใจว่า Oozie ทำให้งานข้อมูลเป็นอัตโนมัติได้อย่างไร โดยเปลี่ยนสคริปต์ที่ต้องทำด้วยตนเองให้เป็นไปป์ไลน์ที่มีความยืดหยุ่นและกำหนดเวลาไว้ คุณจะได้เรียนรู้ตั้งแต่แนวคิดพื้นฐานไปจนถึงตรรกะการจัดลำดับงานขั้นสูง เพื่อให้ได้รับทักษะในการจัดการการไหลของข้อมูลขนาดใหญ่ได้อย่างแม่นยำ เมื่อสิ้นสุดหลักสูตรนี้ คุณจะสามารถออกแบบ ปรับใช้ และแก้ไขปัญหาเวิร์กโฟลว์อัตโนมัติที่ตอบสนองต่อทั้งกำหนดการตามเวลาและความพร้อมใช้งานของข้อมูลได้ สิ่งที่คุณจะได้เรียนรู้: - ทำความเข้าใจแนวคิดหลักของ Oozie รวมถึงโหนดแอ็คชัน โหนดควบคุม และการกำหนดค่าทั่วโลก - สร้างเวิร์กโฟลว์ที่ใช้ XML เพื่อจัดลำดับงาน MapReduce, Shell และ Java อย่างมีประสิทธิภาพ - กำหนดค่าผู้ประสานงานเพื่อเรียกใช้งานตามช่วงเวลาที่ระบุหรือการมาถึงของข้อมูล - จัดการไปป์ไลน์ข้อมูลระดับสูงโดยใช้บันเดิลเพื่อประสานงานกระบวนการแบทช์หลายรายการ - นำแนวทางปฏิบัติที่ดีที่สุดที่ทันสมัยมาใช้ในการดีบักการกำหนดค่า XML และการจัดการการลองใหม่ของงาน - ใช้โปรโตคอลความปลอดภัยและตรวจสอบสุขภาพของงานภายในสภาพแวดล้อมการผลิต หลักสูตรเริ่มต้นด้วยคำศัพท์ที่จำเป็นและตรรกะโครงสร้างของเฟรมเวิร์ก Oozie จากนั้นคุณจะดำเนินการผ่านคำอธิบายโดยละเอียดเกี่ยวกับการออกแบบเวิร์กโฟลว์ ทริกเกอร์ของผู้ประสานงาน และการจัดการบันเดิล โดยได้รับการสนับสนุนจากตัวอย่างโค้ดจริงและรูปแบบการกำหนดค่า หลักสูตรนี้ออกแบบมาสำหรับผู้เริ่มต้นที่มีความเข้าใจพื้นฐานเกี่ยวกับการประมวลผลข้อมูลและต้องการเชี่ยวชาญศิลปะของการจัดลำดับงาน ไม่จำเป็นต้องมีประสบการณ์ Oozie มาก่อน เริ่มสร้างระบบจัดลำดับข้อมูลที่เชื่อถือได้และเป็นอัตโนมัติได้แล้ววันนี้