วิศวกรข้อมูลระดับสูง - AWS Data Lake & Pipeline Architecture

Toptal | Anywhere in the World

อยู่ไกลมาก เต็มเวลา Software Development
เครื่องแปลสำหรับคุณ (English → Thai) แสดงต้นฉบับ
คำอธิบาย

สำนักงานใหญ่:

รายละเอียด เรากำลังมองหาวิศวกรข้อมูลเพื่อสนับสนุนการพัฒนาแพลตฟอร์มข้อมูลเชิงลึก บทบาทนี้เน้นการสร้างโมเดลข้อมูล, บริการข้อมูล, ท่อข้อมูล, และโครงสร้างพื้นฐานข้อมูลบนคลาวด์สำหรับรายงาน, การวิเคราะห์, และวิทยาศาสตร์ข้อมูล ข้อมูลทั่วไป วิศวกรข้อมูลจะสนับสนุนการปฏิบัติการที่เกี่ยวข้องกับข้อมูลในทีมแพลตฟอร์มข้อมูลเชิงลึกที่กว้างขึ้น งานนี้รวมถึงการสร้างและใช้บริการเว็บ, การรวมเทคโนโลยีการค้นหา, การสนับสนุนการปรับแต่งและแนะนำเครื่องจักร, และการประยุกต์ใช้วิธีการวิศวกรรมข้อมูลที่ดีที่สุดในแพลตฟอร์ม บทบาทนี้ครอบคลุมสถาปัตยกรรมข้อมูลบนคลาวด์, ประสิทธิภาพฐานข้อมูล, การอัตโนมัติท่อ, และการสนับสนุนนักวิทยาศาสตร์ข้อมูล, นักวิจัย, และหน่วยธุรกิจภายใน สภาพแวดล้อมที่รวมถึงโครงสร้างพื้นฐานที่ใช้ AWS และส่วนผสมของแหล่งข้อมูลที่มีโครงสร้างและไม่มีโครงสร้าง งานและผลลัพธ์ - ร่วมมือในการออกแบบสถาปัตยกรรมและนำไปใช้ของการแก้ไขปัญหาข้อมูลที่มีความสามารถสูง, ปรับขนาดได้, และปรับปรุงประสิทธิภาพ - สร้างโมเดลข้อมูลจากจุดเริ่มต้นโดยใช้พื้นฐานของ SQL ที่แข็งแกร่ง - เขียนและปรับปรุงประสิทธิภาพคำสั่ง SQL ในแอพพลิเคชัน - รักษาประสิทธิภาพ, ความปลอดภัย, และความสามารถในการใช้งานของฐานข้อมูล - เตรียมเอกสารและรายละเอียดทางเทคนิค - จัดการขั้นตอนของฐานข้อมูลเช่นการปรับระดับ, การสำรองข้อมูล, การฟื้นฟู, และการย้าย - สร้างโปรไฟล์การใช้งานทรัพยากรเซิร์ฟเวอร์และปรับแต่งให้เหมาะสมตามความจำเป็น - ออกแบบ, สร้าง, และอัตโนมัติการ

- ร่วมมือกับหน่วยงานธุรกิจและทีมวิทยาศาสตร์ข้อมูลเกี่ยวกับการเข้าถึงข้อมูล, การเปลี่ยนรูปแบบ, การประมวลผลและความต้องการรายงาน - สนับสนุนการปฏิบัติงาน, ปัญหาทางเทคนิคและการฝึกอบรมที่เกี่ยวข้องกับระบบนิเวศของทะเลสาบข้อมูล - ทำงานร่วมกับทีมเพื่อจัดการทรัพยากร AWS, รวมถึง EMR และ ECS clusters - สนับสนุนการจัดหา, ติดตาม, ปรับแต่งและรักษาเครื่องมือ AWS - ประเมินและส่งเสริมเทคโนโลยีใหม่ของคลาวด์ที่ปรับปรุงความสามารถและลดต้นทุนการดำเนินการ - สนับสนุนความพยายามในการอัตโนมัติโดยใช้ Infrastructure as Code กับ Terraform และ CI / CD เช่น Jenkins - ทำงานร่วมกับทีมเพื่อนำไปใช้ในการบริหารข้อมูล, การควบคุมการเข้าถึงและลดความเสี่ยงด้านความปลอดภัย ประสบการณ์ที่ต้องการ - 7-9ปีประสบการณ์ในการออกแบบและพัฒนาโมเดลข้อมูลบนคลาวด์, ETL Pipelines และโครงสร้างพื้นฐาน - ประสบการณ์ในการทำงานกับข้อมูลที่มีโครงสร้างและไม่มีโครงสร้าง - ความชำนาญด้าน SQL ทั่วฐานข้อมูลที่นิยม - ประสบการณ์ในการปรับแต่งเครื่องมือฐานข้อมูลและจัดทำคลัสเตอร์ - ความสามารถในการวางแผนความต้องการทรัพยากรจากรายละเอียดระดับสูง - ความสามารถในการแก้ไขปัญหาของฐานข้อมูลที่พบบ่อย - ประสบการณ์กับ Spark, Glue, EMR และ Apache Kafka หรือ AWS Kinesis - ประสบการณ์กับเครื่องมือควบคุมเวอร์ชั่นเช่น Git หรือ Subversion - ประสบการณ์ในการใช้ระบบสร้างอัตโนมัติและ CI / CD workflow - ประสบการณ์ในการเขียนโปรแกรมใน Java, Python และ Scala - ความรู้เกี่ยวกับโครงสร้างข้อมูลและอัลกอริทึม

ความรู้เกี่ยวกับฐานข้อมูลแบบ Relational, NoSQL, Graph, Document, Key-Value และ Time-Series ความรู้เกี่ยวกับการออกแบบและจัดการโมเดลข้อมูลที่ปรับขนาดได้ ความรู้เกี่ยวกับการจัดตั้งโมเดล ML ความรู้เกี่ยวกับแพลตฟอร์ม AWS Cloud ความรู้เกี่ยวกับ TDD และ BDD ความสนใจอย่างมากในการพัฒนาซอฟต์แวร์ ความสามารถในการพัฒนา เฟรมเวิร์ก และเทคโนโลยี ความสำคัญของการมีส่วนร่วม - โอกาสในการทำงานในด้านการออกแบบโมเดลข้อมูล บริการข้อมูล และวิทยาศาสตร์ข้อมูลภายในแพลตฟอร์ม Data Intelligence ที่กว้างขึ้น - ได้รับสัมผัสกับสภาพแวดล้อมทางเทคนิคที่หลากหลายที่รวมถึง AWS, ETL Pipelines, ฐานข้อมูล, เทคโนโลยีการค้นหา และระบบแนะนำ - ความร่วมมือโดยตรงกับทีมวิทยาศาสตร์ข้อมูลและผู้มีส่วนได้ส่วนเสียภายในเกี่ยวกับการรายงาน การเปลี่ยนแปลง และความสามารถของแพลตฟอร์ม

ขอบคุณมากค่ะ

รายละเอียดงาน

ประสบการณ์: 0 ปี

เขียนเมื่อ: 1 month, 2 weeks ก่อนหน้านี้

จำนวนครั้งที่มองเห็น: 866

ปรับใช้เมื่อ@ action: inmenu We Work Remotely

ข้อมูลจาก We Work Remotely · เปิดการโพสต์เดิม

ดาวน์โหลดแอพพลิเคชันที่ปรับแต่งไว้สำหรับบทบาทนี้

ใส่ชีวประวัติลงไป และเราจะเขียนจดหมาย ขอรับงานที่นี่ แบบฟรีๆ และพร้อมใช้งาน ตั้งแต่ตอนที่บัญชีของคุณถูกสร้างขึ้น

PDF, Word หรือ Text เราจะสร้างบัญชีฟรีของคุณในหน้าจอต่อไป ไม่มีบัตร

จ้างคนมาทำหน้าที่แบบนี้เหรอ

ประกาศงานของคุณบน WFHJ และเข้าถึงผู้สมัครที่เหมาะสม ไม่มีค่าใช้จ่าย

ประกาศงาน - ฟรี
Feedback