ArrowMetal ประมวลผล Apache Arrow บน Apple Silicon GPU ได้เร็วขึ้น 3.8 เท่า

ArrowMetal เป็นเครื่องมือประมวลผลข้อมูลแบบ columnar บน GPU Apple Silicon ผ่าน Metal ช่วยให้ทำงานกับ Apache Arrow ได้โดยไม่ต้องคัดลอกข้อมูล ทำให้การจัดการข้อมูลขนาดใหญ่เร็วขึ้น 3.8 เท่าเมื่อเทียบกับ pyarrow Acero รองรับการคำนวณ reductions, joins, sorts และ group-bys บน GPU โดยไม่ต้องย้ายข้อมูลไป CPU สามารถเชื่อมต่อกับ Polars, pyarrow และ DuckDB ได้โดยตรง ใช้ C ABI สำหรับภาษาอื่นๆ รองรับ zero-copy ทั้งนำเข้า-ส่งออก คำนวณตาม IEEE-754 แม้ Apple GPU จะไม่มี hardware support บางส่วน รองรับ lazy engine และอ่านไฟล์ Parquet บน GPU ได้โดยตรง

สรุปด้วย MAF Local AI · เนื้อหาต้นฉบับเป็นของแหล่งข่าว