การให้คะแนนโดยบรรณาธิการ: การให้คะแนนของผู้ใช้:[รวม: 0 เฉลี่ย: 0] @media(min-width: 500px) { } @media(min-width: 800px) { }
Shap-E โดย OpenAI เป็นโมเดลการสร้างข้อความเป็นรูปภาพฟรี แต่แทนที่จะสร้างรูปภาพธรรมดา มันสามารถสร้างวัตถุ 3 มิติ นอกจากนี้ยังสามารถแปลงภาพที่มีอยู่ให้เป็น 3 มิติได้อีกด้วย เป็นโอเพ่นซอร์สและคุณสามารถเรียกใช้ในเครื่องได้หากต้องการ นอกจากนี้ยังมีเครื่องมือนี้ในเวอร์ชันโฮสต์ออนไลน์ซึ่งฉันจะกล่าวถึงในภายหลังในโพสต์นี้
ตอนนี้ AI ก้าวไปไกลแล้ว มีการเปิดตัวเครื่องมือและผลิตภัณฑ์ที่น่าสนใจทุกวัน ดังนั้นชุมชนโอเพ่นซอร์สจึงไม่ล้าหลัง หลังจาก FreedomGPT และ Alpaca ตอนนี้เรามีตัวแปลงข้อความโอเพ่นซอร์สเป็นวัตถุ 3 มิติที่โดดเด่นโดย OpenAI Shap-E หลังจากรับข้อความจากคุณ สร้างไฟล์ GLB ซึ่งเป็นรูปแบบไฟล์ 3 มิติเพื่อบันทึกและดูรูปร่าง 3 มิติ
ทั้งสองเครื่องมือ; ข้อความเป็น 3D และรูปภาพเป็น 3D มีอยู่ใน Shap-E รุ่นเดียวกัน มันยังนำเสนอโน้ตบุ๊ก Jupyter ในราคาเดียวกันกับที่คุณสามารถเรียกใช้ใน Jupyter Lab หรือ Google Colab ได้อย่างง่ายดาย นอกจากนี้ หากคุณต้องการสำรวจโค้ด คุณมีอิสระที่จะทำเช่นนั้น
การใช้ Shap-E โดย OpenAI เพื่อแปลงข้อความเป็น 3D Objetcs:
อย่างที่ฉันได้กล่าวไปแล้ว จากนั้นคุณสามารถเรียกใช้ Shap-E ในเครื่องได้ แต่นั่นจะทำให้คุณต้องมีพีซีระดับไฮเอนด์ที่มีความต้องการ GPU และ CPU สูง หากคุณไม่ได้หรูหราขนาดนั้น คุณก็แค่ลองใช้โมเดล Hugging Face ที่นี่.
Hugging Face เป็นแพลตฟอร์มฟรีเมียมที่ผู้คนสามารถใช้โมเดล AI ของตนได้ อินเทอร์เฟซโฮสต์ของ Shap-E มีลักษณะดังนี้
ตอนนี้ คุณเพียงป้อนข้อความเพื่อสร้างวัตถุ 3 มิติ ทำตามคำแนะนำให้สั้นและเรียบง่าย หลังจากนั้น ให้เริ่มเครื่องมือแล้วรอสักครู่
ไม่กี่วินาทีต่อมา คุณจะเห็นว่ามันจะสร้างวัตถุ 3 มิติให้คุณ คุณสามารถโต้ตอบกับการออกแบบวัตถุ 3 มิติที่สร้างขึ้นสำหรับคุณได้อย่างเต็มที่ คุณสามารถซูมและดูได้จากทุกมุม
หากต้องการบันทึกลงในพีซีของคุณ คุณสามารถใช้ปุ่มดาวน์โหลดที่มุมขวาบน GLB จะดาวน์โหลด จากนั้นคุณสามารถใช้การแก้ไขเพิ่มเติมในซอฟต์แวร์แก้ไข 3 มิติที่รองรับรูปแบบ GLB ได้
มีคำแนะนำสำเร็จรูปที่คุณสามารถใช้เพื่อเรนเดอร์ 3 มิติอย่างรวดเร็ว สิ่งเหล่านี้เป็นเพียงการแสดงให้คุณเห็นว่ามันสามารถทำอะไรได้บ้าง
การใช้ Shap-E โดย OpenAI เพื่อแปลงรูปภาพเป็น 3 มิติ:
อีกสิ่งที่คุณสามารถทำได้คือแปลง ภาพวัตถุ 2 มิติให้เป็น 3 มิติ Shap-E ส่วนนี้ค่อนข้างหยาบและไม่ได้ผลลัพธ์ที่น่าพอใจมากนัก แต่ถึงกระนั้น คุณยังสามารถลองใช้ได้ และอาจแก้ไขไฟล์วัตถุ 3 มิติในภายหลังเพื่อแก้ไขสีและความผิดปกติอื่นๆ
สลับไปที่แท็บรูปภาพเป็น 3 มิติ แล้วอัปโหลดรูปภาพที่นั่น ตรวจสอบว่ารูปภาพที่คุณจะอัปโหลดมีพื้นหลังโปร่งใสและมองเห็นวัตถุ 2 มิติได้ชัดเจน
คลิกเรียกใช้ จากนั้นรอผลลัพธ์ หลังจากนั้นไม่กี่วินาที คุณจะเห็นว่ามันจะสร้างภาพเวอร์ชัน 3 มิติที่คุณส่งมา เอาต์พุตจะเหมือนกับด้านบน คุณสามารถดูและตรวจสอบวัตถุ 3 มิติและดาวน์โหลดผลลัพธ์ในไฟล์ GLB
ด้วยวิธีนี้ คุณสามารถใช้เครื่องมือ image to 3D ของ Shap-E เพื่อสร้างวัตถุ 3 มิติจากข้อความและรูปภาพ ขณะนี้อยู่ในระหว่างการพัฒนา และฉันหวังว่าจะได้รับการปรับปรุงในการอัปเดตในภายหลัง
ข้อคิดปิดท้าย:
Shap-E นำเสนอแนวทางใหม่ทั้งหมดในการสร้างภาพ AI. วัตถุ 3 มิติที่สร้างขึ้นสามารถใช้เพื่อวัตถุประสงค์ต่างๆ ฉันชอบแนวคิดโดยรวม และมันก็ใช้งานได้ดีเช่นกันสำหรับการสร้างอ็อบเจกต์ง่ายๆ แต่ก็ยังมีช่องว่างสำหรับการปรับปรุง และฉันหวังว่านักพัฒนาซอฟต์แวร์และผู้ดูแลจะปรับแต่งโมเดลเพื่อสร้างผลลัพธ์ที่แม่นยำยิ่งขึ้น ซึ่งต้องมีการแก้ไขหลังขั้นต่ำ
