จะดูภาพหน้าจอหรือรูปภาพในสภาพแวดล้อม Agent ได้อย่างไร?
ให้เครื่องมืออ่านภาพจริง และแยกปัญหาตัวอย่างออกจากปัญหาการวิเคราะห์
รูปภาพต้องใช้ความสามารถดูภาพ
เครื่องมือไฟล์ของ Agent แยกการอ่านข้อความกับดูบิตแมป ภาพหน้าจอและภาพอื่นควรใช้ขั้นตอนดูภาพ แทนการอ่านไฟล์ไบนารีเป็นข้อความ จะวิเคราะห์ได้หรือไม่ยังขึ้นอยู่กับการรองรับของโมเดลและสภาพแวดล้อมปัจจุบัน
การให้ Agent อธิบายเนื้อหาในภาพที่ยืนยันได้ช่วยตรวจว่าได้รับภาพจริงหรือไม่
วิธีถามให้ได้ผล
ระบุตำแหน่งภาพและบริเวณที่สนใจ เช่น สถานะปุ่ม ข้อความข้อผิดพลาด หรือความต่างของสองภาพหน้าจอ หากต้องการตรวจเอง คุณขอไฟล์แนบที่ดาวน์โหลดได้ด้วย
เมื่อเปรียบเทียบสองภาพ ให้ระบุลำดับ เงื่อนไขของหน้า และความต่างที่สนใจ ให้เอเจนต์อธิบายการเปลี่ยนที่เห็นก่อน แล้วค่อยคุยสาเหตุที่เป็นไปได้ หากภาพมีความละเอียดหรือสถานะล็อกอินต่างกัน ควรบันทึกเงื่อนไขที่ต่างเหล่านี้ก่อน
- ตรวจว่าสร้างไฟล์ภาพหน้าจอแล้วและไม่ได้กำลังเขียนอยู่
- ระบุภาพที่จะดูและคำถามเฉพาะ
- ตรวจว่าเนื้อหาในตัวอย่างตรงเป้าหมายหรือไม่
- เสริมข้อความหรือภาพบางส่วนที่ชัดขึ้นสำหรับตัวอักษรเล็กพร่า
เมื่อไม่รองรับรูปแบบหรือความสามารถ
ภาพใหญ่เกิน ไฟล์ที่ไม่ใช่บิตแมป และโมเดลที่ไม่รองรับผลภาพอาจคืนข้อผิดพลาดต่างกัน PDF หรือ SVG ใช้วิธีภาพหน้าจอทั่วไปโดยตรงไม่ได้ สามารถดึงข้อความหรือแปลงตามรูปแบบเพื่อดู คำอธิบายของโมเดลไม่เท่ากับการตรวจระดับพิกเซล ตัวเลขสำคัญ สถานะไอคอน และเส้นทางควรตรวจทีละรายการกับภาพจริง