ในโพสก่อนที่เคยพูดถึงการทดลอง AI ไป เป็นการทดลองเมื่อวันที่ 21 Dec 2022

Can we now (or how we) actually Hi-five with AI ?

หลังจากที่เมื่อวาน GTP ได้ประกาศ version 4 ออกมา (Beta) แล้ว ยังอัปเดท Free version ให้เป็น เวอร์ชั่น Mar 14 เช่นกัน เราเลยลองเอาชุดคำถามเดิมไปถาม GTP เพื่อเปรียบเทียบผลลัพธ์

ค้นพบว่า GTP มีความฉลาดขึ้นมากทีเดียวในการ Generate สีโทนอ่อน หากระบุสีตั้งต้นที่ 1 และ 5 เพิ่มเติมคือ

ในครั้งแรกเราสั่งว่า all colours must be align with WCAG guidelines แต่ GTP ไม่สามารถ response กับคำสั่งที่ต่อเนื่องตรงนั้นได้ แต่ในเวอร์ชั่นล่าสุด มันสามารถเข้าใจ chains of thought หรือแนวคิดที่เชื่อมโยงกันได้ดี และสามารถระบุการใช้งานได้ด้วย

แต่ผลลัพธ์จริงไหมนะ?

เราลองสุ่มสีตำแหน่งที่ 9 คือ #b1c5ff ไปลองวัดความถูกต้องของคะแนน WCAG https://contrast.tools/ โดยให้สีนั้นอยู่บนพื้นสีขาว

เห็นได้ชัดว่าจะผ่าน AAA ได้จะต้องใช้ Font ขนาดใหญ่จริงตามที่ GTP บอก แต่ขนาดถึง 60-96 เลยทีเดียว (คำว่า Large ในมุมมองของ designer แค่ 40 ก็อาจจะใหญ่มากแล้ว)

😆 เราเลยกลับไปถาม GTP อีกรอบว่า AAA Large คือเท่าไหร่นะ

โอ้…. คำตอบที่ได้มาคือ 24 px ซึ่งถ้าดูในตาราง คะแนนนั้นน้อยกว่า 15% เสียอีก

Conclusion

เรายังคงคิดว่า GTP(March 15) พัฒนาได้ไวมากขึ้นกว่าที่คิด และเข้าใจ requirements ที่เชื่อมโยงกันได้อย่างรวดเร็ว แต่ในขณะเดียวกัน การถามคำถาม professional level ยังคงต้องการการตั้งคำถาม ทดสอบ ทดลอง และพิสูจน์อย่างต่อเนื่อง เพื่อยืนยันถึงความถูกต้องของข้อมูลที่ได้รับมาก่อนนำเอาไปใช้

เหมือนที่ GTP มักจะสรุปเป็น pattern ท้ายคำตอบเสมอ ว่าเราควรทำอะไรต่อ ควร work อะไรต่อจากคำตอบที่ระบบให้เรามา