Pokédex ในโลกแห่งความเป็นจริง สามารถระบุชื่อโปรเกม่อน ขับเคลื่อนด้วย ChatGPT และ AI

Abe Haskins ยูทูปเบอร์และวิศวกรเจ้าของช่อง YouTube Abe's Projects ได้มีการเผยแพร่วิดีโอที่มีการสร้าง Pokedex ที่อ้างอิงจากภาค Indigo League ในปี 1990 ซึ่งสามารถระบุชื่อพร้อมคำอธิบายด้วยเสียง และจับภาพด้วยกล้องโดยใช้ ChatGPT และ AI ในการขับเคลื่อนระบบ

ในการสร้างนั้นเป้าหมายหลักของเขาคือการทำให้มันดูเหมือนเวอร์ชันอนิเมะมากที่สุดเท่าที่จะเป็นไปได้ ให้มันจดจำโปเกม่อนส่วนใหญ่ในสถานการณ์ส่วนใหญ่ และจำเป็นต้องสามารถพูดได้ ในทางอิเล็กทรอนิกส์ สิ่งที่เขาต้องการคือเซนเซอร์กล้อง หน้าจอขนาดเล็กสำหรับแสดงชื่อและภาพของ Pokemon มีลำโพงสำหรับเล่นคำอธิบาย และเซนเซอร์ในการรับ WIFI เพื่อใช้สื่อสารกับ ChatGPT-4 ขาได้เพิ่มแบตเตอรี่ พอร์ต USB และปุ่มสองสามปุ่มสำหรับการสแกนและออก เขาใช้เครื่องพิมพ์ 3D เพื่อสร้างตัวเครื่อง

ในด้านของเสียงเขาได้มีการใช้ AI เข้ามาช่วยในการโคลนเสียงออนไลน์ที่เรียกว่าPlayHTซอฟต์แวร์แปลงข้อความเป็นเสียงมีปัญหากับการออกเสียงที่ถูกต้องของชื่อโปเกม่อนบางตัว อุปกรณ์จะป้อนข้อมูลเซนเซอร์กล้องไปที่ ChatGPT-4 ซึ่งจะเปรียบเทียบกับฐานข้อมูลภาพและข้อมูลโปเกม่อนผ่าน API ฐานข้อมูลประกอบด้วยภาพบิตแมปที่จับคู่กับชื่อโปเกม่อน รูปภาพแสดงผลได้ดีบนแผง OLED ขาวดำขนาดเล็ก แต่บางครั้งข้อความอาจอ่านไม่ออก

เขาทดสอบโปเกเด็กซ์กับของเล่นสองสามชิ้น มันไม่สามารถระบุตุ๊กตาได้อย่างถูกต้อง แต่สามารถจดจำแอ็คชั่นและรูปภาพบนหน้าจอคอมพิวเตอร์ได้ค่อนข้างดี โดยการทดลองของเขาในครั้งนี้ถือว่าเป็นการสานฝันวัยเด็กของหลาย ๆ คน ซึ่งนอกจาก Pokedex แล้วยังมีอุปกรณ์อื่น ๆ อีมากมายที่เขาได้สร้างและเผยแพร่ในช่องเท่านั้น