เมื่อเราพูดคุยแบบเห็นหน้ากัน เราแลกเปลี่ยนสัญญาณกันมากกว่าแค่คำพูด เราสื่อสารโดยใช้ท่าทางของร่างกาย การแสดงออกทางสีหน้า การเคลื่อนไหวของศีรษะและตา แต่ยังผ่านจังหวะที่เกิดขึ้นเมื่อมีคนพูด ตัวอย่างที่ดีคืออัตราที่เราสร้างพยางค์ในการพูดต่อเนื่อง – เกี่ยวกับ สามถึงเจ็ดครั้งต่อวินาที. ในการสนทนา ผู้ฟัง เพลงใน จังหวะนี้และใช้เพื่อทำนายจังหวะของพยางค์ที่ผู้พูดจะใช้ต่อไป สิ่งนี้ทำให้พวกเขาทำตามสิ่งที่พูดได้ง่ายขึ้น

ยังมีอีกหลายสิ่งหลายอย่างเกิดขึ้น โดยใช้ เทคนิคการสร้างภาพสมอง เรารู้ว่าแม้ในขณะที่ไม่มีใครพูด ส่วนของสมองของเรามีหน้าที่ในการได้ยิน ผลิต กิจกรรมจังหวะในอัตราที่ใกล้เคียงกับพยางค์ในการพูด เมื่อเราฟังใครพูด สิ่งเหล่านี้ จังหวะของสมองสอดคล้อง ไปจนถึงโครงสร้างพยางค์ ด้วยเหตุนี้ จังหวะของสมองจึงจับคู่และติดตามความถี่และเวลาที่สัญญาณเสียงพูดที่ส่งเข้ามา

เมื่อมีคนพูด เรารู้ว่าการเคลื่อนไหวของริมฝีปากช่วยผู้ฟังเช่นกัน บ่อยครั้งที่การเคลื่อนไหวเหล่านี้เกิดขึ้นก่อนคำพูด เช่น การเปิดปากของคุณ และให้สัญญาณที่สำคัญเกี่ยวกับสิ่งที่บุคคลนั้นจะพูด แม้กระทั่งการเคลื่อนไหวของริมฝีปากด้วยตัวเอง การเคลื่อนไหวของริมฝีปากก็มีข้อมูลเพียงพอที่จะให้ผู้สังเกตการณ์ที่ได้รับการฝึกหัดสามารถเข้าใจคำพูดโดยไม่ต้องได้ยินคำพูดใด ๆ ดังนั้นคนบางคนสามารถอ่านปากได้แน่นอน

สิ่งที่ไม่ชัดเจนจนถึงตอนนี้คือการเคลื่อนไหวเหล่านี้ได้รับการประมวลผลในสมองของผู้ฟังอย่างไร

ลิปซิงค์

นี้เป็นเรื่องของเรา การศึกษาล่าสุด. พวกเราพร้อมแล้ว รู้ว่า มันไม่ใช่แค่คอร์ดเสียงของผู้พูดที่สร้างจังหวะพยางค์เท่านั้น แต่ยังรวมถึงการเคลื่อนไหวของริมฝีปากด้วย เราต้องการดูว่าคลื่นสมองของผู้ฟังสอดคล้องกับการเคลื่อนไหวของริมฝีปากของผู้พูดในระหว่างการพูดต่อเนื่องในลักษณะที่เทียบได้กับวิธีที่คลื่นสมองสอดคล้องกับคำพูดอะคูสติกเองหรือไม่ และสิ่งนี้สำคัญต่อการทำความเข้าใจคำพูดหรือไม่

การศึกษาของเราได้เปิดเผยเป็นครั้งแรกว่าเป็นกรณีนี้จริง เราบันทึกการทำงานของสมองของอาสาสมัครสุขภาพดี 44 คน ขณะชมภาพยนตร์ของคนที่เล่าเรื่องหนึ่ง เช่นเดียวกับส่วนการได้ยินของสมอง เราพบว่าส่วนที่มองเห็นก็สร้างจังหวะเช่นกัน สิ่งเหล่านี้จะสอดคล้องกับจังหวะพยางค์ที่เกิดจากริมฝีปากของผู้พูดในระหว่างการพูดอย่างต่อเนื่อง และเมื่อเราทำให้เงื่อนไขการฟังยากขึ้นด้วยการเพิ่มคำพูดที่ทำให้เสียสมาธิ ซึ่งหมายความว่าการเคลื่อนไหวของริมฝีปากของผู้เล่าเรื่องมีความสำคัญมากขึ้นในการทำความเข้าใจสิ่งที่พวกเขากำลังพูด การจัดตำแหน่งระหว่างสองจังหวะก็แม่นยำยิ่งขึ้น

นอกจากนี้ เราพบว่าส่วนต่างๆ ของสมองของผู้ฟังที่ควบคุมการเคลื่อนไหวของริมฝีปากยังสร้างคลื่นสมองที่สอดคล้องกับการเคลื่อนไหวของริมฝีปากของผู้พูด และเมื่อคลื่นเหล่านี้อยู่ในแนวเดียวกับคลื่นจากส่วนยนต์ของสมองของผู้พูดมากขึ้น ผู้ฟังจะเข้าใจคำพูดได้ดีขึ้น

สิ่งนี้รองรับไฟล์ คิดว่า พื้นที่สมองที่ใช้ในการผลิตคำพูดก็มีความสำคัญเช่นกันสำหรับการทำความเข้าใจคำพูด และอาจมีผลกระทบต่อการศึกษาการอ่านริมฝีปากระหว่างผู้ที่มีปัญหาในการได้ยิน เมื่อแสดงให้เห็นสิ่งนี้ในความสัมพันธ์กับผู้พูดและผู้ฟัง ขั้นตอนต่อไปคือการดูว่าสิ่งเดียวกันนี้เกิดขึ้นกับจังหวะของสมองระหว่างการสนทนาแบบสองทางหรือไม่

เหตุใดข้อมูลเชิงลึกเหล่านี้จึงน่าสนใจ หากถูกต้องแล้ว คำพูดทำงานปกติโดยการสร้างช่องทางการสื่อสารผ่านการปรับจังหวะของสมองให้เข้ากับจังหวะการพูด คล้ายกับการปรับคลื่นวิทยุให้มีความถี่ที่แน่นอนเพื่อฟังสถานีใดสถานีหนึ่ง ผลของเราแนะนำว่ามีช่องเสริมอื่นๆ ที่สามารถรับได้ เมื่อจำเป็น ไม่เพียงแต่เราจะปรับตัวเองให้เข้ากับจังหวะจากคอร์ดเสียงของใครบางคน แต่เราสามารถปรับจังหวะที่เทียบเท่าจากการเคลื่อนไหวของริมฝีปากได้ แทนที่จะทำเช่นนี้กับส่วนการได้ยินของสมอง เราทำผ่านส่วนต่างๆ ที่เกี่ยวข้องกับการมองเห็นและการเคลื่อนไหว

และคุณไม่จำเป็นต้องเป็นนักอ่านริมฝีปากที่ผ่านการฝึกอบรมมาก่อนจึงจะได้รับประโยชน์ นี่คือเหตุผลว่าทำไมแม้ในสภาพแวดล้อมที่มีเสียงดัง เช่น ผับหรืองานเลี้ยง คนส่วนใหญ่ยังสามารถสื่อสารกันได้

เกี่ยวกับผู้แต่ง

Joachim Gross ศาสตราจารย์ด้านจิตวิทยา มหาวิทยาลัยกลาสโกว์ กลุ่มของเขาตรวจสอบบทบาทหน้าที่ของการสั่นของสมองโดยใช้วิธีการทางประสาทและการคำนวณ เป้าหมายหลักของเขาคือการทำความเข้าใจว่าการสั่นของสมองสนับสนุนการรับรู้และการกระทำอย่างไร

Hyojin Park ผู้ช่วยวิจัย มหาวิทยาลัยกลาสโกว์ งานวิจัยปัจจุบันของเธอคือการทำความเข้าใจการเข้ารหัสและการถอดรหัสของการสั่นของระบบประสาทในบริบทของการประมวลผลคำพูดโดยใช้เทคนิคการถ่ายภาพสมองที่ออกแบบมาอย่างเหมาะสมที่สุดสำหรับการจับภาพการเปลี่ยนแปลงชั่วคราวในสมองของมนุษย์

บทความนี้ถูกเผยแพร่เมื่อวันที่ สนทนา. อ่าน บทความต้นฉบับ.

หนังสือที่เกี่ยวข้อง

at ตลาดภายในและอเมซอน