Face the Music: วิธีที่ "ผู้ควบคุมวงรอบดวงตา" ช่วยให้เป็นอัมพาตเขย่าความรู้สึก

$config[ads_kvadrat] not found

BILL & TED FACE THE MUSIC Review (2020) - A Most Excellent Escape

BILL & TED FACE THE MUSIC Review (2020) - A Most Excellent Escape
Anonim

Andreas Refsgaard ผู้ออกแบบปฏิสัมพันธ์และผู้สร้างสรรค์โค้ดในเมืองอัมสเตอร์ดัมได้ออกแบบอินเทอร์เฟซดนตรีที่ช่วยให้ผู้พิการทางร่างกายสามารถทำเพลงได้ The Eye Conductor ใช้ซอฟต์แวร์ติดตามดวงตาและเว็บแคมของคอมพิวเตอร์เพื่อแปลการเคลื่อนไหวของใบหน้าเป็นส่วนประกอบต่าง ๆ ของการแต่งเพลง ผู้ใช้สามารถฝึกฝนตัวเองเพื่อเล่นกับใบหน้าซึ่งหมายความว่าคนที่เป็นอัมพาต - คนที่ไม่สามารถเล่นเครื่องดนตรีได้ - มีโอกาสครั้งที่สองในการสร้างเสียงที่สวยงาม (หรือเสียงดัง) การจ้องมองที่ถูกต้องนั้นเป็นการโจมตีคอร์ดด้วยการประดิษฐ์ของ Refsgaard การแสดงออกที่เหมาะสมแสดงออกถึงความดัง

Refsgaard พูดกับ ผกผัน เกี่ยวกับแรงบันดาลใจที่อยู่เบื้องหลังโครงการของเขาการดิ้นรนที่เขาวิ่งไปตามทางและสิ่งที่เขาเรียนรู้ในสิ่งที่เขาให้กับคนที่สูญเสียความสามารถในการทำเพลงให้เป็นโอกาสอีกครั้ง

ดนตรีของคุณมีพื้นหลังเป็นอย่างไร?

ฉันจะไม่เรียกตัวเองว่าเป็นนักดนตรีเพราะฉันเล่นเพื่อความสนุกเท่านั้น แต่ฉันเล่นกีตาร์และเบส Ableton เป็นโปรแกรมเพลงสถานีงานดิจิตอลที่คล้ายกับซอฟต์แวร์บันทึกเช่น Logic หรือ Protools หรือ Garage Band ฉันเรียนหลักสูตรนี้และฉันก็ไม่ค่อยเก่งในการทำเพลงด้วย แต่ฉันรู้สึกทึ่งกับความเป็นไปได้ที่ฉันเห็น จากนั้นเราก็เริ่มทำงานร่วมกันและทำสิ่งที่เพิ่มเติมประเภทการติดตั้งศิลปะที่เขาจะออกแบบเสียงและฉันจะขอเซ็นเซอร์เช่นกล้องความลึกดังนั้นเมื่อคนเดินผ่านพวกเขาจะควบคุมบางแง่มุมของโครงการ

ดังนั้นคุณจึงเป็นผู้ออกแบบการโต้ตอบและผู้สร้างสรรค์โฆษณา คุณช่วยอธิบายความหมายของชื่อเหล่านั้นได้อย่างไร

ทุกสิ่งที่ฉันออกแบบนั้นเป็นแบบโต้ตอบ ดังนั้นถ้าฉันจะทำเฟอร์นิเจอร์บางอย่างมันจะมีฟังก์ชั่นบางอย่างที่ทำให้มันตอบสนองต่อบางสิ่ง ฉันยังเป็นนักเขียนโค้ดโฆษณาด้วย เปรียบเทียบกับคนอื่น ๆ มากมาย - ตัวอย่างเช่นฉันเรียนที่โคเปนเฮเกนที่สถาบันการออกแบบการปฏิสัมพันธ์ของโคเปนเฮเกนที่ซึ่งผู้คนมาจากภูมิหลังที่แตกต่างกันมากมาย ฉันเรียกตัวเองว่า "coder สร้างสรรค์" เพราะฉันไม่ใช่ coder ที่เหมาะสม ฉันไม่เก่ง แต่ฉันสามารถทำบางสิ่งได้อย่างรวดเร็วและฉันสามารถเชื่อมโยงสิ่งต่าง ๆ ได้และฉันก็สามารถคิดไอเดียใหม่ ๆ ได้

อะไรเป็นแรงบันดาลใจให้คุณช่วยคนที่มีความพิการทางร่างกายสร้างดนตรี?

หลังจากโรงเรียนมัธยมสองหรือสามเดือนฉันเป็นผู้ดูแลคนที่มีอาการกล้ามเนื้อเสื่อม การอยู่กับเขาตลอดเวลาทำให้ฉันตระหนักถึงบางสิ่งที่ฉันไม่สามารถช่วยเขาได้ หนึ่งในนั้นกำลังแสดงออกด้วยวิธีที่สร้างสรรค์ ฉันไม่คิดว่า“ โอเคนี่เป็นปัญหาที่ฉันต้องแก้” เพราะตอนนั้นฉันยังเด็กและไม่มีทักษะวิชาชีพใด ๆ แต่มันติดอยู่กับฉัน

สิ่งที่เกี่ยวกับแรงบันดาลใจด้านเทคนิค?

โครงการที่เรียกว่า Eyewriter ที่ฉันเห็นเมื่อประมาณหนึ่งปีที่ผ่านมาเป็นโปรแกรมวาดภาพที่ออกแบบมาสำหรับผู้ชายที่เคยเป็นศิลปินกราฟฟิตี แต่แล้วก็เป็นอัมพาต เพื่อนของเขาบางคนเป็นผู้เขียนโค้ดและสร้างเครื่องมือสำหรับเขาด้วยการติดตามสายตาซึ่งทำให้เขาสามารถวาดภาพได้ และตั้งแต่ฉันเล่นกับเซ็นเซอร์และสิ่งต่าง ๆ ในซอฟต์แวร์เพลงฉันจึงเชื่อมต่อ ฉันทำมันเป็นโครงการสุดท้ายของฉันที่โรงเรียน

เพลงจบลงด้วยการเป็นเขตสร้างสรรค์ที่คุณต้องการสำรวจอย่างไร

ฉันคิดว่าอาจเป็นเพราะฉันชอบดนตรีมากและในแง่ของเวลาที่ฉันมีสำหรับโครงการ มันชัดเจนว่าดนตรีเป็นสิ่งที่ฉันต้องการทำงานด้วย จากนั้นฉันก็ได้รับแรงบันดาลใจจาก Eyewriter ในแง่ของการสร้างกราฟิก

เพลงดูเหมือนเป็นตัวเลือกที่ดีเพราะเป็นสากล ฉันนึกถึงคนที่ไม่ชอบดนตรี

ในตอนแรกฉันต้องการทดสอบว่าดนตรีมีความสำคัญต่อกลุ่มที่ฉันออกแบบมาอย่างไร ขั้นตอนแรกเป็นเพียงการสังเกตว่าคนที่มีความพิการทางร่างกายแตกต่างกันมีปฏิสัมพันธ์กับดนตรีอย่างไร บ้านหนึ่งที่ฉันเคยไปมีดนตรีวันพฤหัส บางคนสามารถชี้เล็กน้อยหรือเล่นบนคีย์บอร์ดเล็กน้อยและบางคนไม่สามารถทำอะไรได้เลย แต่ความจริงก็คือพวกเขาปรากฏตัวในวันพฤหัสดนตรี

ระหว่างการสังเกตและทำให้อุปกรณ์ใช้เวลานานเท่าใด

บ่อยครั้งที่อยู่ในกระบวนการออกแบบพวกเขาจะแยกจากกันสองอย่าง แต่ฉันไม่ชอบวิธีการนั้น ฉันชอบการสร้างตั้งแต่เริ่มต้นและเมื่อฉันได้สนทนาเกี่ยวกับสิ่งที่ฉันสร้างขึ้น แล้วฉันจะแก้ไขหรือปรับแต่ง

การเห็นคนใช้เป็นครั้งแรกเป็นอย่างไร

มันค่อนข้างดีใช่ เนื่องจากบางคนไม่สามารถพูดได้การเชื่อมต่ออาจเป็นเรื่องยาก แต่เมื่อพวกเขาใช้ Eye Conductor ของเราเราก็เชื่อมโยงกันจริงๆ พวกเขามองมาที่ฉันและยิ้มหรือทำตัวมีความสุขจริงๆหรือเมื่อฉันเพิ่งสาธิตพวกเขาก็จดจ่อจริงๆ มันเป็นตัวอย่างที่สวยงามของวิธีที่ดนตรีสามารถช่วยให้ผู้คนโต้ตอบและแสดงอารมณ์ได้

อะไรคือปัญหาใหญ่ที่สุดที่คุณพบขณะที่คุณออกแบบ Eye Conductor?

เพื่อให้ระบบทำงานคุณต้องนั่งในท่าเดียวกันกับที่เรานั่งอยู่หน้าแล็ปท็อปของเราเพราะภาพที่คุณเห็นฉันตอนนี้ตรงและดีสำหรับการติดตามใบหน้าและดวงตาของฉัน แต่ถ้าคุณอยู่กับใครบางคนในเก้าอี้ล้อเลื่อนที่ไม่สามารถควบคุมท่าทางหรือหลังหรือคอได้บางครั้งพวกเขาก็นั่งข้างมากขึ้นและระบบไม่สามารถติดตามการเคลื่อนไหวของใบหน้าได้ และบางครั้งมันก็ค่อนข้างอึดอัดสำหรับฉันที่จะพยายามพูดว่า“ โอเคเพื่อให้งานคุณต้องนั่งตรงๆ” จากนั้นเมื่อพวกเขาไม่พูดด้วยวาจาเราจะสื่อสารเรื่องนี้อย่างไร?

หากศีรษะของใครบางคนเอียงไปเช่นนั้นคุณสามารถถือแล็ปท็อปในทางทฤษฎีเพื่อรับท่าทางใบหน้าของพวกเขาได้หรือไม่?

ใช่. ดังนั้นฉันจึงไม่ได้ไปแก้ปัญหานั้น แต่ผู้คนจำนวนมากมีคอมพิวเตอร์ติดตั้งอยู่บนเก้าอี้รถเข็นและคอมพิวเตอร์อยู่บนเสาแล้วบนเสานั้นมีอุปกรณ์ติดตั้งและพวกเขาทำมุมในทิศทางที่ถูกต้องเพื่อชี้ไปที่ ใบหน้าของบุคคล ไม่มีตำแหน่งที่ถูกหรือผิดเพียงเกี่ยวกับการรับเซ็นเซอร์ - นั่นคือเว็บแคมและเครื่องติดตามตา - มุ่งตรงไปที่หัว มันค่อนข้างท้าทาย มันเป็นเรื่องของฮาร์ดแวร์มากกว่าเพราะถ้าอย่างนั้นฉันจะต้องพยายามสร้างโครงสร้างและมันจะยุ่งเหยิง ฉันไม่เก่งขนาดนั้น

คุณทำสิ่งทั้งหมดด้วยตัวเองหรือคุณเจอปัญหาทางเทคนิคที่มีคนอื่นเท่านั้นที่รู้วิธีแก้ปัญหา?

ฉันทำเอง แต่ในด้านการออกแบบเสียงฉันได้รับความช่วยเหลือจากอาจารย์คนนั้นฉันบอกคุณเกี่ยวกับ โดยพื้นฐานแล้วเพียงแค่การออกแบบเสียง ฉันยังมีที่ปรึกษาที่ให้คำแนะนำฉันในแง่ของภาษาการเขียนโปรแกรมที่เรียกว่า Max ซึ่งเขายอดเยี่ยมมาก เขาช่วยให้ฉันรู้สึกสบายใจกับรายละเอียดการเขียนโปรแกรมบางอย่างมากขึ้น แน่นอนว่ามันเป็นเรื่องใหม่ แต่พื้นฐานของมันฉันรู้แล้วจากประสบการณ์ก่อนหน้านี้ ฉันทำ Eye Conductor ในแปดสัปดาห์และผู้คนพูดว่า“ โอ้บ้าแล้วคุณจะทำสิ่งนั้นในแปดสัปดาห์ได้อย่างไร” แต่ฉันทำสิ่งอื่น ๆ ที่ก้าวหน้าในแง่ของการทำงานกับเซ็นเซอร์และซอฟต์แวร์เพลงและใช้เวลานานกว่าเพราะ ฉันไม่รู้จะทำยังไง ตอนนี้ฉันรู้แล้วว่ามันไม่ใช่เรื่องยากแม้ว่าโครงการนี้จะซับซ้อนกว่าก็ตาม สิ่งสำคัญสำหรับฉันที่จะชี้ให้เห็นว่าเป็นเครื่องต้นแบบที่ทำงานได้อย่างสมบูรณ์ แต่ไม่ใช่ผลิตภัณฑ์ ดังนั้นคนไม่สามารถออกไปซื้อและติดตั้งบนคอมพิวเตอร์ของฉัน

ฉันจะถามคุณว่าคุณมีแผนที่จะขายหรือไม่?

จริง ๆ แล้วฉันไม่ต้องการที่จะขายมันฉันต้องการที่จะให้มันไป ฉันต้องการทำให้เป็นโอเพนซอร์ซ แต่ฉันไม่สามารถสัญญาอะไรได้ตอนนี้ ฉันยังไม่มีเงินทุนสำหรับมันและฉันมีงานและสิ่งอื่น ๆ ให้ทำ ฉันได้รับข้อความจากผู้ชายในมิชิแกนเช่นเคยเป็นผู้อำนวยการสร้างแล้วเขาก็ได้ ALS ฉันต้องทำให้คนเหล่านี้พร้อมใช้งาน มันเป็นสิ่งสำคัญสำหรับฉันในบางจุดและฉันไม่สามารถรับประกันได้ว่าเมื่อใด แต่หวังว่าจะเร็ว ๆ นี้จัดแพคเกจในลักษณะที่ผู้คนสามารถดาวน์โหลดได้ทั้งหมดเป็นสิ่งหนึ่งและมันจะทำงานบนคอมพิวเตอร์ส่วนใหญ่หรือลองใช้งานจริง ในเบราว์เซอร์ ความคิดที่อยู่เบื้องหลังทำให้เป็นสิ่งที่เบราว์เซอร์ต้องการเพียงแค่คนที่มีคอมพิวเตอร์ที่สามารถเข้าถึงออนไลน์แล้วมีอะไรทดแทนเมาส์ที่พวกเขาอาจมีในคอมพิวเตอร์ของพวกเขา ถ้าฉันทำให้มันเป็นโอเพ่นซอร์สฉันสามารถให้การสาธิตพื้นฐานแล้วผู้คนสามารถเพิ่มบิดของตัวเองเพื่อให้เป็นของตัวเอง

ดีใจที่ได้ยินว่าคุณกำลังทำสิ่งนี้เพราะคุณต้องการช่วยเหลือผู้คนไม่ใช่เพราะคุณต้องการรวยหรืออะไรแบบนั้น

เครื่องมือที่ฉันสร้างขึ้นด้วยอย่างน้อยก็ต้นแบบที่ใช้งานได้ก็คือโอเพ่นซอร์ส ทำไมฉันถึงได้รับเครดิต ตัวอย่างเช่นระบบติดตามใบหน้าที่ฉันใช้สำหรับต้นแบบของฉันซึ่งทำให้ผู้คนสามารถสร้างเสียงโดยยกคิ้วของพวกเขาหรือเปิดปากของพวกเขานั่นเป็นสิ่งที่เรียกว่า FaceOSC โดยผู้ชายคนหนึ่งชื่อ Kyle McDonald และเป็นระบบโอเพ่นซอร์ส ฉันไม่คิดว่าฉันจะได้รับเท่าที่ฉันทำโดยไม่มีซอฟต์แวร์ชิ้นนั้น

$config[ads_kvadrat] not found