มีการรวมงานการเรียนรู้ของเครื่องและทฤษฎีความซับซ้อนในรูปแบบแปลกใหม่หรือไม่?


13

สำหรับฉันแล้วดูเหมือนว่าผู้เชี่ยวชาญด้านการเรียนรู้เครื่องจักร / การขุดข้อมูลคุ้นเคยกับ P และ NP แต่ไม่ค่อยพูดถึงบางคลาสที่ซับซ้อนยิ่งขึ้น (เช่น NC, BPP หรือ IP) และความหมายของการวิเคราะห์ข้อมูลได้อย่างมีประสิทธิภาพ มีการสำรวจงานที่ทำเช่นนี้หรือไม่?


2
ไม่มีแบบสำรวจที่ฉันรู้ แต่ลองดูตัวชี้ไปที่ "การเรียนรู้ควอนตัม" (# 5) จากโพสต์นี้: blog.computationalcomplexity.org/2012/10/quantum-workshop.html
Suresh Venkat

การเรียนรู้ของเครื่องเป็นประจำจะโจมตีปัญหาที่ยากมากซึ่งเป็นปัญหาภายนอกของ NP สำหรับการเพิ่มประสิทธิภาพ "ทั่วโลก" แต่ภายใน NP หรือยากกว่านั้นสำหรับการเพิ่มประสิทธิภาพ "ท้องถิ่น" ดังนั้นแนวคิดทั้งหมดของคลาสความซับซ้อนจะพร่ามัวเมื่อมีการปรับให้เหมาะสมสำหรับผลลัพธ์ "ดีพอ" ซึ่งวัดได้มากขึ้นโดยการวัดคุณภาพที่ขึ้นกับแอปพลิเคชัน & ในแง่ที่ว่า apriori รู้จักการใช้อัลกอริทึมจริงๆ ....
vzn

@ vzn สำหรับฉันความละเอียดอ่อนนั้นดูเหมือนจะเป็นเหตุผลที่ให้ความสนใจกับความซับซ้อนมากยิ่งขึ้น! มันอาจให้ข้อมูลเชิงลึกที่น่าสนใจบางอย่าง
Mike Izbicki

แน่นอนว่ามีการเชื่อมโยงระหว่างทฤษฎีการเรียนรู้ความซับซ้อนของวงจรการเข้ารหัส แต่นี่คือมุมของทฤษฎีการเรียนรู้ที่ถูกลบออกจากการฝึกการเรียนรู้ด้วยเครื่อง หากคุณสนใจฉันสามารถขึ้นกับพอยน์เตอร์
Sasho Nikolov

ใช่อีกตัวอย่างหนึ่งคือ BDDs (ไดอะแกรมการตัดสินใจแบบไบนารี่) ถูกใช้ในอัลกอริธึมฐานข้อมูล / การทำเหมืองข้อมูลและมีการเชื่อมต่อกับความซับซ้อนของวงจรอย่างมาก แต่สำหรับฉันแล้วคำถามทั้งหมดอาจเป็นเรื่องยากเนื่องจากการเรียนรู้ของเครื่องส่วนใหญ่มีการใช้งานในทางปฏิบัติและความซับซ้อนของการประยุกต์ใช้ ML นั้นมักจะศึกษาทางอ้อม / สังเกตุผ่านการวิเคราะห์การใช้งานจริงของอัลกอริทึมมากกว่า
vzn

คำตอบ:


3

มีความแตกต่างโดยธรรมชาติหรือความแตกต่างของวิธีการระหว่างสองสาขาของการเรียนรู้ของเครื่องประยุกต์และทฤษฎีความซับซ้อน / TCS

นี่คือการประชุมเชิงปฏิบัติการเมื่อเร็ว ๆ นี้ในหัวข้อที่ศูนย์คอมพิวเตอร์ Intractability, Princeton พร้อมวิดีโอมากมาย

คำอธิบาย: วิธีการในปัจจุบันหลายวิธีในการเรียนรู้ของเครื่องนั้นเป็นแบบเรียนรู้ร่วม: เราไม่สามารถพิสูจน์ขอบเขตที่ดีในการทำงานหรือเวลาที่ใช้ การประชุมเชิงปฏิบัติการขนาดเล็กนี้จะมุ่งเน้นไปที่โครงการของการออกแบบอัลกอริทึมและวิธีการที่สามารถวิเคราะห์ประสิทธิภาพอย่างจริงจัง เป้าหมายคือมองข้ามการตั้งค่าที่มีขอบเขตที่พิสูจน์ได้แล้ว

ใน TCS พื้นที่หลักของการศึกษา "การเรียนรู้" บางครั้งอาจสับสนแม้เรียกว่า "การเรียนรู้ด้วยเครื่อง" เรียกว่าทฤษฎี PACซึ่งย่อมาจากความถูกต้องโดยประมาณ ต้นทศวรรษ 1980 มีต้นกำเนิดมาจากการวิจัยที่ทันสมัยกว่าในเรื่อง "การเรียนรู้ด้วยเครื่อง" วิกิพีเดียเรียกมันว่าเป็นส่วนหนึ่งของสนามทฤษฎีการเรียนรู้คอมพิวเตอร์ PAC มักเกี่ยวข้องกับผลลัพธ์ของการเรียนรู้สูตรบูลีนที่ได้รับตัวอย่างทางสถิติของการแจกแจง ฯลฯ และความถูกต้องที่เป็นไปได้ของการเรียนรู้ที่ได้รับจากอัลกอริทึมหรือตัวอย่าง จำกัด สิ่งนี้ถูกศึกษาในทางทฤษฎีอย่างเข้มงวดพร้อมการผูกอินกับคลาสที่ซับซ้อน แต่มันไม่ได้เป็นหน้าการศึกษาและวิกิพีเดียที่ประยุกต์ใช้กับการเรียนรู้ของเครื่องแม้จะไม่ได้เขียนไว้


5
"วิกิพีเดียโทรศัพท์" ... คุณรู้จักเรื่องนี้จริงหรือ? 1) วิกิสำหรับการเรียนรู้ของเครื่องมีส่วนทฤษฎีที่เชื่อมโยงกับทฤษฎีการเรียนรู้การคำนวณหน้า 2) งานทฤษฎีการเรียนรู้ของ Valiant, Vapnik, Schapire และอื่น ๆ มีผลกระทบอย่างมากต่อการเรียนรู้ของเครื่อง
Sasho Nikolov
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.