ฉันจะแยกคำออกจากประโยคและกำหนดว่าแต่ละส่วนของคำพูดคืออะไร? [ปิด]

ฉันต้องการเขียนสิ่งที่ต้องใช้ประโยคและระบุแต่ละคำที่มันมีและกำหนดว่าส่วนใดของคำพูดแต่ละคำคืออะไร

ตัวอย่างเช่น

สวัสดีชาวโลกฉันเป็นประโยคหนึ่ง

จะกลับมานี้

verb noun, pronoun verb adjective noun

ในอุดมคติแล้วฉันต้องการที่จะก้าวไปอีกขั้นหนึ่งและรับประโยคและโดยทางโปรแกรมแล้วเข้าใจว่าสิ่งที่พยายามตีความและอาจทำบางสิ่งเกี่ยวกับมัน

ดังนั้นคำถามของฉันคือมีคนได้ยินบางสิ่งเช่นนี้หรือไม่?

นี่เรียกว่าการประมวลผลภาษาธรรมชาติและเป็นสาขาที่ซับซ้อนและใหญ่ สิ่งที่คุณอธิบายคือความสำเร็จอันยิ่งใหญ่และแม้แต่วิธีแก้ปัญหาที่ดีที่สุดเช่นWatsonก็ยังไม่สมบูรณ์แบบ

สิ่งนี้ทำให้ท้าทาย: "ควายควายควายควายควายควายควาย"

ประโยคที่ถูกต้องตามหลักไวยากรณ์ในภาษาอังกฤษแบบอเมริกันใช้เป็นตัวอย่างของวิธีการใช้ homonyms และ homophones ในการสร้างโครงสร้างทางภาษาที่ซับซ้อน มันได้รับการกล่าวถึงในวรรณคดีตั้งแต่ปี 1972 ... มันยังให้ความสำคัญในหนังสือของ Steven Pinker ในปี 1994 The Language Instinctเป็นตัวอย่างของประโยคที่ว่า "ไร้สาระดูเหมือน" แต่ไวยากรณ์ ...

ความหมายของประโยคจะชัดเจนขึ้นเมื่อเข้าใจว่าใช้เมืองบัฟฟาโลนิวยอร์กและคำกริยาที่ค่อนข้างแปลก "to buffalo" (หมายถึง "กลั่นแกล้งหรือข่มขู่") และเมื่อขยายเครื่องหมายวรรคตอนและไวยากรณ์เพื่อขยายประโยค อ่านดังนี้: "ควายควายที่ควายควาย, ควายควาย" ความหมายจะชัดเจนยิ่งขึ้นเมื่อมีการใช้คำพ้องความหมาย: "ควายควายที่ควายกระทิงควายตัวอื่นรังแกควายควายตัวเอง"

แม้ว่าการแบ่งประโยคและการกำหนดความถูกต้องทางไวยากรณ์พร้อมกับการแก้ปัญหาแรกของคุณนั้นง่ายกว่าปัญหาที่สองของคุณความซับซ้อนหลายอย่างเช่นคำนามคำกริยาหรือคำนามคำกริยาเช่นคำว่ายน้ำการเขียนโปรแกรม ฯลฯ และความซับซ้อนอื่น ๆ ตอบ.

แต่ปัญหาที่สองของคุณ - ผู้คนต่างพยายามอย่างมากที่จะหาทางออกที่สมบูรณ์แบบ แต่อัลกอริทึม "การตีความ" ที่สมบูรณ์แบบนั้นไม่สามารถใช้งานได้จริงสำหรับภาษาธรรมชาติใด ๆ เช่นภาษาอังกฤษ - มีการเปลี่ยนแปลงที่จะทำให้อัลกอริทึมของคุณสับสน สาขานี้ - ไฮบริดระหว่างเอไอวิทยาศาสตร์คอมพิวเตอร์และภาษาศาสตร์เป็นที่รู้จักกันNLP พิจารณาสิ่งนี้: แม้แต่ Google Translate ก็ยังไม่สมบูรณ์แบบเมื่อประโยค "การตีความ"

แต่อย่างไรก็ตามนี่เป็นสนามที่น่าสนใจมากที่จะตะลุยกับ

ฉันคิดว่าคุณควรเริ่มอ่านบทความ Wikipedia นี้:

http://en.wikipedia.org/wiki/Part-of-speech_tagging

(เป็นฟิลด์การวิจัยอย่าคาดหวังว่าจะมีวิธีแก้ปัญหาที่ง่ายสำหรับมัน)

วิธีที่ถูกในการทำเช่นนี้คือการตั้งค่าฐานข้อมูลของพจนานุกรม (ฉันเกือบจะเป็นบวกที่มีคนทำสิ่งนี้)

ต้องการสองฟิลด์ในตาราง: wordและusage

เปลี่ยนวลีให้เป็นอาร์เรย์ของสตริง (แต่ละคำเป็นสตริง) และเป็นอิสระ:

select 'usage' from Dictionary WHERE 'word' = $word; 

มันเป็นทางออกที่หนักหน่วง แต่เป็นสิ่งที่ฉันเคยใช้ในอดีต