Làm cách nào tôi có thể trích xuất các từ trong câu và xác định phần nào của bài phát biểu? [đóng cửa]

Tôi muốn viết một cái gì đó có một câu và xác định từng từ nó chứa và xác định phần của lời nói mỗi từ là gì.

Ví dụ

Xin chào thế giới, tôi là một câu

sẽ trả lại cái này

verb noun, pronoun verb adjective noun

Lý tưởng nhất là cuối cùng tôi muốn tiến thêm một bước và nhận một câu và lập trình để nó hiểu những gì nó đang cố gắng diễn giải và có thể làm gì đó về nó.

Vì vậy, câu hỏi của tôi là, có ai nghe nói về một cái gì đó như thế này?

Đây được gọi là Xử lý ngôn ngữ tự nhiên và nó là một lĩnh vực lớn, phức tạp. Một cái gì đó giống như bạn mô tả là một thành tựu hoành tráng, và thậm chí các giải pháp tốt nhất, như Watson , không nơi nào gần hoàn hảo.

Những điều như thế này làm cho nó thách thức: "Trâu trâu Trâu trâu trâu trâu"

một câu đúng ngữ pháp trong tiếng Anh Mỹ, được sử dụng như một ví dụ về cách sử dụng từ đồng âm và từ đồng âm để tạo ra các cấu trúc ngôn ngữ phức tạp. Nó đã được thảo luận trong văn học từ năm 1972 ... Nó cũng được xuất hiện trong cuốn sách 1994 của Steven Pink, Bản năng ngôn ngữ như một ví dụ về một câu "dường như vô nghĩa" nhưng về mặt ngữ pháp ...

Ý nghĩa của câu trở nên rõ ràng hơn khi nó hiểu rằng nó sử dụng thành phố Buffalo, New York và động từ có phần không phổ biến "to trâu" (có nghĩa là "bắt nạt hoặc đe dọa"), và khi dấu câu và ngữ pháp được mở rộng để câu được mở rộng đọc như sau: "Trâu trâu mà trâu trâu, trâu trâu". Ý nghĩa càng trở nên rõ ràng hơn khi các từ đồng nghĩa được sử dụng: "Bò rừng trâu mà bò rừng trâu khác bắt nạt, tự bắt nạt bò rừng trâu".

Mặc dù tách một câu và xác định tính chính xác ngữ pháp cùng với việc giải quyết vấn đề đầu tiên của bạn dễ dàng hơn vấn đề thứ hai của bạn, nhiều sự phức tạp như động từ hoặc gerunds như bơi lội, lập trình, v.v. và những rắc rối khác như vậy, nó vẫn là một thách thức - Xem Morons ' câu trả lời.

Nhưng vấn đề thứ hai của bạn - mọi người đã nỗ lực rất lớn để tìm ra một giải pháp hoàn hảo, nhưng thuật toán "diễn giải" thực sự hoàn hảo không thể thực hiện được đối với bất kỳ ngôn ngữ tự nhiên nào như tiếng Anh - có những biến thể sẽ làm hỏng thuật toán của bạn. Lĩnh vực này - sự kết hợp giữa AI, Khoa học máy tính và Ngôn ngữ học được gọi là NLP . Xem xét điều này: Ngay cả Google Dịch cũng không hoàn hảo khi "diễn giải" câu.

Nhưng tuy nhiên, đây là một lĩnh vực rất thú vị để học hỏi.

Tôi nghĩ bạn nên bắt đầu đọc bài viết Wikipedia này:

http://en.wikipedia.org/wiki/Part-of-speech_tagging

(đây là một lĩnh vực nghiên cứu, đừng mong đợi bất kỳ giải pháp dễ dàng nào cho nó.)

Một cách rẻ tiền để làm điều này sẽ là thiết lập một cơ sở dữ liệu của từ điển (tôi gần như tích cực rằng ai đó đã làm điều này).

Cần hai trường trong bảng: wordvàusage

Biến cụm từ thành một chuỗi các chuỗi, (mỗi từ là một chuỗi) và độc lập:

select 'usage' from Dictionary WHERE 'word' = $word; 

Đó là một giải pháp nặng nề, nhưng một giải pháp mà tôi đã sử dụng trong quá khứ.