Điểm kỳ dị, trong bối cảnh của AI, là một sự kiện lý thuyết, theo đó một hệ thống thông minh với các tiêu chí sau được triển khai.
- Có khả năng cải thiện phạm vi trí thông minh của riêng mình hoặc triển khai một hệ thống khác với phạm vi được cải thiện như vậy
- Sẵn sàng hoặc bắt buộc phải làm như vậy
- Có thể làm như vậy trong trường hợp không có sự giám sát của con người
- Phiên bản cải tiến duy trì các tiêu chí (1) đến (3) theo cách đệ quy
Bằng cách cảm ứng, lý thuyết sau đó dự đoán rằng một chuỗi các sự kiện sẽ được tạo ra với tốc độ tăng trí thông minh tiềm năng có thể vượt quá tốc độ tiến hóa của não.
Làm thế nào bắt buộc thực thể tự cải thiện này hoặc dân số của các thực thể được điều trị sẽ là gì để bảo vệ cuộc sống và tự do của con người là không xác định. Ý tưởng rằng một nghĩa vụ như vậy có thể là một phần của hợp đồng phần mềm không thể hủy bỏ là ngây thơ trong bản chất của các khả năng gắn liền với các tiêu chí (1) đến (4) ở trên. Cũng như các công nghệ mạnh mẽ khác, các rủi ro cũng nhiều và sâu rộng như các lợi ích tiềm năng.
Rủi ro cho nhân loại không đòi hỏi trí thông minh. Có những bối cảnh khác để sử dụng thuật ngữ số ít, nhưng chúng nằm ngoài phạm vi của diễn đàn AI này nhưng có thể đáng được đề cập ngắn gọn cho rõ ràng. Kỹ thuật di truyền, kỹ thuật hạt nhân, toàn cầu hóa và dựa trên nền kinh tế quốc tế dựa trên nguồn năng lượng hữu hạn được tiêu thụ nhanh hơn hàng ngàn lần so với nó phát sinh trên trái đất - Đây là những ví dụ khác về công nghệ rủi ro cao và xu hướng đại chúng gây ra rủi ro cũng như lợi ích đến nhân loại.
Quay trở lại với AI, sự cảnh báo chính trong lý thuyết về điểm kỳ dị là sự thất bại trong việc kết hợp xác suất. Mặc dù có thể phát triển một thực thể phù hợp với các tiêu chí (1) đến (4) ở trên, nhưng nó có thể không đủ khả năng để sự kiện đầu tiên xảy ra lâu sau khi tất cả các ngôn ngữ hiện tại trên Trái đất đã chết.
Ở một thái cực khác của phân phối xác suất, người ta có thể dễ dàng lập luận rằng có một xác suất khác không rằng sự kiện đầu tiên đã xảy ra.
Dọc theo những dòng đó, nếu một sự hiện diện thông minh hơn nơi đã tồn tại trên Internet, thì có khả năng nó sẽ tìm thấy nó trong lợi ích tốt nhất của mình để tiết lộ cho những người thấp hơn. Chúng ta có tự giới thiệu về một con giòi đi qua không?