Đồng sáng lập OpenAI cho biết tự cải thiện đệ quy đối mặt với bất định kỹ thuật lớn

TREE NEWS đưa tin: Đồng sáng lập OpenAI John Schulman, cùng với các nhà nghiên cứu Charlie O’Neill và Beren Millidge, cho rằng tự cải thiện đệ quy khó có thể kích hoạt một vụ bùng nổ trí tuệ trong ngắn hạn, lập luận rằng mô hình Transformer kết hợp học tăng cường hiện tại có thể đạt đến giới hạn tiệm cận về khả năng tổng quát hóa, học liên tục và hiệu quả mẫu. Tiến bộ đang chuyển từ việc mở rộng thuần túy sức mạnh tính toán sang hiệu quả dữ liệu và các kiến trúc thưa hoặc mô-đun, với chưng cất và học liên tục từ dữ liệu triển khai thực tế được xem là then chốt đối với các phòng thí nghiệm nhỏ hơn.