Có một chút nhầm lẫn khi cho rằng con người giỏi hơn trong việc học liên tục so với các hệ thống AI hiện tại. Chúng ta cũng gặp phải tình trạng quên thảm khốc: hãy lấy bất kỳ người bình thường nào và yêu cầu họ làm lại các bài kiểm tra trung học / đại học. Họ sẽ thất bại thảm hại. Ký ức dài hạn của chúng ta suy giảm và chúng ta quên đi những kỹ năng đã học trước đó. Nơi chúng ta xuất sắc có lẽ là việc sử dụng thông minh hơn cửa sổ ngữ cảnh (trong não) và khả năng sử dụng công cụ. Chúng ta có xu hướng biết cách giữ lại những gì cần thiết để làm tốt công việc và sống tốt. Phần còn lại chúng ta ủy thác cho thế giới thông qua các tệp, công cụ hoặc người khác. Thế hệ tiếp theo của các mô hình ngôn ngữ lớn (LLMs) sẽ "giải quyết" việc học liên tục theo cách tương tự. Dù chúng sẽ ghi nhớ những điều mới bằng cách cập nhật trọng số hay thông qua ghi chú/tệp hoặc bộ nhớ KV, tôi nghi ngờ rằng đó sẽ là một sự cải thiện dần dần theo thời gian và trước khi chúng ta nhận ra, chúng ta sẽ mong đợi các hệ thống AI của mình cải thiện cùng với chúng ta theo thời gian.