Bài báo này cung cấp tổng quan về các nghiên cứu học sâu gần đây về tính tổng hợp, một đặc tính cốt lõi của trí tuệ con người, dành cho độc giả trong lĩnh vực triết học, khoa học nhận thức và khoa học thần kinh. Tập trung vào các mô hình ngôn ngữ quy mô lớn (LLM), chúng tôi thảo luận về hai phương pháp tiếp cận để đạt được khái quát hóa tổ hợp, cho phép phát huy sức mạnh biểu đạt vô hạn từ kinh nghiệm học tập hạn chế: (1) thiên kiến quy nạp cấu trúc và (2) siêu học. Chúng tôi lập luận rằng quá trình tiền huấn luyện của LLM có thể được hiểu là một loại siêu học, cho phép mạng nơ-ron sâu (DNN) đạt được khái quát hóa tổ hợp. Sau đó, chúng tôi thảo luận về ý nghĩa của những phát hiện này đối với việc nghiên cứu tính tổng hợp trong nhận thức của con người và các hướng nghiên cứu trong tương lai.
