Nhận định, soi kèo Thái Lan vs Sri Lanka, 19h30 ngày 25/3: Khó cho cửa trên

Nghiên cứu của MIT tập trung vào việc phát triển một khung đánh giá dựa trên sự phù hợp của niềm tin của con người về khả năng của LLM trong thực hiện các nhiệm vụ cụ thể. Họ mô tả cách con người cập nhật niềm tin của mình về khả năng của LLM sau khi tương tác với nó. Các nhà nghiên cứu phát hiện rằng: khi LLM không đáp ứng kỳ vọng của con người, người dùng có thể trở nên quá tự tin hoặc thiếu tự tin về việc sử dụng chúng, dẫn đến hiệu suất kém trong các tình huống quan trọng.

Tổng quát hóa con người

Nghiên cứu do GS. Ashesh Rambachan - giáo sư trợ giảng kinh tế tại Phòng thí nghiệm Hệ thống Thông tin và Quyết định của MIT (LIDS) và các cộng sự thực hiện đã chỉ ra rằng: sự tổng quát hóa của con người - tức là khả năng dự đoán hiệu suất của một LLM dựa trên các phản hồi trước đó - rất quan trọng để đánh giá đúng khả năng của mô hình. Họ đã tạo ra một bộ dữ liệu gồm gần 19.000 ví dụ để đo lường cách con người tổng quát hóa về hiệu suất của các LLM trên 79 nhiệm vụ khác nhau.

Kết quả cho thấy, con người thường tổng quát hóa tốt hơn với các mô hình. Nhưng họ gặp khó khăn khi đánh giá hiệu suất của LLM. Các thí sinh khảo sát có xu hướng dự đoán hiệu suất của LLM kém chính xác hơn so với việc đánh giá hiệu suất của con người. GS. Rambachan cho rằng: “Sự tổng quát hóa của con người có thể bị phá vỡ khi áp dụng cho LLMs, vì các mô hình này không thể hiện các mẫu chuyên môn rõ ràng như con người”.

Đo lường sự không phù hợp

Con người cũng có xu hướng điều chỉnh niềm tin của họ về LLM khi mô hình trả lời sai hơn khi nó trả lời đúng. Nhiều người cũng cho rằng, hiệu suất của LLM trên các câu hỏi đơn giản không ảnh hưởng nhiều đến hiệu suất của nó trên các câu hỏi phức tạp hơn. Trong những tình huống sự phản hồi không chính xác được coi trọng, các mô hình đơn giản có thể vượt qua các mô hình tinh vi như GPT-4.

Một lý do cho sự kém hiệu quả trong việc tổng quát hóa các LLM là do những mô hình này còn mới mẻ, và con người có ít kinh nghiệm tương tác nó hơn so với việc tương tác người - người. GS. Rambachan cho rằng, việc tương tác nhiều hơn với LLM có thể giúp cải thiện khả năng tổng quát hóa của con người về chúng. Nghiên cứu hướng đến có thể cải thiện về niềm tin của con người khi tương tác với LLM và cách tổng quát hóa có thể được tích hợp vào việc phát triển các LLM.

Bài nghiên cứu nhấn mạnh rằng, để huấn luyện và điều chỉnh các LLM hiệu quả, cần phải xem xét cách con người tổng quát hóa về các mô hình này. Bộ dữ liệu các nhà nghiên cứu tạo ra có thể trở thành tiêu chuẩn để so sánh hiệu suất của các LLM liên quan đến hàm tổng quát hóa của con người, từ đó giúp cải thiện mô hình trong các tình huống thực tế.

Alex Imas - giáo sư khoa học hành vi và kinh tế tại Trường Kinh doanh Booth của Đại học Chicago cho rằng, nghiên cứu của MIT có 2 đóng góp quan trọng. Thứ nhất, nó nêu bật vấn đề khi triển khai LLM cho các mục đích chung, nếu người dùng không hiểu rõ khi nào LLM sẽ chính xác hay thất bại, họ có thể gặp khó khăn trong việc tiếp tục sử dụng chúng. Thứ hai, nghiên cứu cung cấp cái nhìn sâu sắc về cách các mô hình xử lý các vấn đề và cho thấy liệu LLM có "hiểu" các vấn đề mà chúng giải quyết hay không. 

(Theo: MIT News)

Là cựu học sinh chuyên Anh của Trường THPT Chuyên Lương Văn Thụy (Ninh Bình), Khôi đỗ vào ngành Kinh tế đầu tư của Trường ĐH Kinh tế Quốc dân theo diện xét tuyển học bạ của học sinh trường chuyên. Tuy nhiên, đây không phải ngành học nam sinh yêu thích.

Nhận thấy bản thân có khả năng chịu áp lực và làm việc độc lập, Khôi luôn mong muốn theo học ngành Kiểm toán nhưng sau đó lại không đỗ vào ngành này. Sau khi biết sinh viên vào trường sẽ có cơ hội thi sang các lớp chất lượng cao, Khôi quyết định thử sức. Lần này, nam sinh thi đỗ vào ngành Kiểm toán chất lượng cao đúng như nguyện vọng. 

Vào đại học, Nguyên Khôi luôn xem câu nói của một số anh chị đi trước như kim chỉ nam, rằng “nếu lên đại học vẫn giữ cường độ học tập và quyết tâm như những năm cấp 3, ra trường sẽ có cơ hội tốt nghiệp bằng Xuất sắc”. Vì thế ngay từ năm nhất, Khôi đã giữ thái độ nghiêm túc học hành.

“Em nghĩ rằng sự chủ động và kỷ luật rất quan trọng, nhất là trong việc học. Nhờ thế, mình hoàn toàn có thể đạt những mục tiêu đã đề ra. Mặt khác, do khối lượng kiến thức trong chương trình khá dày nhưng thời gian trên lớp hạn hẹp, thầy cô không thể giảng hết tất cả. Nếu không chủ động tìm tòi, đọc thêm tài liệu, sinh viên sẽ không nắm chắc kiến thức được”, Khôi nói.

Đặt quyết tâm như vậy nhưng trong học kỳ đầu tiên, Khôi vẫn gặp phải “vấn đề chung” của sinh viên năm nhất là các môn đại cương, chẳng hạn môn Kinh tế vĩ mô.

“Những buổi đầu tiên em không hiểu gì cả. Bạn bè xung quanh em ai cũng 'kêu trời' vì môn này. Không biết phải hỏi ai, em quyết định tìm kiếm trên mạng xem có lớp nào dạy thêm không. Được một người bạn giới thiệu, em đi học thêm khoảng 7-8 buổi và dần hiểu bản chất vấn đề”, Khôi kể.

Khôi cho rằng việc học thêm không xấu nếu xuất phát từ nhu cầu chính đáng là học để lấy kiến thức. Khi việc học trên lớp chưa đủ với những môn khó tiếp thu, việc đi học thêm sẽ giúp sinh viên hiểu cặn kẽ hơn vấn đề.

Ngoài ra sau mỗi buổi học, Khôi thường dành thời gian đọc lại các slide bài giảng, ghi lại những kiến thức cần nhớ và làm bài tập trong giáo trình. Nam sinh cũng có một nhóm bạn thường xuyên hỗ trợ, chia sẻ tài liệu học tập cho nhau trước mỗi kỳ thi. Cách học nhóm, theo Khôi, rất hiệu quả, bởi nếu chỉ tìm kiếm một mình sẽ khó tìm được nguồn tài liệu phong phú như thế.

Bên cạnh đó, để đạt được kết quả tốt ở từng môn học, Khôi cho rằng sinh viên luôn phải nỗ lực từng chút, dù là điểm chuyên cần, giữa kỳ hay cuối kỳ. “Trong các buổi học, em thường giơ tay lên bảng chữa bài hoặc trả lời. Nhờ vậy, giảng viên cũng sẽ cộng vào các điểm thành phần, nâng điểm tổng kết lên”.

Luôn nhận thức được tầm quan trọng của việc học và đặt làm ưu tiên hàng đầu, nhờ vậy, trong 8 kỳ học, Nguyên Khôi đều giành được học bổng khuyến khích của nhà trường.

Ngoài việc học, Khôi tích cực tham gia các hoạt động của trường. Được kết nạp Đảng ngay từ những năm cấp 3, lên năm nhất đại học, Khôi được bầu làm Bí thư chi đoàn. Đến năm 3, nam sinh đảm nhiệm vị trí Bí thư chi bộ sinh viên, sau đó là Uỷ viên Ban thường vụ Đoàn Thanh niên nhà trường. 

Cùng lúc kiêm nhiệm nhiều vai trò, giai đoạn căng thẳng nhất với Khôi là cuối năm 4, khi vừa vượt qua các vòng thi khắt khe và giành được suất thực tập tại Deloitte - một trong 4 công ty kiểm toán lớn nhất thế giới.

Dù là thực tập sinh nhưng trong suốt 4 tháng tại Deloitte, Khôi đối mặt với áp lực về khối lượng công việc khổng lồ. Thời gian đầu, nam sinh cũng “vỡ mộng” vì không biết bắt đầu từ đâu và làm như thế nào. Ngoài việc nhờ tới sự hướng dẫn, hỗ trợ của các anh chị đồng nghiệp, Khôi tìm đọc lại tài liệu liên quan đến khách hàng từ những năm trước để xem cách thức làm.

Không ít lần Khôi gặp rắc rối vì chưa có kinh nghiệm hay đặt câu hỏi cho khách hàng quá chung chung, nhưng cũng nhờ đó nam sinh thấy mình trưởng thành, tự tin giao tiếp và thấu hiểu hơn về nghề.

“Áp lực lớn cũng khiến em trưởng thành nhanh hơn. Việc bắt tay hành động trong thực tiễn giúp em hiểu mình cần làm và học thêm những gì, bởi chỉ học lý thuyết suông thôi sẽ không làm được”. 

Tân thủ khoa Trường ĐH Kinh tế Quốc dân cũng cho rằng, học và làm là hai việc hoàn toàn khác nhau. Dù ở trong trường có đạt thành tích gì, khi bước ra ngoài thị trường lao động, ai cũng sẽ phải làm lại từ đầu.

Hiện tại, Nguyên Khôi vẫn muốn thử sức với công việc liên quan đến chuyên ngành là làm tại bộ phận kiểm soát nội bộ của một công ty ở Hà Nội. Tuy nhiên, 10X vẫn mong muốn tiếp tục “apply” học bổng thạc sĩ ở các nước châu Âu để phục vụ cho công việc trong tương lai.

Là cựu học sinh chuyên Anh của Trường THPT Chuyên Lương Văn Thụy (Ninh Bình), Khôi đỗ vào ngành Kinh tế đầu tư của Trường ĐH Kinh tế Quốc dân theo diện xét tuyển học bạ của học sinh trường chuyên. Tuy nhiên, đây không phải ngành học nam sinh yêu thích.

Nhận thấy bản thân có khả năng chịu áp lực và làm việc độc lập, Khôi luôn mong muốn theo học ngành Kiểm toán nhưng sau đó lại không đỗ vào ngành này. Sau khi biết sinh viên vào trường sẽ có cơ hội thi sang các lớp chất lượng cao, Khôi quyết định thử sức. Lần này, nam sinh thi đỗ vào ngành Kiểm toán chất lượng cao đúng như nguyện vọng. 

Vào đại học, Nguyên Khôi luôn xem câu nói của một số anh chị đi trước như kim chỉ nam, rằng “nếu lên đại học vẫn giữ cường độ học tập và quyết tâm như những năm cấp 3, ra trường sẽ có cơ hội tốt nghiệp bằng Xuất sắc”. Vì thế ngay từ năm nhất, Khôi đã giữ thái độ nghiêm túc học hành.

“Em nghĩ rằng sự chủ động và kỷ luật rất quan trọng, nhất là trong việc học. Nhờ thế, mình hoàn toàn có thể đạt những mục tiêu đã đề ra. Mặt khác, do khối lượng kiến thức trong chương trình khá dày nhưng thời gian trên lớp hạn hẹp, thầy cô không thể giảng hết tất cả. Nếu không chủ động tìm tòi, đọc thêm tài liệu, sinh viên sẽ không nắm chắc kiến thức được”, Khôi nói.

Đặt quyết tâm như vậy nhưng trong học kỳ đầu tiên, Khôi vẫn gặp phải “vấn đề chung” của sinh viên năm nhất là các môn đại cương, chẳng hạn môn Kinh tế vĩ mô.

“Những buổi đầu tiên em không hiểu gì cả. Bạn bè xung quanh em ai cũng 'kêu trời' vì môn này. Không biết phải hỏi ai, em quyết định tìm kiếm trên mạng xem có lớp nào dạy thêm không. Được một người bạn giới thiệu, em đi học thêm khoảng 7-8 buổi và dần hiểu bản chất vấn đề”, Khôi kể.

Khôi cho rằng việc học thêm không xấu nếu xuất phát từ nhu cầu chính đáng là học để lấy kiến thức. Khi việc học trên lớp chưa đủ với những môn khó tiếp thu, việc đi học thêm sẽ giúp sinh viên hiểu cặn kẽ hơn vấn đề.

Ngoài ra sau mỗi buổi học, Khôi thường dành thời gian đọc lại các slide bài giảng, ghi lại những kiến thức cần nhớ và làm bài tập trong giáo trình. Nam sinh cũng có một nhóm bạn thường xuyên hỗ trợ, chia sẻ tài liệu học tập cho nhau trước mỗi kỳ thi. Cách học nhóm, theo Khôi, rất hiệu quả, bởi nếu chỉ tìm kiếm một mình sẽ khó tìm được nguồn tài liệu phong phú như thế.

Bên cạnh đó, để đạt được kết quả tốt ở từng môn học, Khôi cho rằng sinh viên luôn phải nỗ lực từng chút, dù là điểm chuyên cần, giữa kỳ hay cuối kỳ. “Trong các buổi học, em thường giơ tay lên bảng chữa bài hoặc trả lời. Nhờ vậy, giảng viên cũng sẽ cộng vào các điểm thành phần, nâng điểm tổng kết lên”.

Luôn nhận thức được tầm quan trọng của việc học và đặt làm ưu tiên hàng đầu, nhờ vậy, trong 8 kỳ học, Nguyên Khôi đều giành được học bổng khuyến khích của nhà trường.

Ngoài việc học, Khôi tích cực tham gia các hoạt động của trường. Được kết nạp Đảng ngay từ những năm cấp 3, lên năm nhất đại học, Khôi được bầu làm Bí thư chi đoàn. Đến năm 3, nam sinh đảm nhiệm vị trí Bí thư chi bộ sinh viên, sau đó là Uỷ viên Ban thường vụ Đoàn Thanh niên nhà trường. 

Cùng lúc kiêm nhiệm nhiều vai trò, giai đoạn căng thẳng nhất với Khôi là cuối năm 4, khi vừa vượt qua các vòng thi khắt khe và giành được suất thực tập tại Deloitte - một trong 4 công ty kiểm toán lớn nhất thế giới.

Dù là thực tập sinh nhưng trong suốt 4 tháng tại Deloitte, Khôi đối mặt với áp lực về khối lượng công việc khổng lồ. Thời gian đầu, nam sinh cũng “vỡ mộng” vì không biết bắt đầu từ đâu và làm như thế nào. Ngoài việc nhờ tới sự hướng dẫn, hỗ trợ của các anh chị đồng nghiệp, Khôi tìm đọc lại tài liệu liên quan đến khách hàng từ những năm trước để xem cách thức làm.

Không ít lần Khôi gặp rắc rối vì chưa có kinh nghiệm hay đặt câu hỏi cho khách hàng quá chung chung, nhưng cũng nhờ đó nam sinh thấy mình trưởng thành, tự tin giao tiếp và thấu hiểu hơn về nghề.

“Áp lực lớn cũng khiến em trưởng thành nhanh hơn. Việc bắt tay hành động trong thực tiễn giúp em hiểu mình cần làm và học thêm những gì, bởi chỉ học lý thuyết suông thôi sẽ không làm được”. 

Tân thủ khoa Trường ĐH Kinh tế Quốc dân cũng cho rằng, học và làm là hai việc hoàn toàn khác nhau. Dù ở trong trường có đạt thành tích gì, khi bước ra ngoài thị trường lao động, ai cũng sẽ phải làm lại từ đầu.

Hiện tại, Nguyên Khôi vẫn muốn thử sức với công việc liên quan đến chuyên ngành là làm tại bộ phận kiểm soát nội bộ của một công ty ở Hà Nội. Tuy nhiên, 10X vẫn mong muốn tiếp tục “apply” học bổng thạc sĩ ở các nước châu Âu để phục vụ cho công việc trong tương lai.