Theo báo cáo của IT House vào ngày 14 tháng 6, các nhà nghiên cứu của Microsoft gần đây đã trình diễn mô hình LLaVA-Med, chủ yếu được sử dụng trong nghiên cứu y sinh và có thể suy ra tình trạng bệnh lý của bệnh nhân dựa trên hình ảnh chụp CT và X-quang. Được biết, các nhà nghiên cứu của Microsoft đã hợp tác với một nhóm bệnh viện để có được một tập dữ liệu lớn tương ứng với văn bản hình ảnh y sinh để đào tạo các mô hình AI đa phương thức. Bộ dữ liệu bao gồm hình ảnh X-quang ngực, MRI, mô học, bệnh lý và CT, v.v., và phạm vi bao phủ tương đối toàn diện. Trong quá trình học, mô hình chủ yếu xoay quanh việc "mô tả nội dung của các hình ảnh đó" và "giải thích các khái niệm y sinh". Theo Microsoft, mô hình này kết thúc với "khả năng đối thoại đa phương thức xuất sắc" và "LLaVA-Med vượt trội so với các mô hình tiên tiến khác trong ngành về một số chỉ số trên ba bộ dữ liệu y sinh tiêu chuẩn được sử dụng để trả lời các câu hỏi về thị lực." Mô hình hiện là mã nguồn mở.