Nhật Bản: Kết hợp chụp cộng hưởng từ và Stable Diffusion, vẽ lại hình từ chính trí nhớ con người

Đó là kết quả nghiên cứu của các nhà khoa học thuộc đại học Osaka, Nhật Bản. Ở thời điểm hiện tại, con người vẫn đang tìm cách hiểu làm thế nào những chùm photon của ánh sáng, mô tả những hình dáng đồ vật và mọi thứ đi vào mắt người rồi biến thành hình ảnh trong não như thế nào. Và hoá ra, AI lại chính là công cụ có thể giúp chúng ta nghiên cứu điều đó.

Những hội thảo khoa học máy tính vài năm trở lại đây là nơi nhiều nhóm nghiên cứu phát hiện ra rằng, AI hoàn toàn đủ sức đọc những kết quả chụp sóng não bằng cộng hưởng từ (MRI - magnetic resonance imaging), rồi dịch những bước sóng ấy thành ngôn ngữ hình ảnh mà đôi mắt con người có thể hiểu được.

Anh em có thể nghĩ ngay đến một hoặc hai ứng dụng cực kỳ thiết thực và hữu ích cho cuộc sống con người khi kết hợp sóng não và AI biến sóng não thành hình ảnh hoặc ngôn ngữ. Một trong số đó là "ghi hình" lại giấc mơ khi chúng ta đi ngủ. Một ví dụ khác, đó là nói chuyện với những người bị liệt hoặc mất khả năng giao tiếp, chỉ cần đọc sóng não là biết họ cần gì hay đang mô tả thứ gì. Hay có bao giờ anh em thắc mắc thú cưng nhìn thế giới như thế nào không?



Nghe rất viễn tưởng đúng không? Ấy vậy mà chúng ta đang ở gần cái hiện thực ấy hơn những gì anh em tưởng tượng đấy. Quay trở lại với nghiên cứu của các nhà khoa học đại học Osaka. Họ kết hợp kết quả chụp MRI sóng não với Stable Diffusion, mô hình tạo hình ảnh theo kiểu phân bố dữ liệu dựa trên dự đoán xác suất của thuật toán.

Đương nhiên, đầu tiên phải huấn luyện thuật toán AI để nó hiểu sóng não có ý nghĩa gì trước đã. Để làm được điều này, các nhà khoa học cho AI train bằng những hình ảnh, đi kèm với chúng là những cụm từ mô tả cụ thể tình trạng sóng não, khi con người nhìn thấy từng hình ảnh tương ứng.

Stable Diffusion tỏ ra là một công cụ dễ huấn luyện hơn nhiều. Như mô tả ở trên, thay vì bắt AI học cách dịch sóng não, thì con người chủ động tạo ra những sóng não tương ứng với từng hình ảnh, rồi dạy cho AI theo cách trực quan hơn nhiều. Trong trường hợp nghiên cứu của người Nhật, họ sử dụng gói dữ liệu train AI từ đại học Minnesota, Mỹ, với 4 tình nguyện viên quét sóng não trong lúc nhìn 10 nghìn hình ảnh khác nhau. Một phần thư viện này không được đưa cho Stable Diffusion "học", để lấy làm đề thi, xem AI tạo hình từ dữ liệu sóng não chính xác tới đâu.

Sau đó, mô hình đã được huấn luyện được đem ra tạo hình ảnh từ những cụm từ khoá mô tả những gì diễn ra bên trong não dựa trên dữ liệu quét MRI. Trong 12 hình dưới đây, 6 hình trên là hình gốc được đưa cho người tình nguyện nghiên cứu xem, còn 6 hình dưới là Stable Diffusion tạo ra nhờ dữ liệu quét sóng não của họ:



Đến đây có một giới hạn. Những dữ liệu của việc não hoạt động, đặc biệt là ở thuỳ chẩm, là đủ để tạo ra bố cục và góc nhìn của hình ảnh. Nhưng để tạo ra những hình ảnh đồ vật sự vật cụ thể, nhìn vào biết đó là thứ gì, thì AI lại không có khả năng tóm lược. Để giải quyết vấn đề này, các nhà khoa học đại học Osaka đã kẹp thêm những từ khoá đi kèm với những bức ảnh trong gói dữ liệu huấn luyện AI. Lấy ví dụ nếu hình ảnh có cái tháp đồng hồ, thì cả sóng não lẫn mô tả chữ của bức ảnh đó đều sẽ có sự đồng nhất. Kết quả là dù hình trông mờ nhoè, nhưng nheo mắt lại thì cũng nhận ra chúng là gì.

Từ đó, những thử nghiệm tạo lại hình ảnh từ sóng não, thông qua Stable Diffusion, đã chế ra được những bức hình mô tả khái quát chú gáu bông, máy bay, tàu hoả, v.v…

Vấn đề kế tiếp của giải pháp dùng AI vẽ lại những gì diễn ra trong não của con người là, thử nghiệm này được huấn luyện dựa vào 4 cá nhân duy nhất, nếu muốn dùng AI để tạo hình từ sóng não người khác, sẽ phải huấn luyện lại từ đầu, vì não mỗi người vận hành một khác, sóng não khi nhìn cùng một hình ảnh sẽ khác, cường độ cũng khác. Dù vậy, theo nhà thần kinh học Iris Groen thuộc đại học Amsterdam: "Mức độ chính xác của giải pháp này thực sự đáng kinh ngạc."

Đọc thêm: https://tinhte.vn/thread/huong-dan-anh-em-cai-stable-diffusion-tao-hinh-bang-ai-mien-phi-nho-may-tinh-ca-nhan.3651314/

Hướng dẫn anh em cài Stable Diffusion, tạo hình bằng AI miễn phí nhờ máy tính cá nhân

Hiện giờ đã có rất nhiều giải pháp tạo hình ảnh từ những câu lệnh anh em đưa ra. Midjourney giờ thu tiền hàng tháng để anh em lên Discord gửi câu lệnh tạo hình ảnh. Bing Chat với sức mạnh của DALL-E cho anh em tạo ra những hình ảnh cơ bản nhờ sức…

tinhte.vn

Quảng cáo

Theo Science

CHUYÊN MỤC NGHỆ THUẬT LÀM GIÀU BỀN VỮNG

Nhấn vào đây để bắt đầu học

Khóa học Machine Learning cơ bản- Khoa học dữ liệu - AI

Nhấn vào đây để bắt đầu khóa học

==***==

Khoá học Quản trị Chiến lược Dành cho Lãnh đạo Doanh nghiệp

Nhấn vào đây để bắt đầu khóa học

==***==

Nơi hội tụ Tinh Hoa Tri Thức - Khơi nguồn Sáng tạo

Để tham gia khóa học công nghệ truy cập link: http://thuvien.hocviendaotao.com

Mọi hỗ trợ về công nghệ email: dinhanhtuan68@gmail.com

--- 

Khóa học Hacker và Marketing từ A-Z trên ZALO!

Nhấn vào đây để bắt đầu khóa học

Khóa học Hacker và Marketing từ A-Z trên Facebook!

Nhấn vào đây để bắt đầu khóa học

Khóa đào tạo Power BI phân tích báo cáo để bán hàng thành công

Nhấn vào đây để bắt đầu khóa học

Bảo mật và tấn công Website - Hacker mũ trắng

Nhấn vào đây để bắt đầu khóa học ​

KHÓA HỌC LẬP TRÌNH PYTHON TỪ CƠ BẢN ĐẾN CHUYÊN NGHIỆP

Nhấn vào đây để bắt đầu khóa học

Nhấn vào đây để bắt đầu khóa học

Khóa học Lập trình Visual Foxpro 9 - Dành cho nhà quản lý và kế toán

Nhấn vào đây để bắt đầu khóa học

Khóa học hướng dẫn về Moodle chuyên nghiệp và hay

Xây dựng hệ thống đào tạo trực tuyến chuyên nghiệp tốt nhất hiện nay.

Nhấn vào đây để bắt đầu khóa học

KHÓA EXCEL CHUYÊN NGHIỆP

Nhấn vào đây để bắt đầu khóa học

Khóa học AutoIt dành cho dân IT và Marketing chuyên nghiệp

Nhấn vào đây để bắt đầu khóa học

Khoá học Word từ cơ bản tới nâng cao, học nhanh, hiểu sâu

Nhấn vào đây để bắt đầu khóa học

Khóa học hướng dẫn sử dụng Powerpoint từ đơn giản đến phức tạp HIỆU QUẢ

Nhấn vào đây để bắt đầu khóa học

Khóa học Thiết kế, quản lý dữ liệu dự án chuyên nghiệp cho doanh nghiệp bằng Bizagi

Khóa học Phân tích dữ liệu sử dụng Power Query trong Excel

Nhấn vào đây để bắt đầu khóa học

Khóa học Lập trình WEB bằng PHP từ cơ bản đến nâng cao

Nhấn vào đây để bắt đầu khóa học

Khóa học Phân tích dữ liệu sử dụng TableAU - Chìa khóa thành công!

Nhấn vào đây để bắt đầu khóa học

Khóa học Phân tích dữ liệu sử dụng SPSS - Chìa khóa thành công!

Nhấn vào đây để bắt đầu khóa học

Khóa học "Thiết kế bài giảng điện tử", Video, hoạt hình 

kiếm tiền Youtube bằng phần mềm Camtasia Studio

Nhấn vào đây để bắt đầu khóa học

Khóa học HƯỚNG DẪN THIẾT KẾ VIDEO CLIP CHO DÂN MARKETING CHUYÊN NGHIỆP

​​​​​

HƯỚNG DẪN THIẾT KẾ QUẢNG CÁO VÀ ĐỒ HỌA CHUYÊN NGHIỆP VỚI CANVA

Hãy tham gia khóa học để trở thành người chuyên nghiệp. Tuyệt HAY!😲👍

 KHÓA HỌC VIDEO- XÂY DỰNG PHẦN MỀM QUẢN LÝ BẰNG MICROSOFT ACCESS

GOOGLE SPREADSHEETS phê không tưởng

Khóa hoc lập trình bằng Python tại đây

Hãy tham gia khóa học để biết mọi thứ

Để tham gia tất cả các bài học, Bạn nhấn vào đây 

Khóa học lập trình cho bé MSWLogo

Nhấn vào đây để bắt đầu học

Khóa học Ba, Mẹ và Bé - Cùng bé lập trình  TUYỆT VỜI

Khóa học sử dụng Adobe Presenter-Tạo bài giảng điện tử

Khóa học vẽ tạo giao diện demo cho website

Để thành thạo Wordpress bạn hãy tham gia khóa học 

Tham gia khóa học tại đây

Khóa học sử dụng Edmodo để dạy và học hiện đại để thành công

Nhấn vào đây để bắt đầu khóa học

==***==

Bảo hiểm nhân thọ - Bảo vệ người trụ cột

Cập nhật công nghệ từ Youtube tại link: congnghe.hocviendaotao.com
Tham gia nhóm Facebook
Để tham gia khóa học công nghệ truy cập link: http://thuvien.hocviendaotao.com
Mọi hỗ trợ về công nghệ email: dinhanhtuan68@gmail.com

Nguồn: Tinh Tế

Share !