Bằng cách chơi game, AI của Google có thể xử lý tình huống nhanh hơn và hiệu quả hơn gấp 10 lần so với trước đây

Bằng cách chơi game, AI của Google có thể xử lý tình huống nhanh hơn và hiệu quả hơn gấp 10 lần so với trước đây
Theo: Nguyễn Hải Theo Trí Thức Trẻ
Thể loại: Khoa Học Công Nghệ
Trong các điều kiện thử nghiệm, nhờ cách huấn luyện mới này, AI có khả năng chơi game đồ họa tốt hơn hẳn so với con người.

Tuần trước, nhóm DeepMind của Google đã tiết lộ một cách tiếp cận mới để huấn luyện các mạng lưới học sâu thông qua việc kết hợp giữa các thuật toán cao cấp và các trò chơi điện tử kiểu cũ.

DeepMind, nhóm nghiên cứu chịu trách nhiệm phát triển AlphaGo, tin rằng máy tính có thể học được giống như cách làm của con người. Bằng cách sử dụng bộ công cụ huấn luyện của riêng họ, DMLab-30, vốn được xây dựng dựa trên game Quake III của hãng ID Software và một môi trường học tập dựa trên 57 games arcade của Atari, nhóm nghiên cứu phát triển một hệ thống huấn luyện hoàn toàn mới được gọi là Importance Weighted Actor-Learner Architectures (IMPALA).

Với IMPALA, một hệ thống AI không chỉ có khả năng chơi game và xử lý các tình huống hình ảnh giống như cách con người làm. Nhưng điều quan trọng hơn cả là nó có thể chơi một loạt các trò chơi điện tử rất nhanh và gửi các thông tin huấn luyện từ một loạt “các actor” (các tác nhân) tới một loạt “các learner” (những người học).

Thông thường, các mạng lưới học sâu sẽ nhìn ra mọi thứ giống như một game thủ đang chơi một trò chơi điện tử. Các nhà phát triển sẽ nói với máy tính các lệnh điều khiển đầu vào là gì, và nó sẽ chơi điện tử giống như một người chơi game với tay cầm gamepad thực.

Tuy nhiên, với IMPALA, hệ thống này không chỉ chơi game hiệu quả hơn gấp 10 lần so với các phương pháp khác, mà nó còn chơi nhiều game cùng một lúc. Việc này giống như có 30 game thủ hay nhiều hơn nữa cùng học cách chơi game Quake với một bộ não “bằng máy”, và nó sẽ thu thập được kinh nghiệm chơi game đó từ 30 game thủ cùng một lúc.

Dưới đây là đoạn video một người chơi thử nghiệm môi trường DMLab-30:

Một người chơi con người chơi thử trong môi trường DMLab-30.

Còn dưới đây là một máy tính sử dụng IMPALA:

Thử nghiệm khả năng chơi game của máy tính sử dụng IMPALA.

Tầm quan trọng của IMPALA

Một trong những thách thức mới nhất mà các nhà phát triển AI phải đối mặt là lượng thời gian và sức mạnh xử lý họ cần để huấn luyện một mạng lưới thần kinh nhân tạo. Không giống như việc lập trình truyền thống – nơi một người thông minh sẽ viết ra một loạt các dòng code để cuối cùng biến nó thành một chương trình – các máy tính tự động cần các quy tắc để chúng có thể thử nghiệm và tìm ra cách để giải quyết các vấn đề trong thế giới thực.

Vì chúng ta không thể chỉ xây dựng nên các robot và để mặc chúng tự suy nghĩ ra mọi thứ, các bộ mô phỏng được sử dụng để giúp sức cho việc phát triển. Vì nguyên nhân này, việc học sâu tăng cường là kỹ thuật rất quan trọng cho các tác vụ yêu cầu khả năng xử lý tự động tùy theo ngữ cảnh.

Ví dụ, một chiếc ô tô tự lái sẽ có thể tự xác định liệu nó nên tăng tốc hay giảm tốc. Nhưng nó sẽ không quyết định việc có lái qua mặt trước một cửa hàng tiện lợi hay không. Nó học được cách ra những loại quyết định nào và làm thế nào thực hiện chúng trong một môi trường mô phỏng.

Một vấn đề khác IMPALA giải quyết là về khả năng mở rộng. Việc tinh chỉnh các thuật toán và điều chỉnh một vài yếu tố khác có thể giúp giảm bớt thời gian đào tạo đi một vài phút, nhưng cuối cùng, điều làm nên một AI được huấn luyện thành công không phải dựa trên số giờ đăng nhập.

Để một cỗ máy tự động với mạng lưới thần kinh bên trong có thể xác định được tình huống nào có thể gây nguy hiểm đến cho con người hay gây hư hỏng cho hàng hóa trong kho, chúng phải có khả năng xử lý đủ cao đến hàng tỷ "khung hình" từ môi trường huấn luyện.

Trong khi đó, theo các nhà nghiên cứu, nếu “cung cấp đủ CPU cho mỗi actor” – IMPALA có thể đạt tỷ lệ xử lý tới 250.000 khung hình/giây hay 21 tỷ khung hình/ngày. Điều này làm AI của DeepMind có tốc độ nhanh nhất mà ta từng biết đối với các loại tác vụ này.

Và theo bản cáo bạch của IMPALA, AI này đang thực hiện tốt hơn cả các hệ thống AI trước và cả với con người. Chúng ta đều đã thấy AI của DeepMind chơi trò chơi tốt hơn con người như thế nào, giờ là lúc nó trình diễn điều đó.

Tham khảo The Next Web

Tàu Voyager 2 chính thức rời nhật quyển sau chuyến đi dài 41 năm, nhưng phải 30.000 năm nữa nó mới ra khỏi Hệ Mặt Trời!

tinybook tinybook 6 ngày 1 giờ
Tàu Voyager 2 chính thức rời nhật quyển sau chuyến đi dài 41 năm, nhưng phải 30.000 năm nữa nó mới ra khỏi Hệ Mặt Trời!
Tiếp bước Voyager 1, tàu Voyager 2 tiến ra vùng không gian giữa các vì sao. Đây là những gì nó phải đối diện trước mắt.

10 thí nghiệm khoa học kỳ lạ nhất lịch sử, từ uống rượu say xong lái xe cho tới để ong đốt vào "vùng nhạy cảm"

tinybook tinybook 6 ngày 16 giờ
10 thí nghiệm khoa học kỳ lạ nhất lịch sử, từ uống rượu say xong lái xe cho tới để ong đốt vào "vùng nhạy cảm"
Các nhà khoa học thực hiện thí nghiệm để chúng ta đỡ phải tò mò mà thử nghiệm.

Các nhà khoa học MIT sử dụng virus sinh học để tạo ra những cỗ máy tính chạy nhanh hơn

tinybook tinybook 6 ngày 16 giờ
Các nhà khoa học MIT sử dụng virus sinh học để tạo ra những cỗ máy tính chạy nhanh hơn
Bạn sẽ tiết kiệm được ít nhất 999.990 nano giây khi lưu tệp.

Trung Quốc dự định xây dựng căn cứ dưới đáy biển do AI toàn quyền điều hành

tinybook tinybook 6 ngày 17 giờ
Trung Quốc dự định xây dựng căn cứ dưới đáy biển do AI toàn quyền điều hành
Không phải con người, mà là những con robot sẽ đảm nhiệm công việc tưởng chừng như chỉ có trong phim khoa học viễn tưởng này.

Xem 7 tấm ảnh GIF mới nhất của Elon Musk: vẫn đẹp trai và giàu cảm xúc

tinybook tinybook 1 tuần 15 giờ
Xem 7 tấm ảnh GIF mới nhất của Elon Musk: vẫn đẹp trai và giàu cảm xúc
Vẫn là ông Musk già năm nào ...

Alaska đã làm thế nào để sửa những con đường hư hại do động đất chỉ trong vài ngày?

tinybook tinybook 1 tuần 1 ngày
Alaska đã làm thế nào để sửa những con đường hư hại do động đất chỉ trong vài ngày?
Cái người ta cần ở đây là "tốc độ", làm thế nào Alaska làm được điều này?

So sánh 3 chipset hàng đầu thế giới Android: Snapdragon 855 vs. Kirin 980 vs. Exynos 9820

tinybook tinybook 1 tuần 1 ngày
So sánh 3 chipset hàng đầu thế giới Android: Snapdragon 855 vs. Kirin 980 vs. Exynos 9820
Cho dù Snapdragon 855 đang dẫn trước hai đối thủ khác nhưng sức mạnh cả 3 con chip flagship đều thừa đủ nhanh cho đa số các ứng dụng.

Tin không? 60% sản lượng điện toàn hòn đảo này được tạo ra từ bã mía

tinybook tinybook 1 tuần 1 ngày
Tin không? 60% sản lượng điện toàn hòn đảo này được tạo ra từ bã mía
Thời điểm hiện tại, mía của đảo Mauritius đã tạo ra lượng nhiên liệu sinh khối, đáp ứng được 14% nhu cầu sử dụng điện của người dân Mauritius.

Nhận vốn từ Bill Gates, các nhà khoa học Harvard sẽ tiến hành "che Mặt Trời" để Trái Đất bớt nóng

tinybook tinybook 1 tuần 2 ngày
Nhận vốn từ Bill Gates, các nhà khoa học Harvard sẽ tiến hành "che Mặt Trời" để Trái Đất bớt nóng
Đây là lần đầu tiên, một nhóm các nhà khoa học đứng ra thực hiện cách thức giảm biến đổi khí hậu gây tranh cãi. Họ định sẽ che bớt ánh sáng Mặt Trời!

[Vietsub] Cụ ông 83 tuổi dành 50 năm để xây dựng hầm trú ẩn hạt nhân từ 42 chiếc xe buýt

tinybook tinybook 1 tuần 2 ngày
[Vietsub] Cụ ông 83 tuổi dành 50 năm để xây dựng hầm trú ẩn hạt nhân từ 42 chiếc xe buýt
Cụ ông cho biết: Căn hầm có đủ chỗ ở và "tất cả các tiện nghi sinh hoạt" cho khoảng 350 người để giúp con người gây dựng lại xã hội phòng trường hợp có xảy ra chiến tranh hạt nhân trong tương lai.

CIA hướng dẫn cách sinh hoạt để phi công bay 10 giờ liên tục không buồn đi vệ sinh, thử ngay nào

tinybook tinybook 1 tuần 2 ngày
CIA hướng dẫn cách sinh hoạt để phi công bay 10 giờ liên tục không buồn đi vệ sinh, thử ngay nào
CIA thông cảm với phi công, hiểu rõ gánh nặng của việc đi ngoài hơn bao giờ hết, nên đã soạn thảo ra một bản hướng dẫn chi tiết về cách ăn uống trước khi bay, tránh cho phi công buồn đi vệ sinh khi đang trên độ cao 21.000 mét.

Bằng chứng khoa học mới nhất về “công nghệ” xây kim tự tháp của người Ai Cập cổ cách đây 4.500 năm

tinybook tinybook 1 tuần 3 ngày
Bằng chứng khoa học mới nhất về “công nghệ” xây kim tự tháp của người Ai Cập cổ cách đây 4.500 năm
Làm cách nào mà người dân Ai Cập cổ thể đưa những khối đá trắng rất nặng và lớn lên cao để tạo nên những biểu tượng kim tự tháp khổng lồ bền vững với thời gian? Họ đã sử dụng một thiết bị đặc biệt nào đó hay có sự trợ giúp của người ngoài hành tinh? Bài toán xây dựng kim tự tháp Ai Cập mà các kỹ sư và nhà khoa học đau đầu trong 4.500 năm qua đã có thêm manh mối qua phát hiện gần đây của một nhóm nghiên cứu quốc tế.

Sự thật bất ngờ đằng sau bãi biển toàn "bỏng ngô" ở Tây Ban Nha

tinybook tinybook 1 tuần 3 ngày
Sự thật bất ngờ đằng sau bãi biển toàn "bỏng ngô" ở Tây Ban Nha
Đừng dại thử những miếng “bỏng ngô” ở trên bãi biển này vì sự thật đằng sau nó sẽ khiến bạn phải bất ngờ và biết mình đã may mắn không ăn phải.

Chiếc drone với đôi cánh siêu dẻo này có thể bay lượn như loài chim ngay cả khi trời giông gió

tinybook tinybook 1 tuần 3 ngày
Chiếc drone với đôi cánh siêu dẻo này có thể bay lượn như loài chim ngay cả khi trời giông gió
Flex-Plane là một chiếc drone vô cùng đặc biệt với đôi cánh siêu dẻo và khả năng bay lượn trên không trung vô cùng ấn tượng.

Chiếc máy X-ray độc đáo này có thể tạo hình ảnh 3D cơ thể người

tinybook tinybook 1 tuần 3 ngày
Chiếc máy X-ray độc đáo này có thể tạo hình ảnh 3D cơ thể người
MARS Bioimaging mới đây vừa công bố chiếc máy quét X-ray đầu tiên của hãng, được thiết kế bởi hai cha con Phil và Anthony Butler.

App tiết kiệm pin trong điện thoại của bạn có thực sự hiểu quả?

tinybook tinybook 1 tuần 3 ngày
App tiết kiệm pin trong điện thoại của bạn có thực sự hiểu quả?
Không có 1 chiếc điện thoại thông minh nào có thể hoạt động trong 24 giờ mà không cần sạc. Đây là lý do tại sao các ứng dụng tiết kiệm pin vẫn nằm trong số các ứng dụng phổ biến nhất. Nhưng các ứng dụng này có thực sự hiệu quả?

Trung Quốc phóng thành công tên lửa đưa tàu thăm dò lên vùng tối của Mặt Trăng, mang theo cả hạt giống để thử quang hợp

tinybook tinybook 1 tuần 3 ngày
Trung Quốc phóng thành công tên lửa đưa tàu thăm dò lên vùng tối của Mặt Trăng, mang theo cả hạt giống để thử quang hợp
Ngoài ra, sứ mệnh Mặt Trăng còn thu thập đất đá và khoáng thạch về để nghiên cứu.

Đây là những tiểu tiết bạn đã bỏ qua trong trailer Avengers: Endgame và giả thuyết đằng sau chúng

tinybook tinybook 1 tuần 4 ngày
Đây là những tiểu tiết bạn đã bỏ qua trong trailer Avengers: Endgame và giả thuyết đằng sau chúng
Đây là những gì chúng tôi nhận thấy trong trailer Avengers phần 4 và giả thuyết về chúng. Bạn nghĩ sao?

Tàu thăm dò InSight ghi lại âm thanh đầu tiên trên bề mặt Sao Hỏa

tinybook tinybook 1 tuần 4 ngày
Tàu thăm dò InSight ghi lại âm thanh đầu tiên trên bề mặt Sao Hỏa
"Nó chính là một âm thanh đến từ thế giới khác".

Lộ diện mẫu trực thăng chiến đấu đa dụng mới nhất của Nhật Bản sau 6 năm trì hoãn

tinybook tinybook 1 tuần 4 ngày
Lộ diện mẫu trực thăng chiến đấu đa dụng mới nhất của Nhật Bản sau 6 năm trì hoãn
Những năm qua, việc phát triển các loại máy bay mới cho Không quân Nhật Bản gặp rất nhiều khó khăn.

Vingroup đầu tư 4,5 triệu USD nghiên cứu giải mã gen người Việt

tinybook tinybook 1 tuần 5 ngày
Vingroup đầu tư 4,5 triệu USD nghiên cứu giải mã gen người Việt
Viện Nghiên cứu Dữ liệu lớn thuộc Vintech (Tập đoàn Vingroup) vừa công bố dự án Xây dựng cơ sở dữ liệu hệ biến dị di truyền của người Việt.

Fuji Xerox và Tổ chức Cứu trợ Trẻ em tiếp tục khởi động dự án trao tặng tài liệu học tập “Cho Em Vui Đến Trường”

tinybook tinybook 1 tuần 5 ngày
Fuji Xerox và Tổ chức Cứu trợ Trẻ em tiếp tục khởi động dự án trao tặng tài liệu học tập “Cho Em Vui Đến Trường”
Vừa qua, Công ty TNHH Fuji Xerox Việt Nam và công ty TNHH Fuji Xerox Hải Phòng phối hợp cùng tổ chức Tổ chức Cứu trợ Trẻ em (SC) đã khởi động thành công dự án Trao Tặng Tài Liệu Học Tập “Cho Em Vui Đến Trường” lần thứ 3 tại Cần Thơ và Yên Bái.

Giải ngố: Dấu vân tay người chết có thể mở khóa điện thoại hay không?

tinybook tinybook 1 tuần 5 ngày
Giải ngố: Dấu vân tay người chết có thể mở khóa điện thoại hay không?
Không giống máy đọc vân tay quang học kiểu cũ, các cảm biến vân tay điện dung trên hầu hết smartphone hiện nay đều không dễ đánh lừa bằng những cách đơn giản.

Nhà vật lý học vũ trụ nổi tiếng: trong ngành công nghệ, Elon Musk còn quan trọng hơn cả Steve Jobs, Jeff Bezos và Mark Zuckerberg

tinybook tinybook 1 tuần 5 ngày
Nhà vật lý học vũ trụ nổi tiếng: trong ngành công nghệ, Elon Musk còn quan trọng hơn cả Steve Jobs, Jeff Bezos và Mark Zuckerberg
Neil deGrasse Tyson không ngần ngại sử dụng những từ có cánh dành cho Elon Musk.

Nhờ một bộ fanart, Pokemon trong 'Detective Pikachu' mới bước ra đời thực nuột đến vậy!

tinybook tinybook 1 tuần 5 ngày
Nhờ một bộ fanart, Pokemon trong Detective Pikachu mới bước ra đời thực nuột đến vậy!
Production designer của bộ phim đã phát hiện ra những tác phẩm của Palmer trên DeviantArt và từ đây, mọi thứ mới bắt đầu.

Giải pháp bung dù đặc biệt này sẽ là cứu cánh hoàn hảo nếu không may drone bị hỏng động cơ cánh quạt

tinybook tinybook 1 tuần 6 ngày
Giải pháp bung dù đặc biệt này sẽ là cứu cánh hoàn hảo nếu không may drone bị hỏng động cơ cánh quạt
Một giải pháp tuyệt vời như Nexus sẽ là cứu cánh tuyệt vời giúp bạn tránh mất vài “chục củ” tiền mua drone mới nhờ cơ chế bung dù vô cùng thông minh.

Ngày càng nhiều nhóm hacker tìm ra cách theo dõi iPhone

tinybook tinybook 1 tuần 6 ngày
Ngày càng nhiều nhóm hacker tìm ra cách theo dõi iPhone
Cho dù iPhone vẫn là một thiết bị tiêu dùng khá bảo mật, nhưng lượng người dùng đông đảo đã biến chiếc smartphone này thành đối tượng hấp dẫn cho các hacker tài năng.

Khoan vội trách Apple: Cái chết của các cổng kết nối đã đưa chúng ta tới những trải nghiệm tiện lợi hơn

tinybook tinybook 6 ngày 15 giờ
Khoan vội trách Apple: Cái chết của các cổng kết nối đã đưa chúng ta tới những trải nghiệm tiện lợi hơn
Mỗi thay đổi đều bất tiện, vì khi các nhà sản xuất thay đổi thì người dùng ngay lập tức nghĩ đến chuyện... đưa trải nghiệm cũ trở lại.

Qualcomm giành chiến thắng, Tòa án Trung Quốc ra lệnh cấm bán nhiều dòng iPhone tại nước này

tinybook tinybook 1 tuần 1 ngày
Qualcomm giành chiến thắng, Tòa án Trung Quốc ra lệnh cấm bán nhiều dòng iPhone tại nước này
Chiến thắng của Qualcomm đã khiến cho iPhone X và những dòng sản phẩm cũ hơn bị cấm bán ra tại Trung Quốc.

2 chiếc iPhone vừa "lật tẩy" âm mưu chiếm 2,5 triệu USD tiền bảo hiểm của gã đàn ông sát hại chính vợ mình

tinybook tinybook 1 tuần 1 ngày
2 chiếc iPhone vừa "lật tẩy" âm mưu chiếm 2,5 triệu USD tiền bảo hiểm của gã đàn ông sát hại chính vợ mình
Đây không phải là lần đầu tiên iPhone giúp cảnh sát lần ra sự thật của các vụ án.
tinybook Công Nghệ Thông Tin








Chat