Bằng cách chơi game, AI của Google có thể xử lý tình huống nhanh hơn và hiệu quả hơn gấp 10 lần so với trước đây

Bằng cách chơi game, AI của Google có thể xử lý tình huống nhanh hơn và hiệu quả hơn gấp 10 lần so với trước đây
Theo: Nguyễn Hải Theo Trí Thức Trẻ
Thể loại: Khoa Học Công Nghệ
Trong các điều kiện thử nghiệm, nhờ cách huấn luyện mới này, AI có khả năng chơi game đồ họa tốt hơn hẳn so với con người.

Tuần trước, nhóm DeepMind của Google đã tiết lộ một cách tiếp cận mới để huấn luyện các mạng lưới học sâu thông qua việc kết hợp giữa các thuật toán cao cấp và các trò chơi điện tử kiểu cũ.

DeepMind, nhóm nghiên cứu chịu trách nhiệm phát triển AlphaGo, tin rằng máy tính có thể học được giống như cách làm của con người. Bằng cách sử dụng bộ công cụ huấn luyện của riêng họ, DMLab-30, vốn được xây dựng dựa trên game Quake III của hãng ID Software và một môi trường học tập dựa trên 57 games arcade của Atari, nhóm nghiên cứu phát triển một hệ thống huấn luyện hoàn toàn mới được gọi là Importance Weighted Actor-Learner Architectures (IMPALA).

Với IMPALA, một hệ thống AI không chỉ có khả năng chơi game và xử lý các tình huống hình ảnh giống như cách con người làm. Nhưng điều quan trọng hơn cả là nó có thể chơi một loạt các trò chơi điện tử rất nhanh và gửi các thông tin huấn luyện từ một loạt “các actor” (các tác nhân) tới một loạt “các learner” (những người học).

Thông thường, các mạng lưới học sâu sẽ nhìn ra mọi thứ giống như một game thủ đang chơi một trò chơi điện tử. Các nhà phát triển sẽ nói với máy tính các lệnh điều khiển đầu vào là gì, và nó sẽ chơi điện tử giống như một người chơi game với tay cầm gamepad thực.

Tuy nhiên, với IMPALA, hệ thống này không chỉ chơi game hiệu quả hơn gấp 10 lần so với các phương pháp khác, mà nó còn chơi nhiều game cùng một lúc. Việc này giống như có 30 game thủ hay nhiều hơn nữa cùng học cách chơi game Quake với một bộ não “bằng máy”, và nó sẽ thu thập được kinh nghiệm chơi game đó từ 30 game thủ cùng một lúc.

Dưới đây là đoạn video một người chơi thử nghiệm môi trường DMLab-30:

Một người chơi con người chơi thử trong môi trường DMLab-30.

Còn dưới đây là một máy tính sử dụng IMPALA:

Thử nghiệm khả năng chơi game của máy tính sử dụng IMPALA.

Tầm quan trọng của IMPALA

Một trong những thách thức mới nhất mà các nhà phát triển AI phải đối mặt là lượng thời gian và sức mạnh xử lý họ cần để huấn luyện một mạng lưới thần kinh nhân tạo. Không giống như việc lập trình truyền thống – nơi một người thông minh sẽ viết ra một loạt các dòng code để cuối cùng biến nó thành một chương trình – các máy tính tự động cần các quy tắc để chúng có thể thử nghiệm và tìm ra cách để giải quyết các vấn đề trong thế giới thực.

Vì chúng ta không thể chỉ xây dựng nên các robot và để mặc chúng tự suy nghĩ ra mọi thứ, các bộ mô phỏng được sử dụng để giúp sức cho việc phát triển. Vì nguyên nhân này, việc học sâu tăng cường là kỹ thuật rất quan trọng cho các tác vụ yêu cầu khả năng xử lý tự động tùy theo ngữ cảnh.

Ví dụ, một chiếc ô tô tự lái sẽ có thể tự xác định liệu nó nên tăng tốc hay giảm tốc. Nhưng nó sẽ không quyết định việc có lái qua mặt trước một cửa hàng tiện lợi hay không. Nó học được cách ra những loại quyết định nào và làm thế nào thực hiện chúng trong một môi trường mô phỏng.

Một vấn đề khác IMPALA giải quyết là về khả năng mở rộng. Việc tinh chỉnh các thuật toán và điều chỉnh một vài yếu tố khác có thể giúp giảm bớt thời gian đào tạo đi một vài phút, nhưng cuối cùng, điều làm nên một AI được huấn luyện thành công không phải dựa trên số giờ đăng nhập.

Để một cỗ máy tự động với mạng lưới thần kinh bên trong có thể xác định được tình huống nào có thể gây nguy hiểm đến cho con người hay gây hư hỏng cho hàng hóa trong kho, chúng phải có khả năng xử lý đủ cao đến hàng tỷ "khung hình" từ môi trường huấn luyện.

Trong khi đó, theo các nhà nghiên cứu, nếu “cung cấp đủ CPU cho mỗi actor” – IMPALA có thể đạt tỷ lệ xử lý tới 250.000 khung hình/giây hay 21 tỷ khung hình/ngày. Điều này làm AI của DeepMind có tốc độ nhanh nhất mà ta từng biết đối với các loại tác vụ này.

Và theo bản cáo bạch của IMPALA, AI này đang thực hiện tốt hơn cả các hệ thống AI trước và cả với con người. Chúng ta đều đã thấy AI của DeepMind chơi trò chơi tốt hơn con người như thế nào, giờ là lúc nó trình diễn điều đó.

Tham khảo The Next Web

Tham gia ngay thử thách thiết kế cánh tay robot của NASA để giành giải thưởng lên tới 5.000 USD

tinybook tinybook 2 ngày 10 giờ
Tham gia ngay thử thách thiết kế cánh tay robot của NASA để giành giải thưởng lên tới 5.000 USD
Thử thách sáng tạo với cánh tay robot Astrobee của NASA hứa hẹn sẽ đem tới cơ hội thể hiện tài năng lập trình và thiết kế của mọi công dân trên thế giới.

Đây là lý do vì sao chẳng ai trong ngành công nghiệp xe hơi nói về robot, trừ Elon Musk

tinybook tinybook 2 ngày 11 giờ
Đây là lý do vì sao chẳng ai trong ngành công nghiệp xe hơi nói về robot, trừ Elon Musk
CB Insights - một công ty phân tích dữ liệu - đã sử dụng một thuật toán ngôn ngữ học để phân tích các phiên họp cổ đông của GM, Ford, Daimler và Tesla. Kết quả cho thấy, Tesla dành nhiều thời gian để nói về robot hơn hẳn 3 công ty còn lại.

Elon Musk muốn loại bỏ coban khỏi pin thế hệ mới, nhưng điều ấy là vô cùng khó khăn

tinybook tinybook 2 ngày 17 giờ
Elon Musk muốn loại bỏ coban khỏi pin thế hệ mới, nhưng điều ấy là vô cùng khó khăn
Chúng ta hãy cùng đi tìm hiểu lý do tại sao việc chế tạo ra một loại pin không coban - nguyên tố được gán cho cái tên "kim cương máu của ngành công nghiệp sản xuất pin", lại là điều không hề đơn giản.

Gặp gỡ nhà tiên tri lợn vừa đưa ra dự đoán 4 đội bóng lọt vào bán kết World Cup 2018

tinybook tinybook 3 ngày 3 giờ
Gặp gỡ nhà tiên tri lợn vừa đưa ra dự đoán 4 đội bóng lọt vào bán kết World Cup 2018
Chú lợn có tên Mystic Marcus từng nắm giữ nhiều kỷ lục dự đoán chính xác đã đưa ra phỏng đoán về những đội bóng góp mặt tại bán kết trong khuôn khổ World Cup 2018.

Công nghệ giá rẻ này có thể biến CO2 thành nhiên liệu cho xe hơi và máy bay với chi phí chưa đầy 100 USD

tinybook tinybook 3 ngày 8 giờ
Công nghệ giá rẻ này có thể biến CO2 thành nhiên liệu cho xe hơi và máy bay với chi phí chưa đầy 100 USD
Các nhà khoa học Mỹ và Canada đang nghiên cứu một phương pháp mới giúp biển đổi CO2 trong không khí trở thành nhiên liệu sử dụng cho xe hơi và máy bay với chi phí vô cùng rẻ, chỉ chưa đầy 100 USD.

CHÍNH THỨC: Chứng minh được thuyết tương đối của Einstein ở mức độ thiên hà

tinybook tinybook 3 ngày 14 giờ
CHÍNH THỨC: Chứng minh được thuyết tương đối của Einstein ở mức độ thiên hà
Dường như sở thích của cả giới khoa học là chứng minh những gì thiên tài Albert Einstein nói là đúng, bên cạnh sở thích chứng minh những gì thiên tài này nói là sai.

Thế giới sẽ sử dụng 50% năng lượng có thể tái tạo và 11% than đá vào năm 2050

tinybook tinybook 3 ngày 16 giờ
Thế giới sẽ sử dụng 50% năng lượng có thể tái tạo và 11% than đá vào năm 2050
Theo một báo cáo mới đây của Bloomberg New Energy Finance về những thay đổi trong sản xuất điện đến năm 2050, thì trong 33 năm tới, thế giới sẽ sản sinh gần 50% điện năng từ năng lượng có thể tái tạo.

Robot có khả năng đọc suy nghĩ của con người sẽ xuất hiện sớm hơn bạn nghĩ

tinybook tinybook 3 ngày 17 giờ
Robot có khả năng đọc suy nghĩ của con người sẽ xuất hiện sớm hơn bạn nghĩ
Robot hiện nay cực kỳ phổ biến, và chúng ngày một thông minh hơn.

Baidu phát triển thành công thuật toán AI có thể phát hiện ung thư chính xác hơn cả chuyên gia y tế

tinybook tinybook 4 ngày 16 giờ
Baidu phát triển thành công thuật toán AI có thể phát hiện ung thư chính xác hơn cả chuyên gia y tế
Các nhà nghiên cứu trí tuệ nhân tạo tại Baidu mới đây vừa công bố một thuật toán deep learning mới, hỗ trợ các chuyên gia y tế xác định sự tồn tại của các khối u hay ung thư một cách chính xác hơn.

Những người này khẳng định mình bị... dị ứng với sóng Wifi, nhưng sự thực đằng sau là gì?

tinybook tinybook 6 ngày 12 giờ
Những người này khẳng định mình bị... dị ứng với sóng Wifi, nhưng sự thực đằng sau là gì?
Chứng bệnh kỳ lạ gì thế? Mà biết đâu lại có thật, vì chẳng phải chúng ta từng có người dị ứng với nước hay sao?

Điều khiển được hạt nước trên bảng mạch, phòng thí nghiệm MIT tạo ra cách điều chế thuốc đột phá ít tốn kém hơn nhiều trước đây

tinybook tinybook 6 ngày 14 giờ
Điều khiển được hạt nước trên bảng mạch, phòng thí nghiệm MIT tạo ra cách điều chế thuốc đột phá ít tốn kém hơn nhiều trước đây
Một cách thức thực hiện công nghệ kênh dẫn vi lưu khác, cho phép ta có thể thực hiện những thử nghiệm sinh học hiệu quả và bớt tốn kém hơn.

Thắng đội tuyển Đức, người dân Mexico ăn mừng gây ra cả động đất. Đây là giải thích khoa học đằng sau cơn địa chấn này

tinybook tinybook 1 tuần 11 giờ
Thắng đội tuyển Đức, người dân Mexico ăn mừng gây ra cả động đất. Đây là giải thích khoa học đằng sau cơn địa chấn này
Người dân Mexico đã thực sự làm nên kì tích! Hai kì tích chỉ trong vòng một ngày!

Thử nghiệm đơn giản với cổ tay cho biết bạn có thể làm người mẫu, vận động viên hay võ sĩ sumo

tinybook tinybook 1 tuần 12 giờ
Thử nghiệm đơn giản với cổ tay cho biết bạn có thể làm người mẫu, vận động viên hay võ sĩ sumo
Một lần nữa, người Nhật lại khiến Internet bất ngờ vì phương thức đánh giá thể trạng đơn giản mà đầy hiệu quả.

Viễn cảnh thất nghiệp của công nhân nhà kho tại Trung Quốc rõ nét khi nhà máy 200.000 đơn hàng mỗi ngày của JD chỉ cần có 4 người làm

tinybook tinybook 1 tuần 17 giờ
Viễn cảnh thất nghiệp của công nhân nhà kho tại Trung Quốc rõ nét khi nhà máy 200.000 đơn hàng mỗi ngày của JD chỉ cần có 4 người làm
JD.com, một gã khổng lồ thương mại điện tử tại Trung Quốc, vừa xây dựng một trung tâm hàng hóa lớn tại Thượng Hải với chức năng tổ chức, đóng gói và vận chuyển 200.000 đơn hàng mỗi ngày. Công việc của 4 nhân viên duy nhất tại đây là...bảo trì robot.

Ngắm con đường dốc nhất thế giới với độ dốc 35%, làm chủ yếu từ bê tông vì lo nhựa đường bị chảy xuống

tinybook tinybook 1 tuần 1 ngày
Ngắm con đường dốc nhất thế giới với độ dốc 35%, làm chủ yếu từ bê tông vì lo nhựa đường bị chảy xuống
Phải là người có sức khỏe thể chất cực tốt thì bạn mới có thể vượt qua được con dốc Baldwin Street với độ dốc lên tới 19 độ mà không bở hơi tai.

Bạn biết gì về hệ thống cáp quang biển dài 885.000km, "xương sống" của mạng lưới Internet trên toàn thế giới?

tinybook tinybook 1 tuần 1 ngày
Bạn biết gì về hệ thống cáp quang biển dài 885.000km, "xương sống" của mạng lưới Internet trên toàn thế giới?
Cáp quang biển là hệ thống phức tạp, được bảo vệ rất cẩn thận, không phải "như cọng bún" mà ta thường nói đùa mỗi khi đứt cáp.

Nếu là người ưa thích bơi lội, hãy cẩn thận trong việc lựa chọn bể bơi của mình!

tinybook tinybook 1 tuần 1 ngày
Nếu là người ưa thích bơi lội, hãy cẩn thận trong việc lựa chọn bể bơi của mình!
Vì theo thông tin mới nhất được thông báo từ Trung tâm Kiểm soát và Phòng ngừa Dịch bệnh (CDC), bể bơi là nơi cư ngụ của hàng hà sa số các loại vi khuẩn.

Thế giới sẽ ra sao nếu loài gián tuyệt chủng? Câu trả lời sẽ khiến bạn bất ngờ

tinybook tinybook 1 tuần 1 ngày
Thế giới sẽ ra sao nếu loài gián tuyệt chủng? Câu trả lời sẽ khiến bạn bất ngờ
Giờ đây bạn đã không còn phải hít thở chung bầu không khí với loài sinh vật gớm ghiếc này nữa...

Sử dụng âm thanh và siêu thanh, các nhà nghiên cứu tấn công thành công ổ cứng HDD và hệ điều hành máy tính

tinybook tinybook 1 tuần 1 ngày
Sử dụng âm thanh và siêu thanh, các nhà nghiên cứu tấn công thành công ổ cứng HDD và hệ điều hành máy tính
Trong thời đại số, sinh ra những vũ khí tấn công công nghệ hoàn toàn mới.

Bên trong nhóm Grand Challenge của Amazon - Phòng thí nghiệm bí mật nghiên cứu ung thư và các dự án mạo hiểm khác

tinybook tinybook 1 tuần 2 ngày
Bên trong nhóm Grand Challenge của Amazon - Phòng thí nghiệm bí mật nghiên cứu ung thư và các dự án mạo hiểm khác
Đây như một phiên bản Google X trong Amazon khi hầu hết các lãnh đạo của nhóm đều đến từ Google X với vai trò và nhiệm vụ tương tự như vậy.

Yếu tố tâm lý đằng sau thành công của cặp tai nghe không dây AirPod

tinybook tinybook 1 tuần 2 ngày
Yếu tố tâm lý đằng sau thành công của cặp tai nghe không dây AirPod
Dù bị cả thế giới internet cười nhạo khi bộ đôi tai nghe không dây này ra mắt, nhưng giờ AirPod đã trở thành chiếc tai nghe không dây bán chạy hàng đầu thế giới. Khoa học về tâm lý con người có thể giải thích cho điều này.

Khoa học đã chứng minh: Nhện là bạn, không phải kẻ thù!

tinybook tinybook 1 tuần 2 ngày
Khoa học đã chứng minh: Nhện là bạn, không phải kẻ thù!
Hãy tập làm quen với sự hiện diện của chúng trong căn nhà của mình bạn nhé.

Phát hiện xác của loài ếch cổ đại được bảo quản bên trong 4 mảnh hổ phách 100 triệu năm tuổi

tinybook tinybook 1 tuần 2 ngày
Phát hiện xác của loài ếch cổ đại được bảo quản bên trong 4 mảnh hổ phách 100 triệu năm tuổi
Phát hiện này hết sức quan trọng, bởi hóa thạch của các sinh vật lưỡng cư sống trong rừng nhiệt đới rất hiếm, thêm nữa, các nhà khoa học chưa chắc chắn đâu là thời điểm mà ếch bắt đầu di cư đến môi trường nhiệt đới.

Giải ngố về VAR, công nghệ Video Hỗ trợ Trọng tài tại World Cup 2018 khiến không cầu thủ nào có thể chơi xấu được nữa

tinybook tinybook 1 tuần 2 ngày
Giải ngố về VAR, công nghệ Video Hỗ trợ Trọng tài tại World Cup 2018 khiến không cầu thủ nào có thể chơi xấu được nữa
Có những ý kiến trái chiều cho rằng VAR sẽ làm mất đi bản chất hay vốn có của bóng đá.

Ở Nhật Bản có hẳn một cuộc thi trưng bày cảnh quan nhà vườn ngay trên xe tải vô cùng độc đáo

tinybook tinybook 1 tuần 3 ngày
Ở Nhật Bản có hẳn một cuộc thi trưng bày cảnh quan nhà vườn ngay trên xe tải vô cùng độc đáo
Dù diện tích thùng xe tải khá nhỏ nhưng các nhà thiết kế vẫn khéo léo sắp xếp cảnh quan y hệt như một khu vườn trong thực tế.

Nhân viên Amazon viết tâm thư yêu cầu CEO Jeff Bezos ngừng cung cấp dịch vụ nhận diện khuôn mặt cho chính phủ

tinybook tinybook 2 ngày 12 giờ
Nhân viên Amazon viết tâm thư yêu cầu CEO Jeff Bezos ngừng cung cấp dịch vụ nhận diện khuôn mặt cho chính phủ
Ngoài ra, họ còn kêu gọi tỷ phú này loại bỏ công ty dữ liệu lớn Palantir khỏi dịch vụ đám mây Amazon Web Services.

Mỹ chế tạo máy tính siêu nhỏ, kích thước chỉ bằng một góc hạt gạo nhưng vẫn nghe nhạc, xem phim, chơi game thoải mái

tinybook tinybook 2 ngày 15 giờ
Mỹ chế tạo máy tính siêu nhỏ, kích thước chỉ bằng một góc hạt gạo nhưng vẫn nghe nhạc, xem phim, chơi game thoải mái
Một trường đại học tại Mỹ mới đây đã chế tạo ra được một máy tính siêu nhỏ với kích thước chỉ bằng một góc của hạt gạo.

Bực bội vì Facebook thay đổi thuật toán, trang báo châm biếm hài hước The Onion lập tức cho Mark Zuckerberg.... "ăn hành"

tinybook tinybook 2 ngày 15 giờ
Bực bội vì Facebook thay đổi thuật toán, trang báo châm biếm hài hước The Onion lập tức cho Mark Zuckerberg.... "ăn hành"
Các bài viết của báo The Onion (tạm dịch là Báo củ hành) mấy hôm nay liên tục lôi CEO của Facebook, anh Mark Zuckerberg ra làm trò cười.

Tranh cãi nảy lửa qua email, Elon Musk gọi kẻ phá hoại Tesla là "một con người tồi tệ"

tinybook tinybook 2 ngày 16 giờ
Tranh cãi nảy lửa qua email, Elon Musk gọi kẻ phá hoại Tesla là "một con người tồi tệ"
Tờ Washington Post đã cung cấp cho chúng ta đoạn hội thoại có phần căng thẳng giữa CEO của Tesla và Martin Tripp - cựu nhân viên của công ty này bị buộc tội đã đánh cắp bí mật thương mại và lan truyền thông tin sai sự thật.

Australia: Internet quá lag để xem World Cup, Thủ tướng đích thân "hỏi thăm" khiến nhà mạng răm rắp sửa lỗi

tinybook tinybook 2 ngày 16 giờ
Australia: Internet quá lag để xem World Cup, Thủ tướng đích thân "hỏi thăm" khiến nhà mạng răm rắp sửa lỗi
Đã cầm bản quyền World Cup thì đừng truyền qua mạng lag, nếu không sẽ bị Thủ tướng đến gõ cửa nhà nói chuyện như thế này đấy.
tinybook Công Nghệ Thông Tin








Chat