Bằng cách chơi game, AI của Google có thể xử lý tình huống nhanh hơn và hiệu quả hơn gấp 10 lần so với trước đây

Bằng cách chơi game, AI của Google có thể xử lý tình huống nhanh hơn và hiệu quả hơn gấp 10 lần so với trước đây
Theo: Nguyễn Hải Theo Trí Thức Trẻ
Thể loại: Khoa Học Công Nghệ
Trong các điều kiện thử nghiệm, nhờ cách huấn luyện mới này, AI có khả năng chơi game đồ họa tốt hơn hẳn so với con người.

Tuần trước, nhóm DeepMind của Google đã tiết lộ một cách tiếp cận mới để huấn luyện các mạng lưới học sâu thông qua việc kết hợp giữa các thuật toán cao cấp và các trò chơi điện tử kiểu cũ.

DeepMind, nhóm nghiên cứu chịu trách nhiệm phát triển AlphaGo, tin rằng máy tính có thể học được giống như cách làm của con người. Bằng cách sử dụng bộ công cụ huấn luyện của riêng họ, DMLab-30, vốn được xây dựng dựa trên game Quake III của hãng ID Software và một môi trường học tập dựa trên 57 games arcade của Atari, nhóm nghiên cứu phát triển một hệ thống huấn luyện hoàn toàn mới được gọi là Importance Weighted Actor-Learner Architectures (IMPALA).

Với IMPALA, một hệ thống AI không chỉ có khả năng chơi game và xử lý các tình huống hình ảnh giống như cách con người làm. Nhưng điều quan trọng hơn cả là nó có thể chơi một loạt các trò chơi điện tử rất nhanh và gửi các thông tin huấn luyện từ một loạt “các actor” (các tác nhân) tới một loạt “các learner” (những người học).

Thông thường, các mạng lưới học sâu sẽ nhìn ra mọi thứ giống như một game thủ đang chơi một trò chơi điện tử. Các nhà phát triển sẽ nói với máy tính các lệnh điều khiển đầu vào là gì, và nó sẽ chơi điện tử giống như một người chơi game với tay cầm gamepad thực.

Tuy nhiên, với IMPALA, hệ thống này không chỉ chơi game hiệu quả hơn gấp 10 lần so với các phương pháp khác, mà nó còn chơi nhiều game cùng một lúc. Việc này giống như có 30 game thủ hay nhiều hơn nữa cùng học cách chơi game Quake với một bộ não “bằng máy”, và nó sẽ thu thập được kinh nghiệm chơi game đó từ 30 game thủ cùng một lúc.

Dưới đây là đoạn video một người chơi thử nghiệm môi trường DMLab-30:

Một người chơi con người chơi thử trong môi trường DMLab-30.

Còn dưới đây là một máy tính sử dụng IMPALA:

Thử nghiệm khả năng chơi game của máy tính sử dụng IMPALA.

Tầm quan trọng của IMPALA

Một trong những thách thức mới nhất mà các nhà phát triển AI phải đối mặt là lượng thời gian và sức mạnh xử lý họ cần để huấn luyện một mạng lưới thần kinh nhân tạo. Không giống như việc lập trình truyền thống – nơi một người thông minh sẽ viết ra một loạt các dòng code để cuối cùng biến nó thành một chương trình – các máy tính tự động cần các quy tắc để chúng có thể thử nghiệm và tìm ra cách để giải quyết các vấn đề trong thế giới thực.

Vì chúng ta không thể chỉ xây dựng nên các robot và để mặc chúng tự suy nghĩ ra mọi thứ, các bộ mô phỏng được sử dụng để giúp sức cho việc phát triển. Vì nguyên nhân này, việc học sâu tăng cường là kỹ thuật rất quan trọng cho các tác vụ yêu cầu khả năng xử lý tự động tùy theo ngữ cảnh.

Ví dụ, một chiếc ô tô tự lái sẽ có thể tự xác định liệu nó nên tăng tốc hay giảm tốc. Nhưng nó sẽ không quyết định việc có lái qua mặt trước một cửa hàng tiện lợi hay không. Nó học được cách ra những loại quyết định nào và làm thế nào thực hiện chúng trong một môi trường mô phỏng.

Một vấn đề khác IMPALA giải quyết là về khả năng mở rộng. Việc tinh chỉnh các thuật toán và điều chỉnh một vài yếu tố khác có thể giúp giảm bớt thời gian đào tạo đi một vài phút, nhưng cuối cùng, điều làm nên một AI được huấn luyện thành công không phải dựa trên số giờ đăng nhập.

Để một cỗ máy tự động với mạng lưới thần kinh bên trong có thể xác định được tình huống nào có thể gây nguy hiểm đến cho con người hay gây hư hỏng cho hàng hóa trong kho, chúng phải có khả năng xử lý đủ cao đến hàng tỷ "khung hình" từ môi trường huấn luyện.

Trong khi đó, theo các nhà nghiên cứu, nếu “cung cấp đủ CPU cho mỗi actor” – IMPALA có thể đạt tỷ lệ xử lý tới 250.000 khung hình/giây hay 21 tỷ khung hình/ngày. Điều này làm AI của DeepMind có tốc độ nhanh nhất mà ta từng biết đối với các loại tác vụ này.

Và theo bản cáo bạch của IMPALA, AI này đang thực hiện tốt hơn cả các hệ thống AI trước và cả với con người. Chúng ta đều đã thấy AI của DeepMind chơi trò chơi tốt hơn con người như thế nào, giờ là lúc nó trình diễn điều đó.

Tham khảo The Next Web

Nghiên cứu này đã bác bỏ hoàn toàn quan niệm sai lầm "Cứ mỗi khi trái gió trở trời là lại đau nhức hết mình mẩy"

tinybook tinybook 3 tuần 1 ngày
Nghiên cứu này đã bác bỏ hoàn toàn quan niệm sai lầm "Cứ mỗi khi trái gió trở trời là lại đau nhức hết mình mẩy"
Nếu như bạn vẫn tin rằng thời tiết là nguyên nhân khiến các bậc lão thành trong gia đình đau đớn mỗi khi chuyển mùa, thì giờ đây, đã có bằng chứng để chứng minh rằng bạn sai rồi.

Đây là cây cầu được thiết kế để bị ngập một phần mỗi khi trời mưa tại Hà Lan

tinybook tinybook 3 tuần 1 ngày
Đây là cây cầu được thiết kế để bị ngập một phần mỗi khi trời mưa tại Hà Lan
Tại thành phố Nijmegen ở Hà Lan, mực nước ngày càng tăng của con sống Waal gần kề đang đe doạ đến cộng đồng dân cư sinh sống tại đây.

Nội dung buổi phỏng vấn cuối cùng của Stephen Hawking bàn bạc về sự kiện thiên văn hiếm có hồi năm ngoái: hai ngôi sao neutron va chạm

tinybook tinybook 3 tuần 2 ngày
Nội dung buổi phỏng vấn cuối cùng của Stephen Hawking bàn bạc về sự kiện thiên văn hiếm có hồi năm ngoái: hai ngôi sao neutron va chạm
Chẳng ai nghĩ rằng đó là buổi phỏng vấn cuối cùng của tượng đài thiên văn học, Stephen Hawking.

Trung Quốc thử nghiệm xe tăng không người lái, điều khiển bằng AI hoặc tay lái truyền thống

tinybook tinybook 3 tuần 2 ngày
Trung Quốc thử nghiệm xe tăng không người lái, điều khiển bằng AI hoặc tay lái truyền thống
Quân đội Trung Quốc đang bắt đầu thử nghiệm các mẫu xe tăng không người lái, có thể điều khiển từ xa dễ dàng bằng trí tuệ nhân tạo hoặc tay lái truyền thống.

Tiếp bước nhiều cơ quan hành pháp tại Mỹ, DEA muốn mua GrayKey, thiết bị bẻ khóa được mọi loại iPhone có giá 30.000 USD một bộ

tinybook tinybook 3 tuần 2 ngày
Tiếp bước nhiều cơ quan hành pháp tại Mỹ, DEA muốn mua GrayKey, thiết bị bẻ khóa được mọi loại iPhone có giá 30.000 USD một bộ
Chiếc hộp nhỏ bé tới từ GrayShift dường như có sức mạnh vô song.

Phát hiện ra ngân hà gần như không có vật chất tối, giới thiên văn học đau đầu không hiểu tại sao

tinybook tinybook 3 tuần 2 ngày
Phát hiện ra ngân hà gần như không có vật chất tối, giới thiên văn học đau đầu không hiểu tại sao
Chúng ta không sai, nhưng có lẽ sẽ phải chỉnh sửa chút khái niệm trong tương lai gần.

Đại học Hawaii tiến gần hơn tới mốc sử dụng 100% năng lượng tái tạo, đầu năm 2019 sẽ có khu vực đầu tiên

tinybook tinybook 3 tuần 3 ngày
Đại học Hawaii tiến gần hơn tới mốc sử dụng 100% năng lượng tái tạo, đầu năm 2019 sẽ có khu vực đầu tiên
Hồi năm 2015, Hawaii là bang đầu tiên của nước Mỹ tuyên bố sẽ đạt được mốc sử dụng năng lượng tái tạo 100% vào năm 2045.

Chuỗi siêu thị Walmart để những con robot tự động chạy quanh các kệ hàng hóa để làm gì?

tinybook tinybook 3 tuần 3 ngày
Chuỗi siêu thị Walmart để những con robot tự động chạy quanh các kệ hàng hóa để làm gì?
Đội ngũ “nhân viên thầm lặng” này đang tạo ra những kết quả tích cực đến các cửa hàng của Walmart.

Bất ngờ phát hiện xác ướp trong một chiếc quan tài tưởng chừng trống rỗng tại viện bảo tàng Úc

tinybook tinybook 3 tuần 3 ngày
Bất ngờ phát hiện xác ướp trong một chiếc quan tài tưởng chừng trống rỗng tại viện bảo tàng Úc
Trước đây chẳng ai quan tâm trong chiếc quan tài đó có chứa gì, bởi các tài liệu liên quan cho biết đây chỉ là một chiếc quan tài 2.500 tuổi trống rỗng mà thôi.

Đột phá trong chữa trị Alzheimer: thử nghiệm thành công kháng thể chữa Alzheimer trên chuột, kết quả cực kì khả quan

tinybook tinybook 3 tuần 3 ngày
Đột phá trong chữa trị Alzheimer: thử nghiệm thành công kháng thể chữa Alzheimer trên chuột, kết quả cực kì khả quan
Nghiên cứu mở đường cho một phương pháp chữa trị ít tác dụng phụ mà cực kì hiệu quả.

Trung Quốc cho rằng vệ tinh rơi sẽ cháy hết trước khi xuống tới Trái Đất, giới khoa học lại lo điều ngược lại

tinybook tinybook 3 tuần 3 ngày
Trung Quốc cho rằng vệ tinh rơi sẽ cháy hết trước khi xuống tới Trái Đất, giới khoa học lại lo điều ngược lại
Vào cuối tuần này, vệ tinh Thiên Cung 1 bị mất kiểm soát của Trung Quốc sẽ rơi xuống Trái Đất. Phía Trung Quốc cho rằng vệ tinh sẽ bị cháy rụi hoàn toàn nhưng giới khoa học lo ngại rằng kích thước của nó quá lớn, sẽ vẫn rơi xuống Trái Đất.

Loài giun dài nhất nhì thế giới này sẽ giúp ta tiêu diệt gián một cách dễ dàng

tinybook tinybook 3 tuần 4 ngày
Loài giun dài nhất nhì thế giới này sẽ giúp ta tiêu diệt gián một cách dễ dàng
Đây sẽ là ác mộng với loài gián, trả thù cho việc loài gián đã làm phiền ta quá lâu rồi.

Elon Musk định bán thêm cả gạch xếp hình, lấy từ chính công trường đào hầm của The Boring Company

tinybook tinybook 3 tuần 4 ngày
Elon Musk định bán thêm cả gạch xếp hình, lấy từ chính công trường đào hầm của The Boring Company
Một viên gạch trúng hai con chim: vừa thêm tiền, lại vừa đổ được phế thải.

MIT vừa chế tạo một con rô bốt cá mập y như thật

tinybook tinybook 3 tuần 5 ngày
MIT vừa chế tạo một con rô bốt cá mập y như thật
Trong tương lai không xa có thể chúng ta rất khó phân biệt đâu là cá thật hay giả vì công nghệ chế tạo rô bốt mới

Đâu sẽ là thiết bị thay thế chiếc smartphone trong tương lai?

tinybook tinybook 3 tuần 5 ngày
Đâu sẽ là thiết bị thay thế chiếc smartphone trong tương lai?
Với tốc độ phát triển chóng mặt của khoa học và công nghệ, rồi sẽ đến lúc triều đại của những chiếc smartphone phải suy tàn...

Với phương pháp làm lạnh dây thần kinh này, từ giờ bạn sẽ chẳng còn lo ngại chuyện tăng cân và béo phì nữa

tinybook tinybook 3 tuần 5 ngày
Với phương pháp làm lạnh dây thần kinh này, từ giờ bạn sẽ chẳng còn lo ngại chuyện tăng cân và béo phì nữa
Bằng cách triệt tiêu tín hiệu từ dạ dày lên não, giờ bạn chẳng còn phải lo ngại chuyện ăn uống vô độ của mình nữa

Máy quét não bây giờ cũng chỉ to bằng một cái mũ bảo hiểm mà thôi!

tinybook tinybook 3 tuần 5 ngày
Máy quét não bây giờ cũng chỉ to bằng một cái mũ bảo hiểm mà thôi!
Các nhà khoa học Anh vừa giới thiệu một máy quét quét não thế hệ mới với kích thước nhỏ gọn và tiện lợi cho phép người đội có thể di chuyển tự do trong quá trình quét, điều này cực kỳ có ý nghĩa với người già và trẻ con mắc các bệnh thần kinh.

Đây là lý do để bạn không nên tin vào những câu chuyện khởi nghiệp, dù nó do chính CEO của hãng nói ra

tinybook tinybook 3 tuần 5 ngày
Đây là lý do để bạn không nên tin vào những câu chuyện khởi nghiệp, dù nó do chính CEO của hãng nói ra
Khi đã thành công, những doanh nhân khởi nghiệp thường có xu hướng thêu dệt câu chuyện thành đạt của mình. Cổ tích giữa đời thường bỗng có thật.

Bác già 61 tuổi tự mình lái thành công quả tên lửa tự chế lên không, nhằm chứng minh Trái Đất phẳng

tinybook tinybook 3 tuần 5 ngày
Bác già 61 tuổi tự mình lái thành công quả tên lửa tự chế lên không, nhằm chứng minh Trái Đất phẳng
"Tôi có tin Trái Đất có hình cái đĩa không á? Tôi tin là có".

Các nhà khoa học khám phá ra lý do vì sao loài gián sống dai đến thế

tinybook tinybook 3 tuần 6 ngày
Các nhà khoa học khám phá ra lý do vì sao loài gián sống dai đến thế
Các nhà khoa học vừa khám phá ra lý do tại sao loài gián lại thích sống trong môi trường bẩn thiểu và cực kỳ khó để tiêu diệt, dường như những thứ đó đã được định sẵn trong ADN của chúng.

Hố sâu nhất Trái Đất: đào 24 năm liền được 12km, còn hơn 6300km nữa mới tới tâm Trái Đất

tinybook tinybook 3 tuần 6 ngày
Hố sâu nhất Trái Đất: đào 24 năm liền được 12km, còn hơn 6300km nữa mới tới tâm Trái Đất
Tại độ sâu ấy, hòn đá vốn cứng cáp lại có đặc tính ... giống nhựa.

Bạn có biết vỏ não của mình chứa tới 17 tỷ cái máy tính không?

tinybook tinybook 3 tuần 6 ngày
Bạn có biết vỏ não của mình chứa tới 17 tỷ cái máy tính không?
Đúng như vậy, mỗi neuron thần kinh của ta là một cỗ máy tính siêu việt.

Chuyện gì xảy ra nếu bạn chia cho 0 trên một cái máy tính cơ?

tinybook tinybook 3 tuần 6 ngày
Chuyện gì xảy ra nếu bạn chia cho 0 trên một cái máy tính cơ?
Không hề giống dòng chữ "Math Error" trên cái máy tính điện tử một chút nào.

Mãn nhãn với màn thử nghiệm nén thép nóng chảy bằng máy ép thủy lực

tinybook tinybook 3 tuần 6 ngày
Mãn nhãn với màn thử nghiệm nén thép nóng chảy bằng máy ép thủy lực
Những khối thép tưởng chừng chắc chắn và cứng cáp là vậy nhưng dưới tác dụng của nhiệt độ và lực nén từ máy ép thủy lực đều dễ dàng bị biến dạng ngay tức khắc.

Hành trình săn lùng kho báu Đức Quốc xã kéo dài đã gần một thế kỷ, đâu là nơi đỗ cuối cùng của những con tàu chở hàng tấn vàng?

tinybook tinybook 3 tuần 6 ngày
Hành trình săn lùng kho báu Đức Quốc xã kéo dài đã gần một thế kỷ, đâu là nơi đỗ cuối cùng của những con tàu chở hàng tấn vàng?
Nhiều người dân địa phương còn sống sót qua Thế chiến II kể rằng, họ đã tận mắt chứng kiến những hàng dài các đoàn xe chất theo vô số kho báu đến khu vực dãy núi Owl Mountains và chưa bao giờ quay trở lại.

Tìm ra những bằng chứng cho thấy thành phố cổ đại này chính là Atlantis trong truyền thuyết

tinybook tinybook 3 tuần 6 ngày
Tìm ra những bằng chứng cho thấy thành phố cổ đại này chính là Atlantis trong truyền thuyết
Nhiều người đồn đại rằng cư dân Atlantis hoặc là hậu duệ của thần thánh, hoặc là người ngoài hành tinh...

Chính việc chụp ảnh selfie sai cách đã khiến mũi bạn to hơn bình thường đến 30%

tinybook tinybook 3 tuần 6 ngày
Chính việc chụp ảnh selfie sai cách đã khiến mũi bạn to hơn bình thường đến 30%
Chẳng có vấn đề gì với nhan sắc của bạn cả - lỗi nằm ở chiếc máy ảnh!

Khoa học trả lời câu hỏi: Cần bao nhiêu tiền để mua hai chữ "hạnh phúc"?

tinybook tinybook 3 tuần 6 ngày
Khoa học trả lời câu hỏi: Cần bao nhiêu tiền để mua hai chữ "hạnh phúc"?
Câu trả lời phụ thuộc hoàn toàn vào việc bạn sống ở đâu trên Trái đất này.

Hội chứng "Trái tim tan vỡ" - khi bạn thực sự có thể chết vì chính cảm xúc của mình

tinybook tinybook 4 tuần 4 giờ
Hội chứng "Trái tim tan vỡ" - khi bạn thực sự có thể chết vì chính cảm xúc của mình
Không chỉ là một ẩn dụ về mặt văn học - hình ảnh trái tim tan vỡ thực sự là một loại bệnh lý đã được y văn ghi nhận.

Stephen Hawking thay đổi tư duy về lỗ đen vũ trụ như thế nào?

tinybook tinybook 4 tuần 7 giờ
Stephen Hawking thay đổi tư duy về lỗ đen vũ trụ như thế nào?
Khi Stephen Hawking đưa ra giả thuyết vào giữa những năm 1970, cho rằng lỗ đen (hố đen) vũ trụ xuất hiện tình trạng “rò rỉ” bức xạ, tan chậm như aspirin tan trong ly nước vậy. Ông đã chính thức “lật đổ” nguyên lý cốt lõi về Vũ trụ.
tinybook Công Nghệ Thông Tin








Chat