DeepMind spelar StarCraft II, live nu!

det var uppenbarligen det som var mest effektivt

@olle1884: Jag måste nog göra dig besviken, men jag tror inte att Alphastar kommer ge dig mer trovärdigt beteende från "AI" i spel som Skyrim.

AlphaStar är ett neuronnät som ser StarCraft lite som ett planeringsproblem. Deepmind har börjat med att träna neuronnätet genom att "titta" på PvP-matcher mellan mänskliga spelare. Där har AlphaStar tränats, jag vill ogärna använda orden "lärt sig", att för vid en viss indata producera viss utdata (en stor del av problemet har varit att översätta "tillståndet" i spelet till lämpliga indata till neuronnätet). Genom att "titta" på matcher har AlphaStar tränats att agera på olika sätt i olika situationer. Om detta händer gör X, om detta händer gör Y, eller om detta händer gör Z. När man väl har en agent (ett program) som hjälpligt kan spela StarCraft så gör man små ändringar i dess beteende (bygg mera enheter av en viss typ, var lite aggressivare) och får ett par nya agenter som också kan spela StarCraft, låter dem spela mot varandra och behåller de som presterar bäst. Man tar dessa nya agenter, gör små ändringar och låter dem spela mot varandra, o.s.v. Metoden kallas Reinforcement learning. De nämner i videon att agenterna som TLO spelade mot hade spelat matcher i motsvarande 200 år och "lärt sig" av sina misstag.

Jag tror tyvärr inte att de framsteg som gjorts med AlphaStar kommer göra att vi får bättre "AI" i spel som Skyrim. Det som kallas "AI" har väldigt lite att göra med forskningsområdet som kallas AI. Det är normalt väldigt enkla algoritmer som styr vakternas beteende och metoderna som har använts för AlphaStar passar inte riktigt för att träna vakterna till ett bättre beteende. Sorry, vi får nog leva med halmgubbevakter ett tag till.

Eller hur! Mina SC2 skills sträcker sig så långt att jag klarar story-delen på medelsvår nivå om jag sparar ofta

Vad jag förstod så är det exakt så den funkar. Dvs den måste spela om och om igen, och blir då bättre. De nämnde t.ex. i videon att den tidigare förlorat mot någon typ av osynlig enhet och överkompenserade för det nu genom att ha massa enheter som kan se osynliga enheter (jag har ingen koll på vad alla typer av enheter heter i starcraft). Men gissningsvis då så kommer den anpassa sig efter tex det misstaget som mana upptäckte med drops, om den får se det några gånger. Begränsningen ligger nog i hur mkt beräkningskraft som finns till hands, och hur många spel den utsätts för. Inte varje dag den får spela mot proffs hela dagarna.

fanns det inte en oslagbar ai till starcraft 1 med perfekt mutalisk micro? hade väl inte varit så svårt att koda en traditionell ai som abusar blink stalkers eller ska man vara imponerad över att den "upptäckte det själv" med en superdator som gjorde av med x antal GWh och reinforcement learning och sen totalt ballar ur över lite drop harass i sista gamet.

https://medium.com/@aleksipietikinen/an-analysis-on-how-deepm...

@olle1884: Poängen jag försöker göra är att det som i spel kallas för AI har väldigt lite med forskningsområdet artificiell intelligens att göra. Jag är mycket imponerad av vad Deepmind har gjort. Att få en neuronnät att faktiskt spela Go och StarCraft är helt galet coolt, men inget av det de gjort här kommer dyka upp i spel under överskådlig framtid. Vi pratar inte ens om att jämföra äpplen och päron, snarare äpplen och pizza. Spelen styrs av enkla procedurella algoritmer som har noll och intet med AI att göra.

Poängen med dessa "AI mot människor" är inte att visa på "riktig AI" då termen blivit väldigt generisk och utvattnad på senare år. Normalt sett har AI inneburit att en dator gör sig själv bättre, genom hårdvara och/eller mjukvara, och därmed blir bättre och bättre... Numera används tyvärr AI mest för att säga "en dator som lär sig och anpassar sig" vilket är ganska mycket bredare och lättare att göra. AI i spel har generellt sett "fusk" som gör att de ska kunna tävla mot människor och vara svåra, t.ex. wallhack, maphack, osv... Det imponerande med dessa "nya AI" är att de mer och mer får köra på samma "informationsnivå" som människor, även om de nu t.ex. har andra självklara fördelar som mängden inputs de kan göra och yta de kan se är större (även om de är begränsat i storlek på ytan i t.ex. SC2, så kan de iaf. hoppa runt och se allt flera gånger om per sekund)...

Problemet dock med den AI:n som SC2 har är lite att det kan lätt bli "den blinde leder den lame", dvs. de anpassar sig inte för diverse strategier (kan vara vilken cheese som helst nästan) om ingen motspelare redan har testat det mot dom. Dvs. de kräver mycket mer learning by doing istället för det vi människor kan göra mer normalt vilket är bara "lära sig från andra eller annat". T.ex. en människa sitter inte och testar 5488 gånger om det är bäst att vänta med att bygga units tills dess att man har försökt farma hela kartan... Däremot är det sånt en dator "kan" sitta och testa om och om igen väldigt snabbt och effektivt.

Sen tror jag som andra sagt att det dröjer innan dessa saker implementeras i spel, mest för att normala spel tjänar man inte speciellt mycket på än att göra all den programmeringen och lärandet för AI då man kan få väldigt snarlika om inte bättre resultat med att just låta datorn fuska och veta om saker som "nu tillverkas en osynlig enhet" och då göra en algoritm som säger om det är en "proffs AI" gör observer på direkten och är den normal så gör en observer om 30 sek, och n00b så gör observer om 60 sek...

@AplAy: Ifall fantasin är lite för begränsad för att inse vad AI skulle kunna ställa till med så rekommenderar jag den här P3 dokumentären

Yea, i know. Men n det där lär bli högst tillfälligt. Kameran begränsar inte datorns logik men den behöver säkert träna en del på den typen av vy innan det blir bra. Likt allt annat.

Skickades från m.sweclockers.com

Den inbyggda AIn i strategispel fuskar. Alltid.
Både vad gäller information och även med resurser. För vi har inte kunnat bygga AI som i närheten kan mäta sig med med oss i strategispel tidigare. This is the first time :).

Skickades från m.sweclockers.com

Reporter: 2019 " the year of invetions, so tell me, what have you accomplished?
Google: Weeeell... we managed to beat 2 pro players in starcraft using AI!
Reporter: ... ... ... what's starcraft?
(lite så jag känner vid första anblick)

Skulle dock vilja se en människa med 420 terraflops beräkningskraft + multitasking med samma antal år i kunskap. Den atchen skulle vara intressant!
Just nu är det ju en BRUTALT ojämn duel, men tycker samtidgt att det är lite "spännande och framåt tänkande"

Skulle vara intressant att se den ta sig an ett lite djupare spel än klick-festen StarCraft. T.ex Supreme Commander...

Där är för övrigt helt utzoomat läge fullkomligt normalt, likväl som rejält inzoomat.

Ja det eller räddar folk från Cancer och mycket annat.

Kanske har missat det i tråden, men har de talat om var alphastar fick sin indata ifrån? Lyfte den data direkt från koden, eller "såg" den på skärmen. Det första måste ju vara ett enormt övertag?

Tills den inser att vi extremt underlägsna och beslutar att ta bort "viruset" människan och ägna sig åt sina intressen såsom ta över universum 😀

Skickades från m.sweclockers.com