Metin2 Nauka sztucznej inteligencji

[Poslaniec]

Metin2 jest na tyle prostą grą że 2 godziny nauki Ai wystarczyło aby boty robiły następujące rzeczy. Sama podstawa botów jest od jakiegoś typa z Yt, ale ja pracując ze sztuczną inteligencją nacodzień postanowiłem że sprawdze jak szybko boty się nauczą,

 

- Wybieranie mobów i metinów do expa  względem lvl 

- Levelowanie skilii

- Zbieranie itemów i sprzedawanie u handlarzy i zarówno w sklepiach 

- Tworzenie gildii i dodawanie graczy

-  Wybieranie map względem lvl

- Ryzykowne ulepszanie itemów u kowala

- Robienie misji 

- wbijanie lvl koni 

- Boty czasami przynoszą dziwne itemy <- nie wiadomo skad :v 

- Bufują się, expią w pt, wybierają najlepsze spoty.

- Toczą wojny gildii, robią pvp 

- grają od 40 minut do 3 godziny i kończą gre na kilka godzin

- gdy bot jest wylogowany bo przegrał swój czas, na jego miejsce zaczyna nowy od 1 lvl 

 

myślę że da się stworzyć sztuczną inteligencje  PC-> Obcy serwer :v    

 

 

 

 

Edytowane wczoraj o 05:24 przez Poslaniec

[SebuśPL]

Ciekawe czy handlarze yangow już korzystają z takich botów🤔

[Poslaniec]

@SebuśPL kto ogarnia ten używa czegoś 😄  450 botów to 6 gb pamięci ram a reszta parametrów w normie 😄 ps w godzine od 0 z itemami tak jak na pl sie dostaje, boty uzbierały  od 100k do 12kk 

 

Edytowane wczoraj o 07:55 przez Poslaniec

[SebuśPL]

@Poslaniec

Zachowują się normalnie - unikają kolizji 

Expią, dropia, handlują, ulepszają, zakładają gildie

Pewnie i normalnie się komunikują na czacie lub pw.

A to wszystko wykorzystując niewielkie zasoby.

Czyli dla przeciętnego gracza nie do odróżnienienia czy to bot czy człowiek. Dla administracji utrudnienienia bo skoro będą odpisywać i w miarę naturalnie się zachowywać to co wszystkich zbanują? 

 

Ciekawe czasy dla metina, wszystkie serwery pełne "graczy" no i allegro na pchane yangami.

[Poslaniec]

Normalnie kominikują się, wymieniają handlem, pożyczają sobie itemy, Unikają kolizji, poruszają się jak taki przeciętny słaby gracz, biją metiny, też się komunikują na czacie ale był zbyt duży spam wiec wyłączyłem im wołanie. Boty są też agresywne i potrafią Cie wyzwać jak sie zabija je, 

 

Dobra pokaże wam.

 

Zrobiłem program który pozwala na dołączenie do każdego serwera jako Ai bez odpalania realnego klienta ale wykorzystuje normalnie zasoby, 

jak będę chciał przekazać z konta Ai na swoje główna postać yangi to wpisuje nick i postać da tylko handel tej postaci która ma taki dokładnie nick. 

na prywatnych serwerach trzeba dodawać konta osobno i wybierać slot, na własnym serwerze wiadomo moge od razu z bazy wrzucić 450 botów

 

[SebuśPL]

Skoro potrafią się wymieniać/komunikować/denerwować to potrafią budować relację. 

Ciekawe by było ich puścić na kilka dni samych sobie, jaka "społeczność" by się wytworzyła.

Postacie tworzą sami? Mogą tworzyć kolejne w celu np. Dropka lub buffa?

 

Jak masz czas i chęci to wrzucaj informacje z postępu projektu. Jestem bardzo ciekawy co z tego wyjdzie.

 

Sam od dawna interesowałem się rozwojem AI do metina niestety brak czasu by do tego przysiąść - planowałem robić to w zimę ale widzę że do tego czasu już będzie wszystko zrobione 😄

 

Ps. Jak będziesz miał w miarę stabilne rozwiazania to może prosty serwer AIMT2? 🤔

Opcja wykupienia pakietu gdzie bot gra za ciebie gdy nie jesteś w grze 😄

[Poslaniec]

łap wszystkie funkcje które zrobiłem i nauczył się boty.

 

• ażdy bot zaczyna od 1 poziomu po resecie.
• Każdy bot ma unikalny, losowy nick bez słowa bot.
• Boty samodzielnie expią i zdobywają poziomy.
• Atakują zwykłe potwory tylko w zakresie około -15 / +15 poziomów względem swojego lvl.
• Tak samo dobierają Metiny ±15 lvl.
• Uczą się, które mapy i przeciwnicy są dla nich opłacalni.
• Potrafią zmieniać miejsce expienia wraz ze wzrostem poziomu.
• Mają Drop Intelligence — zapamiętują, gdzie wypadają przydatne przedmioty.
• Zapamiętują, z jakich mobów zdobywały konkretne materiały do ulepszania.
• Porównują opłacalność map: drop, zgony, ilość zabitych mobów.
• Mogą celowo farmić brakujące ulepszacze.
• Potrafią kupować brakujące materiały od innych botów/sklepów.
• Mają Smart Refining.
• Ulepszają EQ poprzez prawdziwy system DoRefine.
• Samodzielnie planują ulepszanie do +7 i +8.
• Uwzględniają koszt Yang, potrzebne materiały i ryzyko spalenia.
• Bardziej ostrożne boty mogą nie ryzykować dobrego EQ.
• Boty o agresywnej/gamblingowej osobowości podejmują większe ryzyko.
• Potrafią posiadać zapasowe EQ, żeby nie zostać bez wyposażenia po spaleniu przedmiotu.
• Mają system oceny jakości wyposażenia.
• Porównują broń, zbroję i pozostałe przedmioty pod względem statystyk.
• Samodzielnie zakładają lepsze EQ.
• Chronią wartościowe przedmioty przed przypadkową sprzedażą.
• Potrafią sprzedawać nadmiarowe ulepszacze.
• 10% aktywnych botów może wystawiać prywatny sklep.
• Przy 450 aktywnych botach daje to maksymalnie około 45 sklepów.
• Sklepy są prawdziwymi sklepami Metin2 przez OpenMyShop.
• Sklep może działać około 20–60 minut.
• Boty wybierają rzeczy, które faktycznie mają w ekwipunku.
• Nie wystawiają zablokowanego EQ ani przedmiotów potrzebnych do aktualnego celu.
• Mają własny system wyceny rynkowej.
• Obserwują ceny innych sklepów.
• Potrafią uczyć się średnich cen przedmiotów.
• Boty typu trader mogą szukać okazji cenowych / arbitrażu.
• Potrafią kupić tani przedmiot i później wystawić go drożej.
• Mają różne osobowości, więc nie wszystkie zachowują się identycznie.
• Mogą być bardziej nastawione na EXP, farmę, handel, PvP, EQ lub ryzyko.
• Mają system Quest & Progression AI.
• Obsługują questy związane z levelem i polowaniem.
• Obsługują progresję Biologa dla poziomów m.in. 30/40/50/60/70/80/90/92/94.
• Biolog może być realizowany przez dłuższy czas, a nie natychmiast.
• Boty rozwijają konia.
• Mogą zbierać i wykorzystywać Medale Konne.
• Uczą się umiejętności przez Księgi Umiejętności.
• Używają prawdziwego mechanizmu UseItem.
• Mogą korzystać z Kamieni Duchowych przy dalszej progresji skilli.
• Rozwijają statystyki zależnie od klasy/profesji.
• Mają różne buildy postaci.
• Rozwijają skill/stats zgodnie ze swoim buildem.
• Potrafią zakładać gildie i należeć do gildii przez natywny system gry.
• Boty poruszają się między mapami zależnie od potrzeb.
• Potrafią wracać do polowania po zakupach, ulepszaniu czy innych czynnościach.
• Mają system zapobiegający ciągłemu biciu jednego niewłaściwego celu.
• Mogą rozpraszać się po mapie zamiast stać wszystkie w jednym miejscu.
• Rejestrują swoje zabójstwa, zgony i zdobyty drop.
• Rejestrują sukcesy i porażki ulepszania.
• Prowadzą własną telemetrię AI.
• Panel pokazuje informacje o botach i ich aktywności.
• Jest moduł Market pokazujący sklepy i handel.
• Jest moduł Refining pokazujący plany ulepszania.
• Jest moduł Drop Intelligence.
• Jest moduł Progression.
• Można podejrzeć EQ i inventory konkretnego bota.
• Panel pokazuje powody, dla których bot nie może otworzyć sklepu.
• System potrafi rozróżnić np. brak towaru, złą mapę albo błąd otwierania sklepu.

 

 

[SebuśPL]

Dzięki za liste, zrobiłeś już naprawdę wiele.

 

Jak wygląda kwestia osobowości? Jest kilka schematów które losowo są wybierane czy osobowości same się wykształciły? 

Algorytm ma pamięć absolutną i każda postać zbiera wspólnie doświadczenie jak grać czy każda postać to nowa karta i uczy się od nowa?

 

Rozumiem że bot ma dostęp do całego konta i może tworzyć nowe postacie?

[Poslaniec]

Każda postać ma swoją osobowość a każda nowa postać to nowa osobowość ale mają wspólne zapamietywanie gdzie lepiej sie expi tzn gdzie jest więcej mobów, mają wspólny system dropu itemów, gdzie dropi lepszy item. 

 

Tak każdy bot ma własne konto i z niego wpęłni korzysta jak zwykły gracz. 

 

 

Ogolnie nie wiem jak one to robią ale w 3 godziny w m1 wbijają 35 lvl i dopiero wtedy idą do m2, mi sie nigdy w m1 nie udało wbić 35 lvl xd 

Boty które są przyjazne expią razem w pt

Mam cały podgląd czego nauczyły się boty.
 

 

Boty nauczyły się pisać że coś ulepszyły,czy to że nie mam zabijac jak zabijam któregoś 

 

22:10      Boty zaczęły odpisywać na Priv ale jeszcze bardzo głupi sposób. 

 

Edytowane wczoraj o 10:56 przez Poslaniec

[SebuśPL]

Haha konwersacja dobra no ale muszą się od kogoś uczyć. Na żywym organizmie czyli jakimś serwerze by lepiej chyba uczyli się ludzkich zachowań 

[Poslaniec]

Boty mapują mapy:

Tutaj mamy Chunjo i mapowały gdzie najczęsciej ginęły,  Niebieskie kropki to wlasnie Ai.

 

a Tutaj gdzie najczęsciej spotykały metina i je ubijały.

 

 

 

Ja im dałem samą mape a one reszte generują same w systemie

Boty również zaczęły pisać coraz więcej, mimo to powtarzają się 

 

 

 

Robią misje oknne ale jeszcze nie potrafią jezdzić na koniach, ciekawe ile to potrwa <- dobra stałem przy bocie i przy mnie wsiadł i pojechał :v 

Edytowane 16 godzin temu przez Poslaniec

[SebuśPL]

Jeszcze nie minęło 24h a grają lepiej ode mnie po kilkunastu latach 😆

[Poslaniec]

Boty bufają w pt swoich kolegów :v 

 

o 10:52 pierwszy raz widziałem aby bot się zapytał o ulepszacz ale podał id przedmiotu,ani razu takiego czegoś wcześniej nie pisały.

 

Playerboty – co tak naprawdę potrafią?

Na serwerze rozwijam własny system Playerbotów. Nie są to zwykłe postacie, które stoją w M1 albo chodzą po kilku ustawionych waypointach. Docelowo mają zachowywać się możliwie podobnie do normalnych graczy i samodzielnie rozwijać swoje postacie.

• Na świecie działa do 450 botów – po około 150 na Shinsoo, Chunjo i Jinno.
• Każdy bot jest normalną postacią posiadającą własny:
  • level,
  • EXP,
  • Yang,
  • ekwipunek,
  • statystyki,
  • skille,
  • inventory,
  • królestwo,
  • klasę i build.
• Postęp botów jest zapisywany. Po restarcie serwera bot nie zaczyna wszystkiego od nowa, tylko zachowuje lvl, przedmioty, EQ, Yang oraz progres postaci.
• Boty samodzielnie expią. Szukają potworów odpowiednich do swojego poziomu i nie muszą mieć jednego sztywno ustawionego miejsca.
• Każde królestwo posiada własne punkty EXP. Bot Jinno nie korzysta z przeliczonych współrzędnych Chunjo itd.
• AI korzysta z prawdziwych danych map:
  • server_attr,
  • regen.txt,
  • stone.txt,
  • boss.txt,
  • npc.txt.
• Bot próbuje wybierać tylko miejsca, do których faktycznie może dojść. Jeżeli droga jest niedostępna, zapamiętuje problem i wybiera inną trasę lub inne miejsce.
• Jest system Anti-Stuck / NAV Recovery, dzięki któremu bot nie powinien bez końca próbować dojść do jednego niedostępnego punktu.
• Boty stopniowo opuszczają M1 i przechodzą dalej:
  • M1,
  • M2,
  • kolejne mapy,
  • Dolina Orków,
  • Pustynia,
  • Góra Sohan,
  • Ognista Ziemia,
  • Loch Małp,
  • dungeony i kolejne obszary.
• Bot nie teleportuje się bez powodu. Posiada World Graph, czyli wie mniej więcej jak dostać się z jednej mapy na drugą.
• Bot potrafi się bronić. Jeżeli podczas podróży, Biologa albo innego zadania zaatakuje go mob, walka dostaje wyższy priorytet.
• Nie powinno być sytuacji, że np. Ninja stoi bezczynnie, a potwory ją zabijają.
• Bot może:
  • zaatakować napastnika,
  • zmienić target,
  • użyć mikstur,
  • ocenić zagrożenie,
  • wycofać się, jeżeli przeciwnik jest zbyt silny.
• Rozwijany jest Combat AI, który uwzględnia:
  • HP,
  • SP,
  • odległość,
  • cooldown skilli,
  • klasę postaci,
  • buffy,
  • liczbę przeciwników,
  • siłę przeciwnika,
  • jakość EQ.
• Boty używają skilli odpowiednich dla swojego buildu zamiast losowo rozdawać punkty.
• Przykładowo Wojownik Mental rozwija przede wszystkim Silne Ciało, a Body skupia się na Aurze Miecza.
• Sura WP rozwija m.in. Czarowane Ostrze, Czarowaną Zbroję i Strach.
• Szaman może pełnić prawdziwą rolę Supporta.
• Jeżeli Szaman znajduje się w party, sprawdza swoich kompanów i może:
  • buffować ich,
  • odnawiać brakujące buffy,
  • pomagać rannym członkom grupy,
  • stać bardziej z tyłu zamiast zachowywać się jak zwykły DPS.
• Party posiada role:
  • Tank,
  • DPS,
  • Support.
• Bot przed trudniejszym bossem może szukać brakującej roli zamiast zapraszać pierwszą losową postać.
• Mental może być tankiem, Body/WP DPS-em, a Szaman supportem.
• Boty posiadają Boss Memory. Zapamiętują m.in.:
  • ile razy zginęły,
  • czy boss był opłacalny,
  • jaki był drop,
  • jaki skład party radził sobie najlepiej.
• Podobnie działa Metin Memory. Bot zapamiętuje regiony, w których wcześniej znajdował Metiny.
• Bot potrafi ocenić, czy bardziej opłaca mu się:
  • expić,
  • szukać Metina,
  • walczyć z bossem,
  • zrobić quest,
  • iść do Biologa,
  • farmić ulepszacz,
  • ulepszać EQ,
  • handlować.
• Za to odpowiada Utility AI. Poszczególne aktywności otrzymują wynik punktowy i bot wybiera tę, która w danym momencie jest dla niego najbardziej korzystna.
• Boty posiadają Self Learning. Zbierają informacje o tym, gdzie osiągały dobre lub słabe wyniki.
• Zapisywane mogą być m.in.:
  • EXP/h,
  • Yang/h,
  • liczba zabitych mobów,
  • liczba zgonów,
  • drop,
  • skuteczność mapy,
  • skuteczność spotu,
  • skuteczność Metinów,
  • skuteczność bossów.
• Dzięki temu bot nie musi uznawać automatycznie, że „mocniejszy mob = lepszy EXP”. Jeżeli słabszy spot daje lepszy EXP/h, AI może wybrać właśnie jego.
• Każdy bot może mieć własne cele długoterminowe, np.:
  • lvl 50,
  • broń +8,
  • lepsza zbroja,
  • Biolog 40,
  • koń lvl 11,
  • określona ilość Yang,
  • mocniejszy set PvM.
• Bot potrafi rozbić duży cel na mniejsze zadania. Przykładowo: potrzebuję lepszej broni → potrzebuję ulepszacza → idę go farmić → zdobywam Yang → idę do kowala → próbuję ulepszyć.
• Boty potrafią korzystać z prawdziwego systemu refine, a nie dostają +9 „z powietrza”.
• Oceniają koszt ulepszenia, dostępne materiały i wartość przedmiotu.
• Posiadają Equipment Intelligence. Bot nie patrzy wyłącznie na +7/+8/+9, tylko ocenia realną przydatność przedmiotu.
• EQ może być oceniane oddzielnie pod:
  • PvM,
  • bossy,
  • PvP,
  • EXP.
• Boty uczą się korzystać z przedmiotów do bonusowania EQ.
• Normalne bonusy dobierane są zależnie od rodzaju przedmiotu, np.:
  • zbroja – PŻ i przydatne bonusy defensywne,
  • naszyjnik – krytyk/PŻ,
  • tarcza – przede wszystkim odporność na omdlenie,
  • broń – bonusy przydatne dla danej klasy/builda.
• Silny przeciw Potworom nie jest traktowany jako zwykły bonus. Bot szuka go przede wszystkim w bonusach 6/7, razem z Wartością Ataku.
• Bot może korzystać z:
  • Wzmocnienia Przedmiotu,
  • Zaczarowania Przedmiotu,
  • dodawania 6/7,
  • zmiany 6/7.
• Boty posiadają Loot Intelligence – potrafią zapamiętać, skąd wypada przedmiot potrzebny im aktualnie do ulepszenia albo questa.
• Jeżeli botowi brakuje konkretnego ulepszacza, może zamiast normalnego EXP przejść na farmienie właśnie tego materiału.
• Boty korzystają z mikstur i innych consumables.
• Uczą się również korzystać z Peleryny Męstwa podczas EXP.
• Peleryna nie jest używana bezmyślnie. AI bierze pod uwagę:
  • aktualne HP,
  • liczbę mobów w pobliżu,
  • bezpieczeństwo,
  • to, czy bot nie walczy aktualnie z Metinem/bossem,
  • cooldown kolejnego użycia.
• System konia jest rozwijany jako element normalnego poruszania się botów. Przy koniu lvl 1–10 bot ma wykorzystywać konia głównie do przemieszczania się do celu.
• Od konia lvl 11 bot będzie mógł wykorzystywać go również bojowo, np. do bicia Metinów albo dużych spotów zebranych Peleryną Męstwa.
• Boty potrafią zdobywać Medale Konne w Lochu Małp oraz rozwijać progres konia.
• Obsługiwany jest również Biolog. Bot może sprawdzać, czego mu brakuje, zdobywać odpowiedni materiał i uwzględniać cooldown oddawania przedmiotów.
• Boty korzystają z książek umiejętności i Kamieni Duchowych.
• Rozumieją zastosowanie takich przedmiotów jak:
  • Zwój Egzorcyzmu,
  • Rada Pustelnika,
  • Fasolka Zen,
  • Kamień Duchowy.
• Boty posiadają własną ekonomię i własny budżet.
• Yang może być rozdzielany np. na:
  • mikstury,
  • refine,
  • materiały,
  • handel,
  • teleport,
  • książki,
  • rezerwę awaryjną.
• Nie każdy bot zachowuje się tak samo. Są farmerzy, handlarze, łowcy Metinów, boss hunterzy itd.
• Boty mogą otwierać własne prywatne sklepy.
• Sklepy pojawiają się we wszystkich trzech królestwach, a nie tylko w jednym M1.
• System rynku zapamiętuje ceny i może porównywać średnie ceny z kilku sesji.
• Trader może wykryć okazję, kupić taniej i później próbować sprzedać przedmiot z marżą.
• Boty posiadają inventory i potrafią zarządzać miejscem.
• Przydatne przedmioty są chronione przed przypadkową sprzedażą.
• Zbędne rzeczy mogą zostać sprzedane podczas wizyty u NPC.
• Rozwijana jest obsługa Heksagonalnych Szkatułek – bot ma je otwierać, zachowywać wartościową zawartość i sprzedawać niepotrzebne przedmioty.
• Boty mają również prostą warstwę społeczną.
• Potrafią odpowiadać na podstawowe wiadomości graczy, np.:
  • „cześć”,
  • „co robisz?”,
  • „gdzie expisz?”,
  • „jaki lvl?”,
  • „party?”,
  • pytania o bossy/Metiny.
• Bot posiada krótką pamięć rozmowy, więc kolejne pytanie może być potraktowane jako dalszy ciąg wcześniejszej rozmowy.
• Boty reagują na PvP i mogą zapamiętywać graczy, którzy regularnie je zabijają.
• Istnieje system relacji:
  • znajomy,
  • rywal,
  • członek gildii,
  • partner handlowy,
  • wróg.
• Bot-to-bot chat jest możliwy, ale celowo bardzo ograniczony cooldownem, żeby chat nie wyglądał jak spam.
• Około części botów może należeć do gildii.
• Gildie botów mogą mieć własne profile, np.:
  • PvM,
  • PvP,
  • handel,
  • Metiny.
• Członkowie tej samej gildii mogą preferować wzajemną pomoc przy party, bossach czy zdobywaniu materiałów.
• Nad całą populacją działa AI Director, który nie steruje bezpośrednio każdą postacią, ale pilnuje całego świata.
• Director może ograniczać sytuacje, gdzie np. 100 botów idzie dokładnie na ten sam spot.
• Pilnuje rozłożenia aktywności między:
  • EXP,
  • handel,
  • Metiny,
  • bossy,
  • questy,
  • miasta,
  • różne mapy.
• System został zaprojektowany pod dużą liczbę botów, więc posiada m.in.:
  • cache pathfindingu,
  • cooldown dla błędnych tras,
  • limity ciężkich operacji,
  • staggered AI,
  • Performance Governor.
• Jeżeli na serwer wchodzi prawdziwy gracz, ciężkie obliczenia botów mogą zostać ograniczone, żeby Playerboty nie zabierały całego czasu game1.
• Do tego jest panel administracyjny pozwalający obserwować boty, ich EQ, inventory, statystyki, cele, decyzje, EXP/h, błędy NAV, rynek oraz zachowanie AI.
• Docelowo mapa panelu wykorzystuje prawdziwe mapy Metin2, a Metiny będą oznaczone charakterystycznymi różowymi punktami.
• Po najechaniu na przedmiot w panelu chcę również pokazywać jego prawdziwe bonusy:
  • bonusy 1–5,
  • bonusy 6/7,
  • sockety/kamienie.
• Najważniejsze jest to, że Playerboty nie korzystają z ChatGPT ani żadnego LLM. Całość jest własnym AI napisanym bezpośrednio pod serwer Metin2: Utility AI, Combat AI, pamięć, planowanie celów, ekonomia, NAV, Director i system uczenia.
• Cały projekt rozwijam w kierunku tego, żeby bot nie wyglądał jak NPC chodzący od punktu A do B, tylko jak normalny gracz, który zaczyna od 1 lvl, rozwija postać, expi, zdobywa EQ, robi questy, handluje, ulepsza przedmioty, rozwija konia, szuka Metinów i podejmuje własne decyzje.

Pierwszy bot na dolinie orków: