Suparničko podržano učenje za robusno održavanje tržišta

undergraduate thesis

• Title (english): Adversarial Reinforcement Learning for Robust Market Making
• Author: Niko Kaštelan
• Mentor: Zvonko Kostanjčar (mentor)
• Committee member: Zvonko Kostanjčar (predsjednik povjerenstva)
• Committee member: Stjepan Begušić (član povjerenstva)
• Committee member: Bruno Gašperov (član povjerenstva)
• Granter: University of Zagreb; Faculty of Electrical Engineering and Computing; Zagreb
• Defense date and country: 2022-07-08, Croatia
• Scientific / art field, discipline and subdiscipline: TECHNICAL SCIENCES; Computing

Abstract

Podržano učenje jedna je od metoda strojnog učenja koja se koristi za razvoj optimalnih strategija održavanja tržišta. Suparničko podržano učenje pokazalo se kao metoda koja rezultira poboljšanom robusnosti, što je također poželjna karakteristika strategija održavanja tržišta. U ovom radu predstavljen je novi pristup rješavanju problema optimalnog održavanja tržišta metodom dubokog podržanog učenja u suparničkom kontekstu. Korišten je algoritam SAC koji se temelji na okviru podržanog učenja maksimalne entropije. Zapaženo je da rezultantne strategije postižu superiorne performanse u usporedbi s prijašnjim pristupima, uz činjenicu da istovremeno čine tržišta efikasnijima smanjivanjem razlike između kupovne i prodajne cijene.

Abstract (english)

Reinforcement learning is one of the machine learning methods used for developing optimal market making strategies. Adversarial reinforcement learning has proven to be a method that results in improved robustness, which is also a desirable feature of market making strategies. This paper presents a new approach to solving the problem of optimal market making through deep reinforcement learning in an adversarial setting. The SAC algorithm used is based on the maximum entropy reinforcement learning framework. We observed the resulting strategies achieved superior performance compared to previous approaches while simultaneously making the markets more efficient by narrowing the spread.

• Keywords: podržano učenje; suparnik; robusnost; održavanje tržišta; SAC
• Keywords (english): reinforcement learning; adversary; robustness; market making; SAC
• Language: croatian
• URN:NBN: urn:nbn:hr:168:826024
• Study programme: Title: Computing; Study programme type: university; Study level: undergraduate; Academic / professional title: sveučilišni/a prvostupnik/ prvostupnica (baccalaureus/baccalaurea) inženjer/inženjerka računarstva (sveučilišni/a prvostupnik/ prvostupnica (baccalaureus/baccalaurea) inženjer/inženjerka računarstva)
• Type of resource: Text
• File origin: Born digital
• Access conditions: Closed access
• Created on: 2023-01-15 10:29:47