Optymalizacja procesów złożonych przy pomocy uczenia ze wzmocnieniem
- Prelegent(ci)
- dr Paweł Gora
- Afiliacja
- Quantum AI Foundation & MIMUW
- Język referatu
- polski
- Termin
- 20 grudnia 2024 16:00
- Pokój
- p. 4060
- Link
- https://meet.google.com/jbj-tdsr-aop
- Seminarium
- Seminarium badawcze „Systemy Inteligentne”
Procesy złożone występują powszechnie w otaczającym nas świecie. Przejawiają się w wielu dziedzinach, takich jak przyroda, społeczeństwo, czy technologia. Z uwagi na ich cechy, m.in. wrażliwość na warunki początkowe i wpływ otoczenia, ich ewolucja bywa trudna do przewidzenia, trudno jest też nią sterować.
W ramach pracy doktorskiej zajmowałem się optymalizacją procesów złożonych głównie poprzez łączenie symulacji komputerowych, metod uczenia nadzorowanego i metaheurystyk. Podejście to dało bardzo dobre wyniki w przypadku optymalizacji ruchem drogowym poprzez sterowanie sygnalizacją świetlną oraz optymalizacji leczenia nowotworu poprzez dobór protokołów radioterapii.
Pewnym istotnym wyzwaniem pozostaje jednak adaptacja do nowych scenariuszy i zmieniających się warunków. W tym celu testuję obecnie wraz z zespołem TensorCell nowe podejścia, między innymi techniki uczenia ze wzmocnieniem. Przyniosły one niedawno bardzo dobre rezultaty, m.in. w zagadnieniu sterowania sygnalizacją świetlną pozwoliły pokonać (w badanym w środowisku symulacyjnym scenariuszu) stosowany od lat w praktyce inżynierskiej algorytm Webstera.