Aggiornamento
Descrizione
Train, visualize, and experiment with Reinforcement Learning algorithms entirely on-device with ExploreRL.
Built with MLX, ExploreRL provides an interactive sandbox to test various environments and algorithms with different hyperparameters to observe how RL agents learn through trial and error.
LEARN BY DOING
Train agents on classic adapted environments and observe learning in real time. Watch values grow, track reward curves, and develop intuition for how different algorithms and hyperparameters affect performance. Read and learn about reinforcement learning concepts in the documentation.
ALGORITHMS
Four common implementations:
- Q-Learning
- SARSA
- Deep Q-Network (DQN) for discrete action spaces
- Soft Actor-Critic (SAC) for continuous control
INCLUDED ENVIRONMENTS
Adapted from classic standards:
Toy Text: Frozen Lake, Blackjack, Taxi, Cliff Walking
Classic Control: CartPole, Mountain Car, Mountain Car Continuous, Acrobot, Pendulum
Box2D: Lunar Lander, Lunar Lander Continuous, Car Racing, Car Racing Discrete
FEATURES
- Environment-specific settings
- Real-time training metrics and reward visualization
- Configurable hyperparameters: learning rate, discount factor, epsilon decay, batch size
- Agent library with save, load, duplicate, and export functionality
- Evaluation mode to test trained agents without further training
- Educational documentation covering RL concepts, neural networks, and algorithms
- Custom seed for reproducibility
Note: Training performance will vary by device. Devices with newer hardware and more memory will have a better experience.
Novità nella versione 1.1.0
Quality of life changes:
- fix several UI issues
- fix various bugs
- better device info in settings
- add option to train different environments at once
- fix import/export lag
- quick open saved agent files
- ability to rename saved sessions
Informazioni
Sviluppatore
Categorie
Versione
1.1.0
Dimensione
22,9 MB
Game Center
No
VPP Device Licensing
Sì
Classifica
Classificazione: 4+
Compatibilità
iOS 18.0 o successivo
Dispositivi
iPhone 5s, iPhone 6, iPhone 6 Plus, iPhone 6s, iPhone 6s Plus, iPhone SE, iPhone 7, iPhone 7 Plus, iPhone 8, iPhone 8 Plus, iPhone X, iPhone XR, iPhone XS, iPhone XS Max, iPhone 11, iPhone 11 Pro, iPhone 11 Pro Max, iPhone SE (2a generazione), iPhone 12, iPhone 12 Pro, iPhone 12 Pro Max, iPhone 12 mini, iPhone 13, iPhone 13 Pro, iPhone 13 Pro Max, iPhone 13 mini, iPhone SE (3a generazione), iPhone 14, iPhone 14 Plus, iPhone 14 Pro, iPhone 14 Pro Max, iPhone 15, iPhone 15 Plus, iPhone 15 Pro, iPhone 15 Pro Max, iPhone 16, iPhone 16 Plus, iPhone 16 Pro, iPhone 16 Pro Max, iPhone 16e, iPhone 17, iPhone 17 Pro, iPhone 17 Pro Max, iPhone Air, iPhone 17e, iPad (5ª generazione) Wi-Fi, iPad (5ª generazione) Wi-Fi + Cellular, iPad (6a generazione) Wi-Fi, iPad (6a generazione) Wi-Fi + Cellular, iPad Pro, iPad Pro (Cellular), iPad Pro (9,7 pollici), iPad Pro (9,7 pollici) (Cellular), iPad Pro da 12,9 pollici (2a generazione), iPad Pro da 12,9 pollici (2a generazione) Wi-Fi + Cellular, iPad Pro da 10,5 pollici, iPad Pro da 10,5 pollici Wi-Fi + Cellular, iPad Pro da 11 pollici, iPad Pro da 11 pollici Wi-Fi + Cellular, iPad Pro da 12,9 pollici (3a generazione), iPad Pro da 12,9 pollici (3a generazione) Wi-Fi + Cellular, iPad Air, iPad Air (Cellular), iPad Air 2, iPad Air 2 (Cellular), iPad Air (terza generazione), iPad Air (terza generazione) Wi-Fi + Cellular, iPad mini Retina, iPad mini Retina (Cellular), iPad mini 3, iPad mini 3 (Cellular), iPad mini 4, iPad mini 4 (Cellular), iPad mini (5ª generazione), iPad mini (5ª generazione) Wi-Fi + Cellular, iPad (7ª generazione) Wi-Fi + Cellular, iPad Pro da 11 pollici (2a generazione), iPad Pro da 11 pollici (2a generazione) Wi-Fi + Cellular, iPad Pro da 12,9 pollici (4a generazione), iPad Pro da 12,9 pollici (4a generazione) Wi-Fi + Cellular, iPad Air (4ª generazione) (Wi-Fi), iPad Air (4ª generazione) (Wi-Fi + Cellular), iPad (8ª generazione) Wi-Fi, iPad (8ª generazione) Wi-Fi + Cellular, iPad Pro da 11 pollici (3a generazione), iPad Pro da 11 pollici (3a generazione) Wi-Fi + Cellular, iPad Pro da 12,9 pollici (5ª generazione), iPad Pro da 12,9 pollici (5ª generazione) Wi-Fi + Cellular, iPad (9ª generazione), iPad (9ª generazione) Wi-Fi + Cellular, iPad mini (6ª generazione), iPad mini (6ª generazione) Wi-Fi + Cellular, iPad Air (5a generazione), iPad Air (5a generazione) Wi-Fi + Cellular, iPad Pro da 11 pollici (4a generazione), iPad Pro da 11 pollici (4a generazione) Wi-Fi + Cellular, iPad Pro da 12,9 pollici (6a generazione), iPad Pro da 12,9 pollici (6a generazione) Wi-Fi + Cellular, iPad (10a generazione), iPad (10a generazione) Wi-Fi + Cellular, iPad Air da 11 pollici (M2) Wi-Fi, iPad Air da 13 pollici (M2) Wi-Fi, iPad Air da 13 pollici (M2) Wi-Fi + Cellular, iPad Pro da 11 pollici (M4) Wi-Fi, iPad Pro da 11 pollici (M4) Wi-Fi + Cellular, iPad Pro da 13 pollici (M4) Wi-Fi, iPad Pro da 13 pollici (M4) Wi-Fi + Cellular, iPad mini (A17 Pro) Wi-Fi, iPad mini (A17 Pro) Wi-Fi + Cellular, iPad (A16) Wi-Fi, iPad (A16) Wi-Fi + Cellular, iPad Air da 11 pollici (M3) Wi-Fi, iPad Air da 11 pollici (M3) Wi-Fi + Cellular, iPad Air da 13 pollici (M3) Wi-Fi, iPad Air da 13 pollici (M3) Wi-Fi + Cellular, iPad Pro da 11 pollici (M5) Wi-Fi, iPad Pro da 11 pollici (M5) Wi-Fi + Cellular, iPad Pro da 13 pollici (M5) Wi-Fi, iPad Pro da 13 pollici (M5) Wi-Fi + Cellular, iPad Air11M4, iPad Air11M4Cellular, iPad Air13M4, iPad Air13M4Cellular, iPod touch (sesta generazione), iPod touch (7ª generazione), Mac Desktop
Lingue
inglese
App Store: Valutazione dei clienti
Valutazioni e recensioni
0,0 di 5 (Nessuna valutazione)
App Store: Recensioni clienti
Nessuna voce