Base_model: TheBloke/CodeLlama-7B-Instruct-fp16
Training_data: javadoc_v0.1.json (1.3GB Apache Commons Javadoc Dataset)
20 Tage auf dem Jetson Orin 64GB über 2000 Steps trainiert.
Training Loss
Validation Loss
Der 1te Versuch war erfolgreich. 🙂
Bleibt noch zu testen ob die Ergebnisse wirklich so gut sind …..