Επικοινωνήστε μαζί μας

Εξέλιξη Κομματιού

Εισαγωγή στα Μοντέλα Γλώσσας Ανοικτού Κώδικα

  • Τι είναι τα μοντέλα ανοικτού βάρους και γιατί είναι σημαντικά
  • Επισκόπηση των LLaMA, Mistral, Qwen και άλλων μοντέλων της κοινότητας
  • Περιπτώσεις χρήσης για ιδιωτικές, on-premise ή ασφαλείς αναπτύξεις

Ρύθμιση Περιβάλλοντος και Εργαλεία

  • Εγκατάσταση και ρύθμιση των βιβλιοθηκών Transformers, Datasets και PEFT
  • Επιλογή κατάλληλου υλικού για fine-tuning
  • Φόρτωση προεκπαιδευμένων μοντέλων από το Hugging Face ή άλλα αποθετήρια

Προετοιμασία και Προεπεξεργασία Δεδομένων

  • Μορφές συνόλων δεδομένων (instruction tuning, δεδομένα συνομιλίας, μόνο κείμενο)
  • Tokenization και διαχείριση ακολουθιών
  • Δημιουργία προσαρμοσμένων συνόλων δεδομένων και data loaders

Τεχνικές Fine-Tuning

  • Πλήρες fine-tuning σε σχέση με μεθόδους αποδοτικές ως προς τις παραμέτρους
  • Εφαρμογή LoRA και QLoRA για αποδοτικό fine-tuning
  • Χρήση του Trainer API για γρήγορο πειραματισμό

Αξιολόγηση και Βελτιστοποίηση Μοντέλου

  • Αξιολόγηση μοντέλων που έχουν υποστεί fine-tuning με μετρικές παραγωγής και ακρίβειας
  • Διαχείριση υπερπροσαρμογής, γενίκευσης και συνόλων επικύρωσης
  • Συμβουλές ρύθμισης απόδοσης και καταγραφή

Ανάπτυξη και Ιδιωτική Χρήση

  • Αποθήκευση και φόρτωση μοντέλων για εξαγωγή συμπερασμάτων
  • Ανάπτυξη μοντέλων που έχουν υποστεί fine-tuning σε ασφαλή επιχειρησιακά περιβάλλοντα
  • Στρατηγικές ανάπτυξης on-premise έναντι cloud

Μελέτες Περιπτώσεων και Σενάρια Χρήσης

  • Παραδείγματα επιχειρηματικής χρήσης των LLaMA, Mistral και Qwen
  • Διαχείριση πολύγλωσσου και εξειδικευμένου ανά τομέα fine-tuning
  • Συζήτηση: Ανταλλάγματα μεταξύ ανοικτών και κλειστών μοντέλων

Σύνοψη και Επόμενα Βήματα

Απαιτήσεις

  • Κατανόηση των μεγάλων μοντέλων γλώσσας (LLMs) και της αρχιτεκτονικής τους
  • Εμπειρία με Python και PyTorch
  • Βασική εξοικείωση με το οικοσύστημα Hugging Face

Κοινό

  • Επαγγελματίες μηχανικής μάθησης
  • Προγραμματιστές τεχνητής νοημοσύνης
 14 Ώρες

Αριθμός συμμετέχοντων


Τιμή ανά συμμετέχοντα

Εφεξής Μαθήματα

Σχετικές Κατηγορίες