Ассистент тестирования с использование LLM

[alkoleft]

Есть активности по созданию моделей генерирующих тесты с помощью LLM, необходимо поддержать и включиться в них.

Какие есть вопросы:

• Какая базовая модель?
  • GPT - проще и дешевле старт
  • LAMA - открытая, self-hosted, дорого и сложно обучать, нужны спонсоры
  • Mistral и другие открытые туда же к ламе
• Необходимо сделать так, чтобы результат работы был доступен сообществу (датасеты, сервисы, модели)
• Сбор необходимого модели контекста - посмотреть на плагины copilot и прочих ассистентов
  • Нужно собирать дерево метаданных
  • Нужна информация о yaxunit
  • Собрать вызываемые методы