Когда я об этом думаю, одно постоянно приходит на ум... Действительно ли то, что мы называем бенчмарками, отражает реальную производительность, или это просто отражение контролируемой среды?
Что я на самом деле хочу сказать -
На бумаге цифры всегда выглядят чистыми, но на практике система никогда не бывает идеальной. Производительность, которую показывает @OpenLedger ModelFactory, - это первое, что бросается в глаза. В сравнении с традиционным методом p-tuning, настройка ModelFactory LoRA достигает скорости обучения до 3,7 раз быстрее - это не маленькое улучшение. Не только скорость, но и улучшение в ROUGE-оценке на реальных задачах, таких как генерация рекламных текстов, показывает, что качество результата также остается стабильным. Это означает, что здесь присутствуют не только оптимизация, но и эффективность + качество идут рука об руку.