Що таке мовна модель в ШІ?
Все думаю почати працювати з ШІ, знайшов проект OLlama, але не розумію терміну "мовна модель" - це щось типу словникового запасу для інтерпретації вводу?
Ось цей набір маю на увазі:
Хочу прикрутити пошукову систему, замінивши релевансер Manticore на щось більш сучасне/розумне, тобто так розумію що мовна модель потрібна як посередник між людиною та базою індексу, так?
Відповіді на питання (1)
Модель це кінцевий файл який отримали в результаті тренування на великій кількості даних та GPU. В ній містяться дані які "запам'ятала" нейронна мережа (зв’язки між словами та фразами) і на основі цих даних може генерувати відповіді на питання. Це не зовсім те що потрібно для пошуку по сайту, та і для навчання на своїх даних треба багато потужних GPU.