Разработчики представили Reader-LM — языковую модель для конвертации HTML в Markdown
habr.comРазработчики Jina AI представили семейство языковых моделей Reader-LM, предназначенных для конвертации HTML в Markdown. Во время конвертации нейросеть удаляет лишнее из файла веб-разметки, структурирует информацию и записывает в формате .md.Семейство Reader-LM доступно в компактных размерах 0,5B и 1,5B.
При этом контекстное окно в 256 тыс. токенов. Модели мультиязычные, а обучали их на наборе синтетических данных, состоящих из пар «HTML-Markdown».