SurveyForge: ИИ-инструмент для автоматического написания обзорных статей 80

Что такое SurveyForge?

SurveyForge — это инструмент, разработанный шанхайской лабораторией ai Lab, специально предназначенный для автоматической генерации обзорных статей. Он изучает структуру планов статей, написанных людьми, и соответствующей литературы в предметной области, чтобы генерировать обоснованные планы, а затем использует высококачественные научные работы для автоматического создания и оптимизации содержания. Кроме того, авторы создали бенчмарк SurveyBench, содержащий 100 обзорных статей, написанных людьми, для оценки качества обзоров, сгенерированных ИИ, с разных точек зрения. Это решает такие распространённые проблемы традиционной генерации статей с помощью ИИ, как нерациональная структура и неточные ссылки на источники.

Основные функции

• Генерация плана: SurveyForge изучает написанные человеком планы статей и соответствующую литературу, создавая чёткую и обоснованную структуру.

• Генерация содержания: инструмент осуществляет поиск высококачественной литературы и использует механизм памяти для создания и оптимизации содержания статьи.

• Многомерная оценка: бенчмарк SurveyBench включает 100 обзорных статей, написанных людьми, что позволяет оценивать обзоры, сгенерированные ИИ, по трём аспектам: качество ссылок, качество плана и качество содержания.

Технические детали

• Генерация плана: создание плана путём анализа структуры статей, написанных людьми, и литературы в соответствующей предметной области.

• Генерация содержания: использование высококачественной литературы для генерации и оптимизации содержания статьи.

• Оценочный бенчмарк: SurveyBench содержит 100 написанных человеком статей, охватывающих 10 различных тем, что обеспечивает тематическую согласованность и академическую строгость.

Преимущества

• Структура и логика: качество генерируемых планов приближается к человеческому уровню, что решает проблему структурного дисбаланса, характерную для традиционных методов ИИ.

• Ссылки на источники: охват ключевых источников увеличен почти вдвое, ссылки стали более точными.

• Качество содержания: генерируемое содержание стало более связным и всеобъемлющим, при этом затраты крайне низки — генерация обзора объёмом около 64k токенов стоит менее 0,5 доллара, а весь процесс занимает всего 10 минут.

• Критерии оценки: SurveyBench предоставляет объективные критерии оценки, облегчающие сравнение производительности различных методов.

Как пользоваться

• Генерация статьи: из-за ограничений на частоту вызовов API пользователям необходимо отправить запрос на генерацию статьи по электронной почте или через создание issue в репозитории. Время генерации составляет примерно 10 минут.

• Оценка статьи: для оценки с использованием SurveyBench можно выполнить в командной строке cd SurveyBench && python test.py --is_human_eval.

Ссылка на проект

Github:https://github.com/Alpha-Innovator/SurveyForge