SurveyForge : un outil IA pour rédiger automatiquement des articles de synthèse 78

小编 ·

SurveyForge : un outil IA pour rédiger automatiquement des articles de synthèse

SurveyForge est un outil développé par Shanghai AI Lab, dédié à la génération automatique d'articles de synthèse. Il étudie les structures de plans d'articles écrits par des humains et la littérature associée pour produire des plans pertinents, puis utilise des articles académiques de haute qualité pour générer et affiner automatiquement le contenu. Les auteurs ont également créé le benchmark SurveyBench, contenant 100 articles de synthèse écrits par des humains, afin d'évaluer sous plusieurs angles la qualité des articles générés par IA. Cela résout les problèmes courants des articles générés par IA, comme une structure peu cohérente et des références inexactes.

SurveyForge : un outil IA pour rédiger automatiquement des articles de synthèse

Qu'est-ce que SurveyForge ?

SurveyForge est un outil développé par le laboratoire ai de Shanghai, spécialement conçu pour générer automatiquement des articles de synthèse (survey). Il génère des plans raisonnables en étudiant la structure des plans d'articles rédigés par des humains et la littérature des domaines concernés, puis utilise des articles académiques de haute qualité pour générer et optimiser automatiquement le contenu. De plus, les auteurs ont créé le benchmark SurveyBench, qui comprend 100 articles de synthèse rédigés par des humains, afin d'évaluer sous plusieurs angles la qualité des articles générés par l'IA. Cela résout les problèmes courants de structure déraisonnable et de références inexactes que l'on rencontre dans la génération traditionnelle d'articles par l'IA.

SurveyForge:一款自动撰写综述论文的AI工具.webp

Fonctionnalités principales

  • Génération de plan : SurveyForge génère une structure claire et raisonnable en étudiant les plans d'articles rédigés par des humains et la littérature pertinente.

  • Génération de contenu : il recherche de la littérature de haute qualité et combine un mécanisme de mémoire pour générer et optimiser le contenu de l'article.

  • Évaluation multidimensionnelle : le benchmark SurveyBench comprend 100 articles de synthèse rédigés par des humains, utilisés pour évaluer les synthèses générées par l'IA selon trois aspects : qualité des références, qualité du plan et qualité du contenu.

Détails techniques

  • Génération de plan : création de plans en analysant la structure des articles rédigés par des humains et la littérature des domaines concernés.

  • Génération de contenu : utilisation de littérature de haute qualité pour générer et optimiser le contenu de l'article.

  • Benchmark d'évaluation : SurveyBench comprend 100 articles rédigés par des humains, couvrant 10 sujets différents, garantissant la cohérence thématique et la rigueur académique.

Avantages

  • Structure et logique : la qualité des plans générés est proche du niveau humain, résolvant le problème de déséquilibre structurel des méthodes traditionnelles d'IA.

  • Références : la couverture des références clés a presque doublé, avec des citations plus précises.

  • Qualité du contenu : le contenu généré est plus cohérent et complet, pour un coût extrêmement bas — générer une synthèse d'environ 64k tokens coûte moins de 0,5 dollar et l'ensemble du processus ne prend que 10 minutes.

  • Critères d'évaluation : SurveyBench fournit des critères d'évaluation objectifs, facilitant la comparaison des performances de différentes méthodes.

Mode d'emploi

  • Génération d'article : en raison des limites de fréquence des appels API, les utilisateurs doivent demander la génération d'un article par e-mail ou en soumettant un problème (issue) dans le dépôt. Le temps de génération est d'environ 10 minutes.

  • Évaluation d'article : utilisez SurveyBench pour l'évaluation, ce qui peut être effectué en exécutant la commande cd SurveyBench && python test.py --is_human_eval dans le terminal.

Lien du projet

Github :https://github.com/Alpha-Innovator/SurveyForge