Arxiv
arXiv 是一个开放获取的档案库,收录了物理学、数学、计算机科学、定量生物学、定量金融学、统计学、电子工程与系统科学以及经济学领域的 200 万篇学术文章。
安装与设置
首先,你需要安装 arxiv python 包。
pip install arxiv
其次,你需要安装 PyMuPDF python 包,它会将从 arxiv.org 网站下载的 PDF 文件转换为文本格式。
pip install pymupdf
文档加载器
查看 使用示例。
from langchain_community.document_loaders import ArxivLoader
API Reference:ArxivLoader
检索器
查看 使用示例。
from langchain_community.retrievers import ArxivRetriever
API Reference:ArxivRetriever