AI开源项目

onefilellm-命令行数据聚合工具

一个用于LLM数据摄取的命令行工具,支持从GitHub、本地库、arXiv、Sci-Hub论文、YouTube逐字稿及网络文档中抓取数据,并将其保存为文本文件或剪贴板,方便进行LLM的摄取。

一个用于LLM数据摄取的命令行工具,支持从GitHub、本地库、arXiv、Sci-Hub论文、YouTube逐字稿及网络文档中抓取数据,并将其保存为文本文件或剪贴板,方便进行LLM的摄取。
onefilellm的特点:
1. 支持从GitHub或本地库提取数据
2. 能够从arXiv或Sci-Hub论文中抓取内容
3. 支持提取YouTube视频的逐字稿
4. 可以从网络文档URL获取数据
5. 将抓取的数据保存为文本文件或剪贴板

onefilellm的功能:
1. 使用命令行指定要抓取的GitHub库
2. 提供arXiv或Sci-Hub论文的链接进行数据提取
3. 输入YouTube视频链接以获取其逐字稿
4. 从网络文档URL提取文本内容
5. 将抓取的数据直接输出到文本文件或剪贴板

相关推荐

暂无评论

暂无评论...