要自动扫描整个项目并生成 requirements.txt 文件，你可以使用 pipreqs 工具。pipreqs 会根据你的代码中实际使用的库来生成 requirements.txt 文件，而不是扫描虚拟环境中的所有库，从而避免了不必要的依赖。

安装 pipreqs

首先，确保你已经安装了 pipreqs：

pip install pipreqs

使用 pipreqs 生成 requirements.txt

在项目根目录下运行以下命令来生成 requirements.txt 文件：

pipreqs /path/to/your/project

例如，如果你的项目在当前目录下，可以运行：

pipreqs .

示例项目结构

假设你的项目结构如下：

my_project/
├── app.py
├── blueprints/
│   ├── main.py
│   ├── category.py
│   └── ...
├── config.py
├── util/
│   ├── fetchWebsiteData.py
│   └── ...
└── requirements.txt

在项目根目录 my_project 下运行 pipreqs .，将扫描所有 Python 文件并生成 requirements.txt 文件。

示例流程

1. 在项目根目录下运行 pipreqs：

   cd my_project
   pipreqs .
   

2. 生成的 requirements.txt 文件：

   pipreqs 将生成一个 requirements.txt 文件，内容类似如下：

   Flask==2.0.1
   requests==2.25.1
   numpy==1.21.0
   beautifulsoup4==4.9.3
   chardet==4.0.0
   

注意事项

• 手动调整：在某些情况下，pipreqs 可能不会检测到所有依赖项（例如，通过动态导入的库）。建议手动检查并补充 requirements.txt 文件。
• 已有 requirements.txt 文件：如果项目中已经有 requirements.txt 文件，运行 pipreqs 时会提示覆盖文件。如果你希望合并新的依赖项，建议先备份原文件。

示例完整流程

以下是一个完整的示例流程：

1. 项目结构：

   my_project/
   ├── app.py
   ├── blueprints/
   │   ├── main.py
   │   ├── category.py
   │   └── ...
   ├── config.py
   ├── util/
   │   ├── fetchWebsiteData.py
   │   └── ...
   └── requirements.txt
   

2. 安装 pipreqs：

   pip install pipreqs
   

3. 生成 requirements.txt：

   cd my_project
   pipreqs .
   

4. 检查生成的 requirements.txt 文件：

   打开 requirements.txt 文件，检查是否包含了所有项目所需的依赖项，必要时进行手动调整。

通过这些步骤，你可以自动扫描整个项目并生成 requirements.txt 文件，列出所有所需的依赖项。