基于AST实现一键自动提取替换国际化文案

news2024/9/20 17:01:41

背景：在调研 @formatjs/cli 使用（使用 @formatjs/cli 进行国际化文案自动提取）过程中，发现有以下需求@formatjs/cli 无法满足：

id 需要一定的语义化；

defaultMessage和Id不能直接hash转换；

需要直接从中文转换为formatMessage；

需要显式注入ID（个人觉得编译时注入还是反直觉了一点）；

另外也是希望借助这个机会好好学一下AST相关知识，所以决定自己写一个AST转换工具。

*注意：工具无法满足脱离中文文案和文件名的语义化ID需求。

实现效果

如何使用

https://www.npmjs.com/package/core-i18n-cli?activeTab=readme

安装

npm i -g core-i18n-cli

CLI 参数

corei18n `-i, --init`

初始化项目，生成配置文件 corei18n.config.json，方便根据你的项目需求进行配置。

默认配置包括以下参数：

export type ProjectConfig = {
  /** corei18n文件根目录，用于放置提取的langs文件 */
  corei18nDir: string;
  /** 导出的新增文案目录 */
  tempLangFile: string;
  /** 需要做国际化的文件目录 */
  path: string;
  /** 已有文案入口，用于过滤已经存在id的文案，支持js、ts、json */
  localLangFile?: string;
  /** 忽略的文件 string | string[]，参考GlobOptions.ignore */
  ignoreFile?: GlobOptions["ignore"];

  /** 生成id的方式，默认为translate，需要提供baiduApiKey */
  idType: "translate" | "hash";
  /** 百度翻译开放平台配置，参考 https://fanyi-api.baidu.com/product/113 */
  baiduApiKey?: {
    appId: string;
    appKey: string;
  };
  /** 生成id前缀，会以.拼接在id前面 */
  idSuffix?: string;
  /** 替换后是否保留DefaultMessage，默认为false */
  keepDefaultMessage?: boolean;
  /** 格式化代码的选项，参考prettier.options */
  prettierOptions?: Options;
};

例子：

{
  "corei18nDir": "./.corei18n",
  "tempLangFile": "./.corei18n/tempLang.json",
  "path": "src/pages/**/*.{ts,js,jsx,tsx}",
  "localLangFile": "src/locales/zh-CN.ts",
  "ignoreFile": "src/pages/**/*.d.ts",
  "baiduApiKey": {
    "appId": "",
    "appKey": ""
  },
  "keepDefaultMessage": false,
  "idType": "hash",
  "idSuffix": "tools",
  "prettierOptions": {
    "parser": "typescript",
    "printWidth": 80,
    "singleQuote": true,
    "trailingComma": "all",
    "proseWrap": "never"
  }
}

corei18n `-s, --scan`

一键扫描指定文件夹下的所有中文文案，新增文案会存放至tempLangFile

corei18n `-r, --replace`

一键替换指定文件夹下的所有中文文案

实现过程

关于AST

AST explorer：https://astexplorer.net/

AST（抽象语法树）是源代码的抽象表示形式，它捕捉了代码的结构，而不关心具体的字符格式。AST是在编译器设计和解析源代码时常见的一种数据结构。

在编程语言的编译过程中，源代码首先被解析器解析成一种称为AST的中间表示。AST反映了代码的语法结构，每个节点代表代码中的一个结构元素，如表达式、语句、函数、变量等。这种树状结构使得程序的结构和语法可以被更容易地分析和处理。

操作流程

暂时无法在飞书文档外展示此内容

scan 阶段

根据path和ignoreFile得到所有目标文件
对于每个文件，读取文件内容，将代码转换为AST
遍历AST节点，若是StringLiteral或者JSXText，判断是否符合要求（包含中文且不属于default Message），如果是则记录下来
过滤得到所有新增文案并生成id
将新增文案导出到目标文件

replace 阶段

根据path和ignoreFile得到所有目标文件
获取所有文案对；
对于每个文件，读取文件内容，将代码转换为AST
遍历AST节点，若是StringLiteral或者JSXText，判断是否符合要求（包含中文且不属于default Message），如果是则替换当前AST节点；
使用prettier进行格式化；
根据AST生成代码写入文件路径；