【dbt】使用seed导入csv文件

在做数据准备时，偶而也会遇到有.csv文件需要读取的情况，dbt提供seed功能读取.csv文件到数据库。读取后的表，可以使用ref()方法引用。

测试环境

• dbt 1.5
• 数据库：Postgres 14

准备测试数据

可以使用自己准备的测试.csv文件。也可以使用 jafgen 包来生成测试数据：

1. 执行pip install jafgen 命令安装jafgen。
2. 安装完成后，执行 jafgen --years 1 会在当前目录下的jaffle-data目录生成一年的测试数据，包括：
   • raw_customers.csv 客户ID和名称
   • raw_items.csv 商品SKU和order_id关联
   • raw_orders.csv 订单时间、门店ID、总额等
   • raw_products.csv 产品价格和描述
   • raw_stores.csv 门店信息
   • raw_supplies.csv 供应信息
3. 将 jaffle-data 目录及文件 copy 到 <dbt-project>/seeds/ 目录下。

直接导入数据库