我整理的一些关于【数据库】的项目学习资料（附讲解～～）和大家一起分享、学习一下：

 https://d.51cto.com/bLN8S1

利用 Shell 脚本读取文件每一行并插入 MySQL 数据库

在现代软件开发中，数据的处理与存储是至关重要的一环。MySQL 作为一种广泛使用的数据库，常常需要通过脚本来进行数据的导入与管理。本文将为大家介绍如何使用 Shell 脚本逐行读取文本文件并将数据插入 MySQL 数据库。我们将一步一步地解释流程，并提供相关的代码示例。

1. 环境准备

首先，我们需要确保已经安装了 MySQL 数据库，以及能够运行 Shell 脚本的环境。可以在 Linux 或 macOS 系统下直接进行操作。如果你的系统是 Windows ，可以考虑使用 WSL（Windows Subsystem for Linux）来进行操作。

1.1 安装 MySQL

如果你还没有安装 MySQL，可以直接在终端通过以下命令进行安装：

# 在 Ubuntu 上安装 MySQL
sudo apt update
sudo apt install mysql-server
  • 1.
  • 2.
  • 3.
1.2 启动 MySQL

安装完成后，确保 MySQL 服务正在运行：

sudo service mysql start
  • 1.
1.3 创建数据库和表

在插入数据之前，我们需要先创建一个数据库和表来存储数据。假设我们需要存储用户信息，可以执行以下 SQL 语句：

CREATE DATABASE mydatabase;

USE mydatabase;

CREATE TABLE users (
    id INT AUTO_INCREMENT PRIMARY KEY,
    name VARCHAR(100) NOT NULL,
    age INT NOT NULL
);
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.

2. 编写 Shell 脚本

下面是一个简单的 Shell 脚本示例，用于逐行读取文件并插入 MySQL 数据库。

2.1 示例文件

首先，准备一个文本文件 users.txt，内容格式如下：

Alice,25
Bob,30
Charlie,22
  • 1.
  • 2.
  • 3.
2.2 Shell 脚本代码

接下来，我们来编写读取文件并插入数据的 Shell 脚本 insert_users.sh。在这个脚本中，我们将使用 mysql 命令行工具。

#!/bin/bash

# 数据库连接配置
DB_NAME="mydatabase"
DB_USER="your_username"
DB_PASS="your_password"

# 读取文件并插入数据
while IFS=',' read -r name age; do
    mysql -u "$DB_USER" -p"$DB_PASS" -D "$DB_NAME" -e "INSERT INTO users (name, age) VALUES ('$name', '$age');"
done < users.txt
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
2.3 脚本解释
  • IFS=','：设置输入字段分隔符为逗号，以便正确读取每一行的数据。
  • read -r name age：逐行读取文件，获取每一行的姓名与年龄。
  • mysql -u "$DB_USER" -p"$DB_PASS" -D "$DB_NAME" -e "INSERT INTO users (name, age) VALUES ('$name', '$age');"：使用 MySQL 命令行工具执行插入语句。

3. 运行脚本

在终端中，给予脚本执行权限并运行：

chmod +x insert_users.sh
./insert_users.sh
  • 1.
  • 2.

运行后，通过 MySQL 查询命令可以看到数据是否成功插入：

SELECT * FROM users;
  • 1.

4. 状态图

下面是一个简单的状态图，描述了这个过程的状态切换。

file exists file not found values exist success failure FileCheck ReadFile InsertData InsertSuccess InsertFailure

5. 错误处理

在实际生产环境中，不可避免地会出现一些错误，例如文件缺失、数据库连接失败等。在我们的 Shell 脚本中，我们可以通过检查命令的返回值来进行错误处理。

#!/bin/bash

DB_NAME="mydatabase"
DB_USER="your_username"
DB_PASS="your_password"

# 读取文件并插入数据
while IFS=',' read -r name age; do
    if mysql -u "$DB_USER" -p"$DB_PASS" -D "$DB_NAME" -e "INSERT INTO users (name, age) VALUES ('$name', '$age');"; then
        echo "Inserted: $name, $age"
    else
        echo "Error inserting: $name, $age" >&2
    fi
done < users.txt
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.

通过上述代码，每次插入操作后都会输出对应的信息，便于后续的排查与维护。

6. 总结

通过使用 Shell 脚本，我们可以轻松实现将文件中的数据逐行读取并插入 MySQL 数据库的操作。上述流程不仅展示了基本的读写操作，同时也强调了错误处理的重要性。在实际应用中，根据具体需求，可以对脚本进行扩展与优化。

在数据驱动的时代，掌握能够自动化操作数据的技能，无疑将使你在技术的浪潮中立于不败之地。希望本文能够对你有所帮助，鼓励你深入探索 Shell 脚本与数据库之间的强大结合。

整理的一些关于【数据库】的项目学习资料（附讲解～～），需要自取：

 https://d.51cto.com/bLN8S1