IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> ExcelToMySQL-批量导入Excel到MySQL数据库 -> 正文阅读

[大数据]ExcelToMySQL-批量导入Excel到MySQL数据库

ExcelToMySQL

简介:一个实现自动化导入excel文件到mysql数据库的工具

工具截图:

在这里插入图片描述

使用方法:

常规界面选择excel文件目录,填入目标数据库,选择导入模式,点击开始即可导入目录下所有excel文件。

工具特色:

高速自动化,一键式,无人值守,自动纠错,高级功能可选

代码请见:

https://github.com/ryjfgjl/ExcelToMySQL

主要Python包:

PySimpleGUI
numpy
pandas
pymysql
chardet

详细介绍:

如果电脑上有python环境,可以运行如下命令启动:

python E:\Python\Project\python-excelimporter\interface.py

也可以通过Cx-Freeze打包成exe文件:

cmd: cd E:\Python\Project\python-excelimporter

python E:\Python\Project\python-excelimporter\setup.py build.

如果没有python环境,可以联系2577154121@qq.com,获取exe文件可以直接运行。

选项介绍:

常规:

Excel文件:

所在文件夹:选择要导入的excel文件所在目录,该目录下所有的excel文件(包括xls、xlsx和csv格式)都将被导入

MySQL连接:

填入要导入的目标数据库连接信息
主机:
端口:
用户:
密码:
数据库:

模式:

覆盖模式下,在导入一张表前,工具将先删除同名的表,在创建并导入数据。

追加模式下,工具将直接将数据导入到同名的表

高级:

CSV文件编码:

因为csv格式没有记录文件编码,所以我们不能确定其编码格式
如果选择自动,工具将自动猜测其编码格式,如果选择或者填写特定的编码格式,工具将先使用用户提供的编码解码,如果失败,再尝试用常见编码格式解码,如果失败再通过猜测其编码格式
如何确定csv文件的编码,可以参考下面文章
http://pandaproject.net/docs/determining-the-encoding-of-a-csv-file.html

将这些值替换为null:

对于常见的excel错误单元格或者某特定的值,填入以逗号分隔,将被替换为null

为创建的表名添加前缀:

可以为工具创建的表名指定前缀,以示区分

删除空行:

如选择,工具将删除所有空行

去除字符前后空格:

若选择,工具将去除字符前后空格

跳过空表:

若选择,如果表格没有数据,工具将不会创建数据库表

其他:

表名的确定:

使用文件名并小写,将非文字字符替换为_。如果一个excel文件包含多个sheet,将采用文件名+_+sheet名。如果表名超过64个字节,自动截断并再前面加上计数如0_表名

列名的确定:

使用第一行作为列名,如果列名全为空,将用下一个非空行作为列名,如果存在列名为空,将用unnamed+计数作为列名,如果列名超过64个字节,自动截断。列名将去除前后空格并将%替换为_

列类型的确定:

工具将计算每列最大长度,如果小于255,将使用varchar(255),如果大于255,将使用text。

常见错误1366:

如果excel文件包含表情等utf8mb4编码的字符,在utf8编码的表中,如果sql_mode为STRICT_TRANS_TABLES,会报1366错误。工具将暂时设置sql_mode=’’,导入会设回默认值

常见错误1118:

对于一行数据的总长度,mysql限制为65535,如果超长,将报1118错误。工具将全部列类型替换为text(text类型一列只占1个字节长度)

作者: ryjfgjl

如需帮助,请联系2577154121@qq.com

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-10-20 12:33:20  更:2021-10-20 12:35:41 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 3:13:49-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码