首页
学习
活动
专区
圈层
工具
发布

如何将 Text, XML, CSV 数据文件导入 MySQL

原文出处: freenik@Jianshu 将 外部数据导入(import)数据库是在数据库应用中一个很常见的需求。...本文要讨论的内容,是如何方便地将多种格式(JSON, Text, XML, CSV)的数据导入MySQL之中。...本文大纲: 将Text文件(包括CSV文件)导入MySQL 将XML文件导入MySQL 将JSON文件导入MySQL 使用MySQL workbench的Table Data Export and Import...将Text文件(包括CSV文件)导入MySQL 这里我们的讨论是基于一个假定,Text file和CSV file是有着比较规范的格式的(properly formatted),比如说每行的每个数据域(...将XML文件导入MySQL 这件事的完成方式,与我们的XML的形式有着很大的关系。 举个例子说,当你的XML数据文件有着很非常规范的格式,比如: xml version="1.0"?

9.4K80

如何通过Python将CSV文件导入MySQL数据库?

CSV文件导入数据库一般有两种方法: 1、通过SQL的insert方法一条一条导入,适合数据量小的CSV文件,这里不做赘述。...2、通过load data方法导入,速度快,适合大数据文件,也是本文的重点。...样本CSV文件如下: 总体工作分为3步: 1、用python连接mysql数据库,可参考如何使用python连接数据库?...2、基于CSV文件表格字段创建表 3、使用load data方法导入CSV文件内容 load data语法简介: LOAD DATA LOCAL INFILE 'csv_file_path' INTO...原因是不支持命令 load data 解决方法: 需要更改下配置文件 在mysql安装目录中找到my.ini配置文件,复制以下内容到文件中 [mysqld] #服务端配置 local-infle

13.7K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    将XML导入到对象中

    本章介绍如何使用%XML.Reader将XML文档导入到 IRIS对象中。注意:使用的任何XML文档的XML声明都应该指明该文档的字符编码,并且文档应该按照声明的方式进行编码。...要导入XML文档,创建%XML.Reader的实例,然后调用该实例的方法。这些方法指定XML源文档,将XML元素与启用XML的类相关联,并将源中的元素读取到对象中。...也可以指定此实例的Format属性,以指定要导入的文件的格式。默认情况下,InterSystems IRIS假定XML文件为文字格式。...将这个文件中的一个或多个XML元素名与具有相应结构的支持InterSystems IRIS XML的类关联起来。...它从输入文件中读取每个元素,直到没有剩余元素。最后,如果循环因错误而终止,则该错误将显示在当前输出设备上。如上所述,此示例不将对象存储到数据库。

    3.7K10

    将excel文件导入到数据库

    ://blog.csdn.net/jayxujia123/article/details/13684313 参考:http://kevin850115.iteye.com/blog/578142 MySQL...官网:http://dev.mysql.com/doc/refman/5.7/en/load-data.html 学弟有个面试题,在群里问了下如何将excel文件导入到数据库。...以前也没试过,正好在学习MySQL,练练手吧。 首先,将excel文件另存为用逗号分隔的csv文件,传到linux服务器上,假设叫做test.csv。...用sed命令将第一行的列名称去掉sed -i '1p' test.csv  然后建库建表的命令的就得手工进行了,根据具体的表结构,大致命令如下: > CREATE DATABASE `demo`; >...确保表结构和我们的原始EXCEL 的一致后,可用执行导入数据操作了,如下: > load data local infile '/root/test.csv' into table tb1 fields

    6.9K30

    将Excel文件数据库导入SQL Server

    将Excel文件数据库导入SQL Server的三种方案//方案一: 通过OleDB方式获取Excel文件的数据,然后通过DataSet中转到SQL Server openFileDialog = new...ToString().Trim();         tableName = "[" + tableName.Replace("'","") + "]";         //利用SQL语句从Excel文件里获取数据...Exception ex)     {         Console.WriteLine(ex.ToString());     } } //方案二: 直接通过SQL语句执行SQL Server的功能函数将Excel...文件转换到SQL Server数据库 OpenFileDialog openFileDialog = new OpenFileDialog(); openFileDialog.Filter = "Excel...        excelio.Close(); } 本文由来源 21aspnet,由 javajgs_com 整理编辑,其版权均为 21aspnet 所有,文章内容系作者个人观点,不代表 Java

    4.3K30

    测试使用navicat工具将MySQL格式SQL文件导入到MogDB数据库

    前言 当我们想把mysql格式的SQL文件导入到MogDB数据库时,我们可以借助navicat工具,先将SQL文件导入到mysql数据库中,再使用数据传输功能把SQL中的对象和数据直接导入到MogDB...操作方法 Part 1:将mysql格式SQL文件(mysql.sql)导入到mysql的test数据库: mysql.sql 文件内容: CREATE TABLE `mysql` ( `ID` int...2:从mysql的test数据库导入到MogDB数据库 方法一:将导入到test数据库的数据库对象导出到MogDB的mys数据库。...选择要传输的数据库对象,点击下一步: 确认无误后,点击开始: 传输完成后点击关闭: SQL文件中的对象成功导入到MogDB数据库: 方法二:将导入到test数据库的数据库对象导出为PostgreSQL...mysql" ADD PRIMARY KEY ("ID"); 打开MogDB,右键点击mysql数据库选择运行SQL文件,将export.sql文件导入: 确认无误,点击开始。

    5K30

    Java调用SqlLoader将大文本导入数据库

    Java调用SqlLoader将大文本导入数据库 业务场景:将一千万条数据,大约500M的文本文档的数据导入到数据库   分析:通过Java的IO流解析txt文本文档,拼接动态sql实现insert入库...,例如订单表,会造成大量用户无法下单,影响数据库的性能 第三:这种操作可扩展性不强,每次只能针对指定的表,指定的列操作 针对以上缺点,现在通过接口调用数据库系统命令实现,通过可视化界面,选择要导入的表,...要导入那些字段,上传指定的txt文本,会自动生成对应的模板文件,实现大批量数据高效率的导入到数据库,通过可配置化即可实现,相对前一种思路扩展性较强, 具体接口如下 1 package com.sun.sqlloader.api...31 * @param pwd 数据库的密码 32 * @param database 连接数据库的地址 33 * @param fileRoute 文件路径 34...java.io.OutputStreamWriter; 8 9 /** 10 * 循环将数据按照指定的格式写入文本文件 11 * @ClassName: OperaFile 12 *

    1.9K30

    将OpenStreetMap导出的OSM数据导入MySQL数据库

    import-osm-data-into-mysql-2.png 我们点击红框内的导出按钮可以导出上面默认区域(两个经纬度组成的区域)内的全部地图数据(街道、建筑等),导出数据文件的后缀格式为.osm,...默认导出文件的名称为map.osm。...安装osmosis 我们已经导出了地图数据(map.osm),我们可以通过osmosis来实现数据导入数据库,osx系统可以通过brew进行安装,如下所示: yuqiyu@hengyu ~> brew...install osmosis 初始化数据库表 通过osmosis导入到数据库时,需要提前创建数据库以及数据表,点击 下载MySQL建表语句。...导入数据库 yuqiyu@hengyu ~> osmosis --read-xml file="/Users/yuqiyu/Downloads/map.osm" --write-apidb-0.6 host

    6.3K20
    领券