首页
学习
活动
专区
圈层
工具
发布

Java读取大文本文件保存到数据库

Java读取大文本文件保存到数据库 1、追求效率   将文件读取到内存,效率比较高,经过测试读取1G左右的文本文件,机器内存消耗达到接近3个G,对内存消耗太大,不建议使用 2、通过调用第三方类库实现   ...; 4 import java.io.IOException; 5 import java.sql.Connection; 6 import java.sql.DriverManager;...PreparedStatement pstmt = null; 19 20 /** 21 * 使用commons-io.jar包的FileUtils的类进行读取 22 * txt中内容文件的分割必须为...|,java中需要加转译符号 23 * @Title: readTxtFileByFileUtils 24 * @author sunt 25 * @date...(大约100百万模拟数据),以|作为分隔符 image.png 导入数据库成功 image.png 注意事项:   需要修改自己的数据库连接信息和指定导入文本文件的路径,insertCustInfo方法需要自己修改实现

3.2K30
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    mysql 数据库数据文件保存路径更改

    mysql 数据安装的时候默认的数据库文件保存路径是在C:\ProgramData\MySQL\MySQL Server 5.5\data文件下的,但是我们安装数据库在服务器上的时候往往是不要在...C盘中,所有我们就想要把数据保存的文件给更改了,那我们就来看看这样该怎么样来操作呢?  ...首先,我们必须把我们的Mysql 数据的服务给停掉,在cmd 中输入net stop mysql (停掉mysql 数据库)      ,但是我们往往可能碰到的情况是你所用的用户是不具备这种权限的,那么我们只能够管理里面把...mysql 数据库给停了,然后才是真正的操作:   1、新建文件夹D:\mysql\data(这是你自己希望的保存路径);   2、找到你的数据库数据文件默认的保存路径(C:\ProgramData\MySQL...5.5/Data/" datadir="D:\mysql\data"(D:/mysql/data这种写法好像的是行的,你可以自己去试试看)   4、重新启动mysql服务 cmd中输入:net start

    9.7K10

    Java 中几种获取文件路径的方式

    前言 Java 开发中我们经常要获取文件的路径,比如读取配置文件等等。今天我们就关于文件的路径和如何读取文件简单地探讨一下。 2. 文件的路径 文件的路径通常有 相对路径 与 绝对路径。...2.1 相对路径 以当前文件为基准进行一级级目录指向被引用的资源文件。在 Java 代码中以当前运行的代码所在的位置为参照位置,只要被引用的文件相对于引用的文件的位置不变就可以被读取到。...2.2 绝对路径 文件在文件系统中真正存在的路径,是指从硬盘的根目录(Windows为盘符)开始,进行一级级目录指向文件(从根目录一层层读写)。...Java 中读取文件 我们先来声明一个测试路径: foo |_src | |_Test.java | |_app.yml 其中 Test.java 用来编写读取 app.yml 文件的逻辑。...Java 中通过java.io.File 来进行文件操作。并且提供了以下三个方法来获取文件的路径。 3.1 getPath 该方法返回文件抽象路径名的字符串形式。

    16.9K20

    高性能Java代码示例:字符串拼接并保存到文件中

    标题:高性能Java代码示例:字符串拼接并保存到文件中 一段高性能的Java代码,帮助大家了解如何将字符串拼接并保存到文件中。...在许多现实世界的应用场景中,我们需要将多个字符串拼接在一起,并将其保存到文件中,例如日志记录、数据持久化等。在处理大量数据时,低效的字符串拼接和文件写入操作可能导致性能下降。...案例分析: 假设我们需要将100000个字符串拼接成一个较长的字符串,并将其保存到文件中。传统的做法是使用普通的字符串拼接操作,如使用"+"操作符或StringBuilder类。...现在,让我们来使用更高性能的解决方案,使用StringBuilder类来拼接字符串并使用BufferedWriter类来写入文件,代码如下: import java.io.BufferedWriter;...结论: 通过本文的案例分析,我们了解到了在Java中如何高性能地拼接字符串并保存到文件中。

    43010

    Java 中 Spring Boot 使用 MyBatis 访问 MySql 数据库

    上一篇文章,我们也介绍了访问 MySql 数据库 - Java 中 Spring Boot 使用 JdbcTemplate 访问 MySql 数据库。...本文我们介绍 Java 中 Spring Boot 使用 MyBatis 访问 MySql 数据库。 MyBatis 是一款优秀的持久层框架,它支持自定义 SQL、存储过程以及高级映射。...MyBatis 可以通过简单的 XML 或注解来配置和映射原始类型、接口和 Java POJO(Plain Old Java Objects,普通老式 Java 对象)为数据库中的记录。...代码演示的环境见文章 - Java 中 Spring Boot 使用 JdbcTemplate 访问 MySql 数据库。...数据库配置信息 在 application.yml 中配置数据库信息如下: # Server server: port: 8081 # DataSource Config spring: datasource

    1.5K20

    Java中CMD命令来备份mysql数据库备份文件出来为0字节问题

    Java中CMD命令来备份mysql数据库备份文件出来为0字节问题 https://blog.csdn.net/qq_36936155/article/details/78978242 今天客户打电话来说我们的系统备份的...结果,神奇事情出现了,所备份的数据库文件确实是空的,最后是东找西找,又是百度又是谷歌的,还是没有解决。...后来我一想,mysql的安装路径不一样,我都喜欢把软件工具都安装在C盘以外,自定义的安装路径,而客户是安装在默认的Program Files下面, 而文件夹有空格的名称的经常会致使一些莫名其妙的问题出现...结果,神奇事情出现了,所备份的数据库文件确实是空的,最后是东找西找,又是百度又是谷歌的,还是没有解决。...后来我一想,mysql的安装路径不一样,我都喜欢把软件工具都安装在C盘以外,自定义的安装路径,而客户是安装在默认的Program Files下面, 而文件夹有空格的名称的经常会致使一些莫名其妙的问题出现

    1.2K40

    Java 中如何加密配置文件中的数据库账号和密码?

    作为程序员每天的开发工作都离不开跟数据库打交道,而且我们的应用程序往往都会配置数据库的链接,那你有没有想过,任何一个能接触到我们项目代码的人员,都可以看到配置文件里面的账号秘密?...相信很多人的项目里面配置文件都是类似这样写的 ############### Mysql配置 ######################### spring.datasource.type=com.zaxxer.hikari.HikariDataSource...如果是这样的写法,无非就是在裸奔,任何一个能接触到这个文件的人,都能够用 MySQL 的客户端工具进行数据库的链接,里面的数据毫无安全可言。...jasypt 可以帮助我们在配置文件中配置加密后的账号和密码,然后结合秘钥,就可以完全控制数据库的安全性。下面我们就来试一下吧。...后续在生产环境中,只需要在启动参数中传入与本地和测试环境不一样的秘钥,就可以有效的防止数据库的账号密码被泄露了,就连开发人员都不知道是什么,只要配置的运维人员知道,这个安全性就高很多了,怎么样小伙伴你学会了吗

    3.9K20

    深入探索Java中的File类与IO操作:从路径到文件的一切

    递归:探索更深的层次 代码示例:递归遍历文件夹 结论 欢迎来到Java学习路线专栏~探索Java中的File类与IO操作 ☆* o(≧▽≦)o *☆嗨~我是IT·陈寒 ✨博客主页:IT·陈寒的博客...在Java中,我们使用File类来抽象地表示文件和目录的路径名,并通过该类提供的方法来进行各种操作,如获取文件信息、判断文件类型、创建和删除文件等。...File类的作用与构造方法 File类是Java中用于处理文件和目录的类,它抽象地表示了文件和目录的路径名。在日常编程中,我们常常需要操作文件,比如读写文件、复制文件、移动文件等。...构造方法中禁止使用递归,以避免出现不必要的复杂性。 递归在文件和目录处理中也有广泛应用。通过递归遍历目录,我们可以深入到每个子目录中,完成更加复杂的操作。...结论 File类在Java中扮演着重要的角色,它为我们处理文件和目录提供了丰富的功能。通过学习和掌握File类的使用方法,我们能够更加灵活地操作文件,实现各种有用的功能。

    1.7K10

    MySQL---数据库从入门走向大神系列(八)-在java中执行MySQL的存储过程

    http://blog.csdn.net/qq_26525215/article/details/52143733 在上面链接的博客中,写了如何用MySQL语句定义和执行存储过程 Java执行存储过程:...Java演示执行带输入参数的存储过程: 构造 call 转义序列时,请使用 ?(问号)字符来指定 IN 参数。此字符充当要传递给该存储过程的参数值的占位符。...向 setter 方法传递值时,不仅需要指定要在参数中使用的实际值,还必须指定参数在存储过程中的序数位置。例如,如果存储过程包含单个 IN 参数,则其序数值为 1。...Java演示执行带输入输出参数的存储过程: 构造 call 转义序列时,请使用 ?(问号)字符来指定 OUT 参数。 此字符充当要从该存储过程返回的参数值的占位符。...使用 registerOutParameter 方法为 OUT 参数指定的值必须是 java.sql.Types 所包含的 JDBC 数据类型之一,而它又被映射成本地 SQL Server 数据类型之一

    3.1K20
    领券