- 综合排序
- 最热优先
- 最新优先
- 来自专栏桃花源
使用IO流复制文件
首先能想到的就是，应该采用字节流对文件进行复制，文件可以是任何形式，如图片、视频、办公文档、压缩文件等等。 ; //耗时 System.out.println((endTime - startTime)); } } 输出： 1410 这种方法虽然可以完成文件复制功能 4、字节缓冲流加缓存，实现文件复制 import java.io.FileInputStream; import java.io.FileOutputStream; public class CopyFile ，进一步提升了文件的读写效率，适当增大缓存数组，充分利用内存实现文件的极速复制。 总结： 文件复制的效率依次为： 字节流 < 缓冲流 < 缓存 < 缓冲流+缓存
70820编辑于 2023-10-16 - 来自专栏数据和云
PostgreSQL的流复制搭建
单机版流复制测试环境搭建 搭建规划: 主库 备库 数据目录 /pgdata/12/data /pgdata/1202/data 归档目录 /pgdata/12/arch /pgdata/1202/arch 端口 5432 5433 创建流复制用户： create role replica with replication login password '123456'; 备份主库： pg_basebackup pg-wal.tar -C /pgdata/12/arch 修改postgresql.conf： 参数修改max_wal_senders = 10 #设置可以最多有几个流复制连接 ，差不多有几个从，就设置几个 ，相当月mysql的binlog dump线程 wal_keep_segments = 0 #设置流复制保留的最多的xlog数目 128 wal_sender_timeout = 60s #设置流复制主机发送数据包的超时时间 max_connections = 100 #一般查多于写的应用从库的最大连接数比较大
1.1K30编辑于 2022-03-04 - 来自专栏kwai
玩转PostgreSQL主从流复制
PostgreSQL 在 9.0 以后引入了流复制（Streaming Replication）。流复制提供了将 WAL 记录连续发送并应用到从服务器以使其保持最新状态的功能。 通过流复制，从服务器不断从主服务器同步相应的数据，同时，从服务器作为主服务器的一个备份。本文主要记录 PostgreSQL 主从流复制的部署。 ，一般和从服务相等wal_sender_timeout = 60s #流复制超时时间max_connections = 100 #最大连接数，必须不大于从库的配置重启数据库sudo service 300 #最大连接数，必须不小于主库的配置hot_standby = on #说明这台机器不仅用于数据归档，还可以用于数据查询max_standby_streaming_delay = 30s #流备份的最大延迟时间 这样我们就完成了主从流复制的部署和验证测试。
1.8K20编辑于 2023-03-21 - 来自专栏数据库架构之美
PostgreSQL13.0流复制尝鲜
其实pg从12版本开始就已经对流复制这块做了改动，最大的变化是摒弃了recovery.conf文件，将主备连接信息放入postgresql.conf主配置文件中。 1.主库创建角色用于复制： postgres=# create role replica login replication encrypted password 'replica'; CREATE ROLE [postgres@db02 ~]$ pg_ctl start -l logfile waiting for server to start.... done server started 5.查看复制关系
1K10发布于 2021-02-26 - 来自专栏Hadoop数据仓库
Oracle流复制配置最佳实践
如果选择复制DDLs，需要处理源和目标库上对象或表空间名字不一致的问题 (1) 避免系统生成约束或索引的名字 (2) 数据库间保持相同的表空间名字或者使用一个DDL handler来显式的处理不一致的名字 在下游库上复制模式，用streamsadmin在下游数据库上执行： BEGIN DBMS_STREAMS_ADM.MAINTAIN_SCHEMAS( SCHEMA_NAMES => 'TEST1,TEST2,TEST3,TEST4,TEST5,TEST6', # 复制的模式名 => 'TEST1,TEST2,TEST3,TEST4,TEST5,TEST6', # 复制的模式名 SOURCE_DATABASE 运行流健康检查脚本 Oracle Metalink Note 273674.1. 五、调整网络配置参数 1.
1.5K30发布于 2019-05-25 - 来自专栏前端杂货铺
巧妙复制一个流
实现 复制流并不像复制一个对象一样简单与直接，流的使用是一次性的，一旦一个可读流被消费（写入一个Writeable对象中），那么这个可读流就是不可再生的，无法再使用。 __proto__ = ctx.req; // 此后重新给ctx.req复制，留给后续过滤器消费 ctx.req = cloneReq2; if(body.name ! } await next(); }) 点评: 这种影分身之术可以同时复制出多个可读流，同时需要针对原来的流重新进行赋值，并继承原有属性，这样才能不影响后续的重复消费。 最后，在数据复制的同时，再给其中一个对象复制额外的属性即可： // 将克隆出的cloneReq2重新设置原型链，继承ctx.req原有属性 cloneReq2. __proto__ = ctx.req; // 此后重新给ctx.req复制，留给后续过滤器消费 ctx.req = cloneReq2; 至此，通过Transform实现clone已完成。
56830发布于 2018-09-14 - 来自专栏PostgreSQL研究与原理解析
GPDB - 高可用 - 流复制状态
GPDB - 高可用 - 流复制状态 GPDB的高可用基于流复制，通过FTS进行自动故障切换。自动故障切换需要根据primary-mirror流复制的各种状态进行判断。 本节就聊聊primary-mirror流复制的各种状态。 WALSNDSTATE_STARTUP表示启动状态； WALSNDSTATE_BACKUP表示备份状态 WALSNDSTATE_CATCHUP表示追赶状态 WALSNDSTATE_STREAMING表示流复制状态 若没有shutdown，何时再发起流复制？ Wal sender进程接收到mirror发来的start replication命令后，进入StartReplication开始流复制。 开始流复制前，设置成catchup状态。
37010编辑于 2024-01-09 - 来自专栏数据库架构之美
PostgreSQL主备流复制搭建
Postgresql9开始支持流复制（stream replication），作为pg原生的复制技术，有着很好的性能。本文从几个方面全面介绍pg的流复制技术。 password=replica application_name=s1' recovery_target_timeline = 'latest' 同步流程 下面这个图描述了postgresql主从流复制的流程 下面这张图很清晰地描述了流复制的几种模式： ? off：对于本机wal不用写到磁盘就可以提交，是异步模式，存在数据丢失风险。 local：不管有没有备库只需要保证本机的wal日志刷到磁盘就行。 minimal：除了实例crash恢复需要的记录，其他不记录，比如CREATE TABLE AS，CREATE INDEX，CLUSTER，COPY可以跳过，该模式记录的日志信息不足以支持wal归档和流复制 总体来说流复制的内容比较简单，本文只是从基础知识层面介绍了流复制的原理与简单配置。好吧，加油吧。 Catch.jpg
3.5K10发布于 2019-12-18 - 来自专栏Hadoop数据仓库
Oracle 10.2 流复制问题（四
article/details/53924087 系统配置：Linux CentOS 5、Oracle Enterprise Edition Release 10.2.0.1.0、表级单向流复制 问题现象：流复制失效，源表更新，目标表没有更新 排错过程： 1) 查看捕获进程状态 select capture_name,status from dba_capture; Capture status enough to spill. amountNeeded: 1993904 Session MaxMem 10485760, CacheSize 129264, MemSize 129264 4) 获得源库流复制参数 APPLY',2,'CAPTURE') process_name, name, value from sys.streams$_process_params order by 1,2; 5) 在源库更改流复制的
69720发布于 2019-05-25 - 来自专栏shimeath的Java学习
缓冲流---为字节流和字符流复制文件增加缓冲流
缓冲流——增强性能 字节流的缓冲流(均未增加新方法) BufferedInputStream BufferedOutputStream 字节符的缓冲流 方法名称 方法作用 readLine() 返回值为 String对象，读取一行 newLine() 换行符 字节流的缓冲流代码 package cn.hxh.io.buffered; import java.io.*; public class BufferedByte oStream.write(flush, 0, len); } oStream.flush(); oStream.close(); iStream.close(); } } 字符流的缓冲流代码
60720发布于 2020-07-30 - 来自专栏王硕
PostgreSQL 10 流复制问题记录
参数设置为： listen_addresses = '*' max_connections = 110 wal_level = hot_standby max_wal_senders = 2 wal_
73110发布于 2019-03-12 - 来自专栏学习内容
IO流常用复制和读写文件
1、IO的分类 根据数据的流向分为：输入流和输出流。 输入流 ： 把数据从 其他设备 上读取到 内存 中的流。 输出流 ： 把数据从 内存 中写出到 其他设备 上的流。 格局数据的类型分为：字节流和字符流。 字节流 ： 以字节为单位，读写数据的流。 字符流 ： 以字符为单位，读写数据的流。 2、顶级父类 输入流 输出流 字节流 字节输入流 InputStream 字节输出流 OutputStream 字符流 字符输入流 Reader 字符输出流 Writer 二、读入文件 1、FileInputStream 2、FileWriter类方法 public abstract void close() ：关闭此输出流并释放与此流相关联的任何系统资源。 写出char型数组指定内容 fw.write(chars,2,2); fw.flush(); fw.close(); 四、复制文件
45320编辑于 2023-08-09 - 来自专栏PostgreSQL研究与原理解析
Windows下的流复制：快速指南
Windows下的流复制：快速指南 大家可能对Linux环境下搭建流复制很熟悉，对于windows环境下配置流复制可能会有些默认，从PostgreSQL weekly博客中看到有篇对Windows环境下搭建流复制的介绍 PG weekly：https://postgresweekly.com/ DB weekly：https://www.dbweekly.com/ Postgres文档非常全面地包含了流复制方面内容，但您可能还需要一些更易于理解的内容以供参考 本文，讨论如何在Windows中设置流复制。 简要说，PG复制就是将数据从一个数据库服务（primary）拷贝到另一个（standby）。本文主要关注流复制。 关于复制槽需要记住：当备机关闭时，复制槽没有更新，主将继续累积WAL，这将导致WAL目录被填满，知道备机接收WAL或者知道复制槽被删除。 9）可以从Logs中：看到检查流复制 Started streaming from primary at [wal] on timeline [number] 也可以运行下面命令： Primary: Select
88620编辑于 2022-12-27 - 来自专栏技术之路
java字符流字节流复制文件
一、通过字符流复制文件 import java.io.*; public class Test { public static void main(String args[]) throws IOException =-1) { ci.write(n); System.out.print((char)n); } in.close(); ci.close(); } } 二、通过字节流复制文件
28710编辑于 2024-04-23 - 来自专栏效能与质量
java中的IO流之文件复制
Java作为一门成熟的程序语言，其IO流是比较复杂的。上个图大家感受下： 简单分析一下，IO分为两种流：字符流和字节流。 字符流的父类Reader（读取到内存）和Writer（从内存输出），字节流的父类InputStream（读取到内存）和OutputStream（从内存输出），然后为了方便各种操作，比如为了文件操作，派生了文件流 ；为了对象操作，派生了对象流；等等。 后来还是看了百度知道上一个大神写的，个人觉得很有道理，复制粘贴如下，应该不算侵权吧(⊙﹏⊙) “如果是边读边写，就会很慢，也伤硬盘。 3.文件复制 文件复制的原理很简单，从硬盘读取文件流到程序，再从程序中输出流到目标文件，就完成了文件的复制。事实上用到了java中的文件输入输出流。
1.3K20发布于 2021-08-25 - 来自专栏运维开发故事
PostgreSQl 12主从流复制及归档配置
上一篇文章说道PostgreSQL 12 的源码部署，这里我们说一下PostgreSQl 12的主从流复制和归档配置。 2）流复制 PostgreSQL在9.x之后引入了主从的流复制机制，所谓流复制，就是备服务器通过tcp流从主服务器中同步相应的数据，主服务器在WAL记录产生时即将它们以流式传送给备服务器，而不必等到WAL ；在流复制中，备服务器比使用基于文件的日志传送具有更小的数据丢失窗口，不需要采用archive_timeout来缩减数据丢失窗口；PostgreSQL 12开始，在执行通过流复制来配置主备数据库的时候， 配置主从流复制和归档 1）两台机器做免密登录 我们备份和还原过程中所用的archive_command和restore_command命令都以postgres用户运行，因此我们需要针对postgres用户实现 -W 使用密码验证，要用replica的密码 -Fp 备份输出正常的数据库目录 -Xs 使用流复制的方式进行复制 -Pv 输出复制过程的详细信息 -R 为备库创建recovery.conf文件。
3.1K33编辑于 2022-02-09 - 来自专栏AustinDatabases
PostgreSQL 流复制搭建和原理理解
和MYSQL 不同，MYSQL的复制是基于逻辑复制，而PG 具有流复制和逻辑复制两个功能。 提到流复制如果让我理解，想到就是ORACLE Dataguard 这样的功能，当然ORALCE 也有流复制和高级复制等功能，这里就不再提及。 连接的方式是通过 wal ahead log 的方式 3 没有特别的硬件需求 4 对主机的运行基本没有影响 5 可以设置数据的同步和异步 6 Standy 库是可以进行只读的活动 读完上面的点，发现通过流的方式复制其实比逻辑的复制好的地方 流复制是PostgreSQL 在 9.0 推出的功能，其中主要由三个进程 1 walsender 2 walreceiver 3 startup 这三者是怎么工作的我们的画一个图来 分析一下。 说完这些，需要探讨配置流复制中的参数了 首先要打开 POSTGRESQL 的复制 1 wal_level = replica 确定写入WAL 的信息的多少， 如果想调整这个参数，需要在开启服务前就进行设置
2.9K31发布于 2019-06-21 - 来自专栏bit哲学院
Java中的IO流及利用IO流实现文件复制功能
参考链接： Java I / O流 Java中的I/O流及利用I/O流实现文件复制功能 一、I/O流的概念 1、 什么是I/O？ 注意对应好，如果是以一个字节或者一个字符的读取，那么就要一个字节或者一个字符的写出 四、I/O流的应用：文件复制功能 1、使用字节流进行文件复制 源代码： package com.huaixn.copy ，即将文件复制在哪里去,后面的true代表每次写入时不清空当前文件内容 FileOutputStream fos = new FileOutputStream =-1){ /* * 利用第一种写出，查看文件属性可知，复制后的文件大小和原来文件大小不一致 * 原因是当最后一次读取没有 ： 博客：Java中的文件拷贝 在上面的文件复制功能代码中，使用字节流可以对.txt、.doc、.docx等文件类型进行拷贝 但使用字符流拷贝时，.doc以及.docx
94820发布于 2021-04-23 - 来自专栏Hadoop数据仓库
Oracle 10g 流复制（Streams Replication）配置
Oracle 流是一种数据共享的通用机制，可以被用于许多处理的基础，包括消息、复制和数据仓库的 ETL 过程。它是高级队列、LogMinor、作业调度等已存在技术的扩展。 这里做一个简单的复制示例来说明其用法。 基本体系结构 流处理分为捕捉、传输、应用三个主要进程。 捕捉进程是一个可选的后台进程。它从重做日志中捕获 DDL 和 DML 的变化，并且把它们封装成逻辑改变记录（LCRs）。 grant_option => FALSE); END; / CONNECT strmadmin/strmadmin@DB1 EXEC DBMS_STREAMS_ADM.SET_UP_QUEUE(); -- 建立流队列 VARCHAR2(13) NEW_COL NUMBER(10) -- 可以用下列语句查看流的内容
2.4K100发布于 2018-01-03 - 来自专栏黑客下午茶
使用 Bitnami PostgreSQL Docker 镜像快速设置流复制集群
目录 bitnami-docker-postgresql 仓库 流复制相关环境变量 第 1 步：创建 replication master 步骤 2：创建 replication slave 同步提交 bitnami/postgresql 源码：bitnami-docker-postgresql https://github.com/bitnami/bitnami-docker-postgresql 流复制相关环境变量 使用以下环境变量，可以使用 Bitnami PostgreSQL Docker 镜像 轻松设置流复制集群： POSTGRESQL_REPLICATION_MODE: replication 模式。 使用这两个命令，您现在可以启动并运行一个两节点 PostgreSQL 主从(master-slave)流复制集群。您可以通过添加/删除从(slave)服务器来扩展集群，而不会导致任何停机。 另一个 slave 将继续使用异步复制。
2.1K20编辑于 2022-05-17
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号