吾爱破解 - 52pojie.cn

 找回密码
 注册[Register]

QQ登录

只需一步,快速开始

查看: 1329|回复: 17
上一主题 下一主题
收起左侧

[其他] 替换scp/rsync的适合1G以上大文件拷贝工具--bbcp

  [复制链接]
跳转到指定楼层
楼主
cdbdy 发表于 2024-12-20 22:38 回帖奖励
最近系统升级需要迁移大量数据,本地已经说万兆网络和NVme硬盘了,但是用scp拷贝文件还是不快100MB左右,后来发现是scp默认有加密影响速度,遂上网搜索,发现这个大文件高效拷贝软件bbcp,速度能达500M左右,复制mysql的binlogs
超快。

bbcp 是一个高效的数据传输工具,适用于在网络上快速复制大量文件或目录。它类似于 scp,但针对高性能、大规模数据传输进行了优化,特别是在高带宽、长延迟网络条件下表现出色。官方文档在这https://www.slac.stanford.edu/~abh/bbcp/

安装方法 很简单,下载二进制文件到/usr/bin/下,然后缺少依赖的时候yum install libnsl一个就行,如果缺少libcrypto.so.10也找一个拷贝到/usr/lib64/下就行。安装完 bbcp  --version即可查看版本

介绍一下我用的命令,具体了解可以参见官网:
bbcp -v -P 2 -s 16 -r youdata/ root@younameserver:/yourcopydata


基本用法,-v显示详细信息 ,-P显示几秒一次进度,-s几线程,-r递归,-z压缩,


不过最近遇到一个问题,有个机器怎么拷贝到别的主机都报错:[root@mysql67 ~]# bbcp -z -P 2 -v -s 16 -F test_largefile   root@192.168.111.101:/root

Authorized users only. All activities may be monitored and reported.
root@192.168.111.101's password: bbcp: Accept timed out on port 5031
bbcp: Unable to allocate more than 0 of 16 data streams.

希望大佬们尝试下,觉得好用了遇到相同问题有解决方法分享下,谢谢。

安装文件官方下载网站:https://www.slac.stanford.edu/~abh/bbcp/bin/


我的主机是openeuler,amd64,所以蓝奏云网盘里放了rpm包,需要可用:https://wwxy.lanzoub.com/iHEkF2imjeqh
密码52pj

image.png (50.39 KB, 下载次数: 2)

官方安装

官方安装

image.png (21.36 KB, 下载次数: 0)

报错文件

报错文件

免费评分

参与人数 4吾爱币 +5 热心值 +3 收起 理由
wubaochong + 1 + 1 谢谢@Thanks!
myweb1996 + 1 试试rclone
chermy + 2 + 1 用心讨论,共获提升!
mrbaicai2 + 1 + 1 我很赞同!

查看全部评分

本帖被以下淘专辑推荐:

发帖前要善用论坛搜索功能,那里可能会有你要找的答案或者已经有人发布过相同内容了,请勿重复发帖。

沙发
helh0275 发表于 2024-12-21 00:12
拷贝也可以选择 FastCopy Pro
3#
li000yu 发表于 2024-12-21 02:47
4#
xiabo 发表于 2024-12-21 07:58
5#
Lty20000423 发表于 2024-12-21 08:01
fastcopy特别好用
6#
xxy2191 发表于 2024-12-21 08:15
好东西 谢谢分享
7#
usogmai 发表于 2024-12-21 08:43
看起来不错
8#
wsasecy 发表于 2024-12-21 08:43
网络文件拷贝这个工具其实算是专业的。
9#
baolei1988 发表于 2024-12-21 09:36
尝试一下这种工具
10#
pojiestudy 发表于 2024-12-21 10:12
看起来是个不错的工具
您需要登录后才可以回帖 登录 | 注册[Register]

本版积分规则

返回列表

RSS订阅|小黑屋|处罚记录|联系我们|吾爱破解 - LCG - LSG ( 京ICP备16042023号 | 京公网安备 11010502030087号 )

GMT+8, 2024-12-22 15:38

Powered by Discuz!

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表