关于rsync用不了之后

news2024/11/26 19:52:41

1.尝试找出rsync使用错误原因:

我遇见一个问题:rsync:read errors mapping:communication error on send (70),我查了一下这个问题很大可能是网络链接导致的,然后我用nslookup指令查看了/train25/目录下放处理结果的ip,发现是172.20.23.86,然后我在172.20.81.181用ping看了一下,丢包率是0,说明节点是可以链接到的,我现在就不知道该怎么办了。

就是这个错误

"rsync: read errors mapping: communication error on send" 是 rsync 命令执行时可能遇到的错误消息之一。这个错误通常表示在发送数据时发生了通信错误。
这种错误可能有多种原因,包括网络连接问题、权限限制、防火墙配置等。下面是一些可能的原因和对应的解决方法:

1.网络连接问题:确保源主机和目标主机之间的网络连接正常。尝试通过 ping 命令检查两台主机之间的网络连通性。
2.防火墙配置:检查源主机和目标主机的防火墙设置。确保所使用的端口(默认情况下 rsync 使用TCP端口 873)在防火墙中开放并允许 rsync 的传输。
3.权限限制:确保您有权限进行网络传输操作。检查您使用的 rsync 命令中是否包含合适的权限选项,如 --rsync-path 或 -e 选项等。
4.Rsync 版本兼容性:某些 rsync 版本可能与其他版本不兼容,例如在使用不同的协议或选项时可能会导致通信错误。确保源主机和目标主机上的 rsync 版本兼容,并尽可能使用相同的 rsync 版本。
5.其他因素:除了上述提到的原因,其他因素如系统资源限制、磁盘空间不足等都可能导致通信错误。您可以检查目标主机的磁盘空间情况,确保足够的可用空间来接收传输的数据。

如果通过尝试上述解决方法仍然无法解决问题,您可以提供更多关于错误的详细信息,例如完整的错误消息、rsync 命令的使用方式以及相关的操作环境,以便我们提供更准确的支持。
如果您在 Linux 系统中只知道目标文件夹的地址,并想使用 ping 命令来测试与目标主机的连通性,您需要进行以下步骤:

1.获得目标主机的 IP 地址:根据目标文件夹的地址,您可能需要获取目标主机的 IP 地址。您可以使用工具如 nslookup 或 ping 来查找该地址。例如,使用以下命令通过 nslookup 来查找目标地址的 IP:

   nslookup 目标地址


2.使用 ping 进行测试:一旦您拥有目标主机的 IP 地址,即可进行 ping 测试。使用以下命令来执行 ping 测试:

   ping 目标IP地址

请将 "目标IP地址" 替换为实际的目标主机 IP 地址。
例如,如果目标主机的 IP 地址是 192.168.0.100,您可以使用以下命令进行 ping 测试:
   ping 192.168.0.100


3.分析结果:ping 命令将发送 ICMP 回声请求消息到目标主机,并显示接收到的 ICMP 回声应答消息。您可以观察到往返时间(RTT)和丢包率等信息。如果您成功收到来自目标主机的 ICMP 回应,则说明您与目标主机建立了网络连接。

如果 ping 命令显示无法到达目标主机或连接超时等错误消息,则可能存在网络连接问题。您可以检查网络配置、防火墙设置以及目标主机是否正常运行来排除问题。
请注意,如果目标主机设置了防火墙规则以阻止 ICMP 请求或禁用了 ping 命令,那么 ping 命令可能无法使用。在这种情况下,您可能需要使用其他网络工具进行连通性测试,如 telnet 或 nc 等。
在 Linux 上,除了 rsync,还有其他几个常用的类似工具可以用于文件同步和复制。以下是其中一些常见的工具及其简要说明以及基本用法:

1.cp:是 Linux 下最基本的文件复制工具之一,用于将文件或目录从一个位置复制到另一个位置。


2.用法示例:cp source_file destination_file


3.scp:是基于 SSH 的安全拷贝工具,用于在本地计算机和远程计算机之间复制文件或目录。


4.用法示例:scp source_file user@remote:/path/to/destination


5.cpio:是一个归档工具,通常与 find 命令结合使用,用于将文件打包成归档文件或复制文件到另一个目录。


6.用法示例:find source_directory | cpio -pdm destination_directory


7.tar:是一个广泛使用的归档工具,用于打包多个文件并可选地压缩成单个文件。


8.用法示例:打包文件:tar -cvf archive.tar file1 file2 file3;解包文件:tar -xvf archive.tar


9.dd:是一个强大的块设备复制工具,可以复制磁盘、分区、镜像等。


10.用法示例:dd if=/dev/source of=/dev/destination


11.mv:是用于移动文件或目录的命令,也可以用于重新命名文件或目录。


12.用法示例:mv source_file destination_file 或 mv source_directory destination_directory


13.rsync:已经提到过,是一个功能强大的文件同步和备份工具,可以在本地或通过 SSH 进行文件同步。


14.用法示例:rsync source_file user@remote:/path/to/destination

这只是一些常用的工具,用于文件复制、同步和备份。每个工具都有不同的特性和用法。您可以通过 man 命令查看每个命令的详细用法和参数,例如 man cp、man scp 等。

2.查看了上面这些之后,我尝试使用Python解决问题:
使用了python里的shutil库,copy2()函数,这个函数可以复制文件的条件下,还能保存源文件的基础信息。
但是由于这个速度不如rsync快吧或者是别的原因,在服务器上运行太久了,系统给我kill掉了…

3.改用scp指令尝试中:

Linux 中的 cp 和 rsync 工具在文件复制方面具有一些差异,这可以解释它们的复制速度不同。主要的底层区别如下:

1.复制方式:


2.cp:cp 是一个基本的文件复制工具,它通过逐个读取源文件的内容,并将其写入目标文件来执行复制操作。它按顺序逐个复制文件,没有过多的优化或增量复制的功能。
3.rsync:rsync 是一个功能强大的文件同步和备份工具。它使用特定的算法,称为增量复制(incremental copy),可以仅复制源和目标之间发生变化的部分。这意味着只有需要更新或新增的文件和数据块会被复制,减少了数据传输量和复制时间。


4.传输协议:


5.cp:cp 只能在本地文件系统上进行操作,无法进行远程文件复制。
6.rsync:rsync 支持本地和远程文件复制,并且可以通过 SSH 或 rsync 协议在不同主机之间进行快速、安全的文件传输。


7.判定文件变化:


8.cp:cp 在复制文件时没有内置的判定机制,它无法确定源和目标文件之间是否存在差异,因此每次复制时都需要复制整个文件。
9.rsync:rsync 使用快速的检测算法来比较源和目标文件的差异,只复制变化的部分。这使得 rsync 在重复的同步操作中具有高效性,只需要传输最小量的数据。

以上差异解释了为什么 rsync 可能在某些情况下比 cp 更快。它通过增量复制和差异判定的机制,只复制变化的部分,从而减少了数据传输量和复制时间。但是,这些差异也意味着 rsync 在某些情况下可能会更复杂,并且可能在某些特定场景中速度较慢,特别是对于整个文件都需要复制的场景。因此,选择合适的工具取决于具体的使用场景和需求。

我觉得吧应该差不多,因为我这个文件复制,根本就没有差异,我的目标路径就是一个空文件夹。一会测试一下速度。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1009082.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

python-爬虫-爬取中华人民共和国农业农村部网站公开的农产品批发价格中的蔬菜价格周数据

中华人民共和国农业农村部 http://www.moa.gov.cn/ 点击数据 → 点击周度数据 → 跳转网页 http://zdscxx.moa.gov.cn:8080/nyb/pc/frequency.jsp 分析 抓包,发现getFrequencyData里面有我们想要的数据 查看请求的提交参数 使用postman接口测试工具测试验证ge…

华为云征文|华为云云耀云服务器L实例使用教学

目录 国内免费云服务器(体验) 认识国内免费云服务器 如何开通国内免费云服务器 云耀云服务器 HECS HECS适用于哪些场景? 网站搭建 电商建设 开发测试环境 云端学习环境 为什么选择华为云耀云服务器 HECS 国内免费云服务器&#xff…

MES管理系统和ERP系统在生产制造管理中的应用

MES生产管理系统通过过程管理、质量管理、设备管理、产品跟踪和溯源、性能分析和物料管理等方面来管理生产制造,旨在建立规范的生产管理信息平台,提高企业核心竞争力。ERP系统则通过制定生产计划、细分物料需求计划、车间订单下达和生产回报等步骤进行生…

推荐9个好玩的AI作图网站

1、Mental AI Mental AI是一款国产的AI作图网站,它访问方便,使用简单,是更适合国内设计师使用的AI作图网站推荐。在Mental AI中,设计师既可以使用文字描述的方式来生成图片,也可以使用叠加模型的方式来生成图片&#x…

点击劫持概念及解决办法

1.点击劫持的概念 点击劫持 (Clickjacking) 技术又称为界面伪装攻击 (UI redress attack ),是一种视觉上的欺骗手段。攻击者使用一个或多个透明的 iframe 覆盖在一个正常的网页上,然后诱使用户在该网页上进行操作,当用户在不知情的情况下点击…

靶场上新:Openfire身份认证绕过

本文由掌控安全学院-江月投稿 封神台新上线漏洞复现靶场:Openfire身份认证绕过。 漏洞详情: Openfire是采用Java编程语言开发的实时协作服务器,Openfire的管理控制台是一个基于Web的应用程序,被发现可以使用路径遍历的方式绕过…

GIS前端编程 地图常用操作

GIS前端编程 地图常用操作 地图背景设置地图定位地图级数控制获取显示参数 地图操作是WebGIS应用的基本功能,如缩放、移动等操作。在实际WebGIS应用中,地图操作方式多种多样。下面主要介绍以下几种地图操作:地图背景设置、地图定位、地图级数…

WebDAV之π-Disk派盘 + BubbleUPnP

BubbleUPnP是一款功能强大的Android播放器,支持UPnP/DLNA多屏互动。它可以将手机内容投屏到电视大屏上,与家人和朋友一起共享。此外,BubbleUPnP还提供了丰富的音乐和影视资源,您可以在线搜索并播放喜欢的内容。 以下是BubbleUPnP的一些主要特点: 1. 支持Chromecast和转码…

2023 致远OA-任意用户密码重置漏洞

一、致远OA 致远OA是一款企业级办公自动化软件,它提供了一系列的办公自动化解决方案,包括文档管理、流程管理、协同办公、知识管理、人力资源管理等功能。致远OA可以帮助企业实现信息化管理,提高工作效率和管理水平,同时也可以提高…

【Linux 运维必备的 13 款实用工具,赶紧收藏~】

转载:https://blog.csdn.net/jb19900111/article/details/17756183 本文介绍几款Linux运维比较实用的工具,希望对Linux管理员有所帮助。 1、查看进程占用带宽情况-Nethogs Nethogs 是一个终端下的网络流量监控工具可以直观的显示每个进程占用的带宽。 …

【教学类-32-03】20230906十二生肖3.0上课版(绘画+手工+排序+左右分类+玩牌)(大班:《我是中国人》偏科学-数)

背景需求: 8月30日收到一个信息技术比赛的通知,9月10日前完工,单位里大活动很多,人手极度不足。作为信息员,只能自己顶上,做课件、开录课,完成这来之不易的KPI(去年疫情&#xff0c…

【Prometheus】Prometheus+Grafana部署

Prometheus 概述 官网https://prometheus.io/docs/introduction/overview/ Prometheus 是一款基于时序数据库的开源监控告警系统,非常适合Kubernetes集群的监控。Prometheus的基本原理是通过HTTP协议周期性抓取被监控组件的状态,任意组件只要提供对应的…

批量处理长视频,提高视频制作效率的技巧分享

在视频制作过程中,我们常常需要处理大量的长视频,例如从拍摄的整个影片中剪出某些特定的片段,或者需要把一个长的视频分割成多个小片段。这个过程可以是极其耗时和困难的,但幸运的是,现在有许多工具可以帮助我们自动化…

Biome-BGC生态系统模型与Python融合

目录 一 模式讲解 二 学习基础 三 数据处理 四 单点的模拟 五 区域模拟-1 六 长时间序列模拟案例 七 分析 Biome-BGC是利用站点描述数据、气象数据和植被生理生态参数,模拟日尺度碳、水和氮通量的有效模型,其研究的空间尺度可以从点尺度扩展到陆地…

堆的实现(C版)

普通的二叉树是不适合用数组来存储的,因为可能会存在大量的空间浪费。而完全二叉树更适合使用顺序结构存储。现实中我们通常把堆(一种二叉树)使用顺序结构的数组来存储,需要注意的是这里的堆和操作系统虚拟进程地址空间中的堆是两回事,一个是…

2023 年最新 Docker 容器技术基础详细教程(更新中)

Docker 基本概述 Docker 是一个开源的应用容器引擎,它让开发者可以打包他们的应用以及依赖包到一个可移植的镜像中,然后发布到任何流行的 Linux 或 Windows 操作系统的机器上,也可以实现虚拟化。容器是完全使用沙箱机制,相互之间…

【PickerView案例08-国旗搭建界面加载数据 Objective-C预言】

一、来看我们第三个案例 1.来看我们第三个关于PickerView的一个案例, 首先呢,我要问大家一下, 咱们这个是几组数据呢, 这是一个pickerView,只不过,它显示的是什么,一个界面, 前面两个案例,都是文字 这个案例,开始有图片了, 总结一下这三个案例: 1)第一个案例…

ClientDataSet运行中出现“ClientDataSet:dataset not in edit or insert mode”

在打开数据表文件,对ClientDataSet执行Append或Insert时,“ClientDataSet:dataset not in edit or insert mode”: 一、搜索问题 1、执行“显示数据后”,再执行Append,出错,说明ClientDataSet处…

07-Redis缓存设计

上一篇:06-Redis缓存高可用集群 1.缓存穿透 缓存穿透是指查询一个根本不存在的数据, 缓存层和存储层都不会命中, 通常出于容错的考虑, 如果从存储层查不到数据则不写入缓存层。 缓存穿透将导致不存在的数据每次请求都要到存储…

身份和访问管理解决方案:混合型IAM

对于依赖于本地 IT 基础结构和传统安全模型的组织,可以更轻松地验证和授权企业网络内的所有内容,包括设备、用户、应用程序和服务器。尝试从公司网络外部获取访问权限的用户使用虚拟专用网络 (VPN) 和网络访问控制 (NA…