大数据迁移

摘要:
由于服务器调整,需要把服务器A上面约2T的数据库表空间文件迁移到同网段的另一台服务器B。最后只能想到一招,FastCopy了。也就是,在服务器B上将目地文件夹共享,然后在服务器A中将其映射为一个网络驱动器,再使用FastCopy进行拷贝就可以了。最终按此办法测试成功,2T的数据花了将近一天的时间终于拷贝完成。看来还是FastCopy靠谱啊。这就只能使用FastCopy了。当然,类似的软件不止这一款,不过据权威测评,FastCopy的表现是最好的,而且它是免费的!!!

由于服务器调整,需要把服务器A上面约2T的数据库表空间文件迁移到同网段的另一台服务器B。

具体来说,就是N个32G的表空间文件(注意,是单个文件32G)

局域网传输文件的工具很多,但是没想到的是,一旦处理起这么大的文件,基本全部歇菜。。

先试了FeiQ,传输速度是很快,1000M网卡下速度可以达到90M/s,但是,文件传输到5280M的时刻就出错了,试了N次也不行。

然后在服务器B上架上FTP服务,在A上面用FTP软件往上上传,但是FTP软件看到这么大的单文件也歇菜了,连文件大小都显示成了负的。。。

最后只能想到一招,FastCopy了。

也就是,在服务器B上将目地文件夹共享,然后在服务器A中将其映射为一个网络驱动器,再使用FastCopy进行拷贝就可以了。

最终按此办法测试成功,2T的数据花了将近一天的时间终于拷贝完成。

看来还是FastCopy靠谱啊。

而且,据以往的经验,拷贝单个超过10G左右的文件,系统在处理时就会报错,具体表现就是拷贝进行一段后报告内存不足什么的。

这就只能使用FastCopy了。当然,类似的软件不止这一款,不过据权威测评,FastCopy的表现是最好的,而且它是免费的!!!

强烈推荐~ 以上~~

免责声明:文章转载自《大数据迁移》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇Java实现MySQL数据库备份(一)[php]laravel框架容器管理的一些要点下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

创建SFTP用户并指定访问目录 Linux

1、创建登录用户及用户组 --可以根据自身磁盘挂载情况制定用户home目录 -d 选项 groupadd test1mkdir -p /data/test1 useradd test1 -g test1 -d /data/test1 echo "123" |passwd --stdin test1 &>/dev/null 2、vim /etc...

Windows IIS Web services性能计数器说明

IIS Global Active Flushed Entries Active Flushed Entries 是缓存文件句柄,当前传输全部完成后将关闭此句柄。IIS Global 对象。 Web Anonymous Users/Sec 用户通过 Web 服务进行的匿名连接数。 IIS Global BLOB Cache Flushes 自服务器启动后的...

phpstorm中FTP自动同步功能

首先打开PhpStorm软件,新建个项目完成以后,找到Tools,  找到 Tools->Deployment->configruation点击进行设置,  点击configruation,点击加号添加ftp  填写ftp服务器地址,ftp用户名和密码,端口一般不用修改 填写完成以后测试一下是否能连接成功, ....

iOS崩溃日志ips文件解析

iOS崩溃日志ips文件解析  一 简介   测试组的同事在进行稳定性测试时,通常会遇到一些崩溃,然后他们会将这些崩溃日志(一般是ips格式的文件)反馈给开发进行分析,但是这些ips文件中的内容通常是如下图这样的,都是一些十六进制的堆栈地址,如果仅仅根据这些堆栈地址,我们基本无法做任何事情,连最基本的崩溃定位都做不到。那么,在iOS开发中,还有一些其他的方...

使用WinSCP进行简单代码文件同步

前言传输协议FTPFTPSSFTPSCP为什么使用WinSCP?CMD的FTP命令FileZillaPuTTYrsyncSublime的SFTP插件WinSCPWinSCP进行简单代码文件同步总结备注参考 前言 以前写代码的时候,大多数时候是本地环境开发,然后统一FTP拖拽上传,所以一般来说本地查看修改效果即可。后来项目变大,文件越来越多,项目分工...

什么是零拷贝

 1、名词介绍   内核:操作系统的核心   用户空间:指的是用户进程的运行空间   内核空间:指的是内核的运行空间   用户态:如果进程运行在用户空间就是用户态   内核态:如果进程运行在内核空间就是内核态   DMA拷贝:     对一个IO操作而言,是通过CPU发出对应的指令来完成的,但是相比CPU来说,IO的速度太慢了,CPU有大量的时间处于等待I...