SQL Server如何导入超大的.sql文件

4 sec read

最近在处理数据的时候,遇到要将数据库表迁移到另外服务器上的需求。由于数据量较大,考虑采用离线文件的方式进行迁移。

首先向导的是采用的方式是通过备份还原的方式进行迁移,但是有时候仅仅需要对一张表进行数据迁移,所以采用的是生成脚本的方式。

由于数据量非常的大,导致生成的.sql文件,无法使用SQL Server管理工具SSMS打开。通过研究,梳理的解决方案如下:

方案一:通过命令行的方式进行导入。

可以用的工具有:

我这里使用的是

其中-E为使用Windows验证方式进行登录,可以使用-U -P替换。

方案二:通过程序方式进行导入

是自己编写脚本读取.sql文件,注意不要将文件一下子全部加载到内存。如果使用Python,使用readline读取文件

或者使用现成的工具:BigSqlRunner

打赏作者
微信支付标点符 wechat qrcode
支付宝标点符 alipay qrcode

使用Python更换外网IP

在进行数据抓取时,经常会遇到IP被限制的情况,常见的解决方案是搭建代理IP池,或购买IP代理的服务。除此之外,还有一个另外的方法就是使用家里的宽带网络进行抓取。由于家里的宽带每次断开重新连接时都会分配一个新的IP,所以在我们抓取数据的时候,判断 ...
36 sec read

Python多线程与多进程

7 min read

Python Requests 抓取失败时的重试设置

最近在抓取数据的时候,经常遇到连接超时的问题,分析原因居然是DNS污染导致的,为了让程序更加稳健,需要对requests请求实现失败重试的逻辑。
2 min read

Leave a Reply

Your email address will not be published. Required fields are marked *