文档章节

SQL Server 读批量文件txt数据入库

产吅经理
 产吅经理
发布于 2017/08/29 11:11
字数 114
阅读 30
收藏 0
--创建表
USE [Test]
GO


CREATE TABLE [dbo].[AccountYh](
	[id] [int] NULL,
	[Account] [nvarchar](200) NULL,
	[Other] [nvarchar](2000) NULL
) ON [PRIMARY]

--------
SP_CONFIGURE 'show advanced options',1 
GO 
RECONFIGURE 
GO 

sp_configure 'xp_cmdshell',1 
GO 
RECONFIGURE 
GO

-------执行,注意修改@i(文件最大值),文件路径,插入的表名
declare @sql nvarchar(2000),@i int
select @sql='',@i=10
while @i>0 begin

set @sql='
Bulk insert [Test].[dbo].[AccountYh]
from ''D:\Visual Studio\test\logslis_'+convert(varchar,@i)+'.txt'' 
with  
(   
FIELDTERMINATOR = '':'',
ROWTERMINATOR = ''\n'',
MAXERRORS=100
)'  
exec(@sql)
set @i=@i-1

end

 

© 著作权归作者所有

共有 人打赏支持
产吅经理
粉丝 75
博文 154
码字总数 187639
作品 1
杭州
CTO(技术副总裁)
高并发简单解决方案————redis队列缓存+mysql 批量入库(ThinkPhP)

问题分析 问题一:要求日志最好入库;但是,直接入库mysql确实扛不住,批量入库没有问题,done。【批量入库和直接入库性能差异】 问题二:批量入库就需要有高并发的消息队列,决定采用redis...

nsns
05/18
0
0
【高并发简单解决方案】redis队列缓存 + mysql 批量入库 + php离线整合

需求背景:有个,要求存储到mysql中;存储数据高峰能达到日均千万,瓶颈在于。 问题分析 思考:应用网站架构的衍化过程中,应用最新的框架和工具技术固然是最优选择;但是,如果能在,未尝不...

太阳黑子
2016/10/28
72
0
SpringSide 批量save 内存溢出

今天要做一个数据解析导入的功能,主要是解析一个100M左右的txt文件,然后按照相关规则封装成对象入库,一个文件大概有百万条的记录要入库,由于我使用的是SpringSide, 框架内也提供了相应的...

流云_CN
2013/07/03
509
6
.NET 多种数据库访问通用库 DbProviderFactory 更新

该库支持支持ado.net和ORM 基于entity framework 访问数据库,ado.net支持多种数据库访问,如:sql server,db2,oracle,mysql,access等多种数据库,提供批量入库bulkcopy方法实现,目的是针对大...

bouyeijiang
2017/08/24
162
3
mysql 5.6(CentOS7.4) 导入dump出来的sql文件报错

错误:ERROR 1839 (HY000) at line 24: @@GLOBAL.GTIDPURGED can only be set when @@GLOBAL.GTIDMODE = ON. 出现的原因是: GTID是5.6以后,加入了全局事务 ID (GTID) 来强化数据库的主备一...

qimh
08/06
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

java并发备忘

不安全的“先检查后执行”,代码形式如下: if(条件满足){ //这里容易出现线程安全问题//doSomething}else{//doOther} 读取-修改-写入 原子操作:使用CAS技术,即首先从V中读取...

Funcy1122
今天
0
0
SpringBoot2.0 停机

最近新建了个SpringBoot2.0的项目,因为原来一直使用的是传统的Tomcat部署war包的形式,所以这次SpringBoot内置Tomcat部署jar包的时候遇到了很多问题。其中一个就是因为没有外置的Tomcat容器...

Canaan_
昨天
0
1
Confluence 6 外部参考

一个外部参考的意思是任何站点链接到你 Confluence 的实例。任何时候当 Confluence 的用户单击这个外部链接的时候,Confluence 可以记录这次单击为参考。 在默认的情况下,外部链接的参考链接...

honeymose
昨天
0
0
Android中的设计模式之抽象工厂模式

参考 《设计模式解析》 第十一章 Abstract Factory模式 《设计模式:可复用面向对象软件的基础 》3.1 Abstract Factory 抽象工厂 对象创建型模式 《Android源码设计模式解析与实战》第6章 创...

newtrek
昨天
0
0
Redis | 地理空间(GEO)的一个坑

Redis的地理空间(Geo)是个好东西,轻轻松松的就可以把地图描点的问题处理了, 最近却遇到一个坑...Redis采用的Msater-Slave模式, 运用GEORADIUS在salve读取对应的数据,新增了从节点但是从不返...

云迹
昨天
1
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部