微信扫一扫2.7w+
社区成员
数据导入的问题，需要改变txt的格式
在txt里数据是这样的： txt文件名是年月日
[12:17:46]设备1：
[12:17:46]参数1：100
[12:17:46]参数2：89
[12:17:46]参数3：99
[12:17:46]参数4：80
[12:17:46]参数5： 100
[12:17:48]
[12:17:53]
[12:17:54]
[12:17:57]设备2：
[12:17:57]参数1：99
[12:17:57]参数2：87
[12:17:57]参数3：99
[12:17:57]参数4：80
[12:17:57]参数5： 100
[12:18:00]
[12:18:01]
[12:18:03]
[12:18:05]设备3：
[12:18:05]参数1：99
[12:18:05]参数2：87
[12:18:05]参数3：99
[12:18:05]参数4：80
[12:18:05]参数5： 100
[12:18:07]
想要输入数据库，变成这样几列：
列1时间 列2设备号 列3参数1 列4参数2 列5参数3 列6参数4 列7参数5
列1中要有年月日时分秒 求助如何实现
[12:17:46]设备1：
[12:17:46]参数1：100
[12:17:46]参数2：89
[12:17:46]参数3：99
[12:17:46]参数4：80
[12:17:46]参数5： 100
[12:17:48]
[12:17:53]
[12:17:54]
[12:17:57]设备2：
[12:17:57]参数1：99
[12:17:57]参数2：87
[12:17:57]参数3：99
[12:17:57]参数4：80
[12:17:57]参数5： 100
[12:18:00]
[12:18:01]
[12:18:03]
[12:18:05]设备3：
[12:18:05]参数1：99
[12:18:05]参数2：87
[12:18:05]参数3：99
[12:18:05]参数4：80
[12:18:05]参数5： 100
[12:18:07]
想要输入数据库，变成这样几列：
列1时间 列2设备号 列3参数1 列4参数2 列5参数3 列6参数4 列7参数5
列1中要有年月日时分秒 求助如何实现
...全文
当前发帖距今超过3年，不再开放新的回复
发表回复
black5 2017-12-04
再次感谢！！
- 打赏
- 举报
cloverlay 2017-12-03
没事。看来你接触这个才两三天吧。考虑到这个，把完整版给你一个，加个条件判断，确保重复运行不报错：
if OBJECT_ID('原始数据','U')is not null
drop table 原始数据
create table 原始数据(
原始数据 nvarchar(510)
)on [PRIMARY]
bulk insert 原始数据 from '你机器上的txt文件的路径及文件名'
with(firstrow=1,rowterminator='0x0d0a',tablock)
if OBJECT_ID('目标数据库','U')is not null
drop table 目标数据库
select convert(varchar(100),getdate(),23)+' '+substring(a.时间,2,8) 时间,
a.设备,b.参数1, b.参数2, b.参数3, b.参数4, b.参数5
into 目标数据库
from
(
select SUBSTRING(原始数据,1,10) 时间 ,SUBSTRING(原始数据,11,3 ) 设备
from 原始数据
where 原始数据 like '%设备%'
group by SUBSTRING(原始数据,1,10) ,SUBSTRING(原始数据,11,3 )
) a ,
(
SELECT 时间
, sum (case when 参数 = '参数1' then 参数值 else 0 end) 参数1
, sum (case when 参数 = '参数2' then 参数值 else 0 end) 参数2
, sum (case when 参数 = '参数3' then 参数值 else 0 end) 参数3
, sum (case when 参数 = '参数4' then 参数值 else 0 end) 参数4
, sum (case when 参数 = '参数5' then 参数值 else 0 end) 参数5
FROM
(select SUBSTRING(原始数据,1,10) 时间,
SUBSTRING(原始数据,11,3 ) 参数,
convert(int,SUBSTRING(原始数据,15,10)) 参数值
from 原始数据
where 原始数据 like '%参数%'
) S
group by 时间
) b
where a.时间=b.时间
select * from 目标数据库
- 打赏
- 举报
black5 2017-12-03
谢谢！我刚学还不会。。。
- 打赏
- 举报
cloverlay 2017-12-03
看来你刚入门啊。
把以下这一段替换一下：
create table 原始数据(
原始数据 nvarchar(510)
)on [PRIMARY]
insert into 原始数据
select '[12:17:46]设备1：' union all
select '[12:17:46]参数1：100' union all
select '[12:17:46]参数2：89' union all
select '[12:17:46]参数3：99' union all
select '[12:17:46]参数4：80' union all
select '[12:17:46]参数5： 100' union all
select '[12:17:48]' union all
select '[12:17:53]' union all
select '[12:17:54]' union all
select '[12:17:57]设备2：' union all
select '[12:17:57]参数1：99' union all
select '[12:17:57]参数2：87' union all
select '[12:17:57]参数3：99' union all
select '[12:17:57]参数4：80' union all
select '[12:17:57]参数5： 100' union all
select '[12:18:00]' union all
select '[12:18:01]' union all
select '[12:18:03]' union all
select '[12:18:05]设备3：' union all
select '[12:18:05]参数1：99' union all
select '[12:18:05]参数2：87' union all
select '[12:18:05]参数3：99' union all
select '[12:18:05]参数4：80' union all
select '[12:18:05]参数5： 100'
替换成 ：
create table 原始数据(
原始数据 nvarchar(510)
)on [PRIMARY]
bulk insert 原始数据 from '你机器上的txt文件的路径及文件名'
with(firstrow=2,rowterminator='0x0d0a',tablock)
就行了。
- 打赏
- 举报
black5 2017-12-03
先想办法吧txt的数据用bulk insert 的方式导入到数据库的表中，然后再用查询转换为你想要的格式。[/quote]
具体怎么做呢？ bulk insert?
- 打赏
- 举报
black5 2017-12-03
谢谢，不过好几万行的，都这么写，受不了啊。。。。
- 打赏
- 举报
OwenZeng_DBA 2017-12-03
先想办法吧txt的数据用bulk insert 的方式导入到数据库的表中，然后再用查询转换为你想要的格式。
- 打赏
- 举报
cloverlay 2017-12-03
create table 原始数据(
原始数据 nvarchar(510)
)on [PRIMARY]
insert into 原始数据
select '[12:17:46]设备1：' union all
select '[12:17:46]参数1：100' union all
select '[12:17:46]参数2：89' union all
select '[12:17:46]参数3：99' union all
select '[12:17:46]参数4：80' union all
select '[12:17:46]参数5： 100' union all
select '[12:17:48]' union all
select '[12:17:53]' union all
select '[12:17:54]' union all
select '[12:17:57]设备2：' union all
select '[12:17:57]参数1：99' union all
select '[12:17:57]参数2：87' union all
select '[12:17:57]参数3：99' union all
select '[12:17:57]参数4：80' union all
select '[12:17:57]参数5： 100' union all
select '[12:18:00]' union all
select '[12:18:01]' union all
select '[12:18:03]' union all
select '[12:18:05]设备3：' union all
select '[12:18:05]参数1：99' union all
select '[12:18:05]参数2：87' union all
select '[12:18:05]参数3：99' union all
select '[12:18:05]参数4：80' union all
select '[12:18:05]参数5： 100'
select convert(varchar(100),getdate(),23)+' '+substring(a.时间,2,8) 时间,
a.设备,b.参数1, b.参数2, b.参数3, b.参数4, b.参数5
into 目标数据库
from
(
select SUBSTRING(原始数据,1,10) 时间 ,SUBSTRING(原始数据,11,3 ) 设备
from 原始数据
where 原始数据 like '%设备%'
group by SUBSTRING(原始数据,1,10) ,SUBSTRING(原始数据,11,3 )
) a ,
(
SELECT 时间
, sum (case when 参数 = '参数1' then 参数值 else 0 end) 参数1
, sum (case when 参数 = '参数2' then 参数值 else 0 end) 参数2
, sum (case when 参数 = '参数3' then 参数值 else 0 end) 参数3
, sum (case when 参数 = '参数4' then 参数值 else 0 end) 参数4
, sum (case when 参数 = '参数5' then 参数值 else 0 end) 参数5
FROM
(select SUBSTRING(原始数据,1,10) 时间,
SUBSTRING(原始数据,11,3 ) 参数,
convert(int,SUBSTRING(原始数据,15,10)) 参数值
from 原始数据
where 原始数据 like '%参数%'
) S
group by 时间
) b
where a.时间=b.时间
select * from 目标数据库
- 打赏
- 举报
black5 2017-12-03
啊。。。。就是txt是我写的格式，想变成表
- 打赏
- 举报
shoppo0505 2017-12-03
看不懂看不懂
- 打赏
- 举报
chart or txt or string 2 decimal num -Comma to point: 加载一个txt格式的文件，选择数据，用一个点改变每一个逗号。-matlab开发 如果您有一个数据编号的文件，其中小数部分用逗号表示，并且您需要将此数据作为数字导入，则需要在用点转换逗号之前。 在这个文件中加载了一个变量，它会被转换成一个新的，用点代替逗号，并且它还会将图表字符串...
TXT或者EXCEL格式的数据（比如气象数据）导入ArcMAP TXT或者EXCEL格式的数据（比如气象数据）导入ArcMAP前言EXCEL格式处理合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、...
mysql导入表格，txt操作（以及常见问题解决方法） 在现实生活中，我们可能需要往数据库中插入大量数据。 这时候我们可以直接将表格导入到数据库中。 示例 原始数据 第一步：创建表 CREATE TABLE IF NOT EXISTS POWER( useshuju INT(50) ); DESC POWER; SELECT * ...
txt文件导入数据库的utf-8问题 将数据导入数据库时，先创建一张表，确定每一个字段，由于数据较多，所以选择将数据集合的txt文件导入数据库。。。 txt文件的格式：以tab为列与列之间的分隔符. 再以代码导入数据库： load data local in...
如何使用mysql导入txt数据附上mysql命令版 如何使用mysql导入txt数据有以下步骤： 1.新建一张表，在text文件第一行加入一行模板数据，不然导入会出错，缺失 2.右键import ward导入txt 3.设置分割字段，以空格或者/分割据情况而定 4.设置对应...
如何利用citespace分析cnki里的文献——（1）导入数据 有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学...
matlab 数据导入 另一种是通过matlab的数据导入向导导入。下面分布介绍这两种方法： 一、使用matlab数据导入向导 1、先来看看txt文档中保存的数据结构，如图所示，数据之间用空格隔开，这种结构是比较理想的。可以直接导入。或者...
hive ,从hdfs把数据文件load导入到表 hive> load data inpath 'hdfs://ns1/abc/sales_info/hello/sales_info.txt' overwrite into table sales_info partition(dt = '2019-04-26');...如果从本地导入后本地的原数据文件依然存在，相当于复制过去；...
influxdb csv数据直接导入教程（只需要简单pathon代码将csv转换成txt) influxdb csv数据直接导入教程（只需要简单pathon代码将csv转换成txt）csv文件转换为txt文件官网模板自己的csv文件格式时间戳表示简单的pathon代码将csv再转换成txt功能快捷键合理的创建标题，有助于目录的生成如何...
向MySQL数据库表内导入txt和csv文件数据 INFILE 语句向MySQL8.0数据库导入txt文件和csv文件数据的方法和遇到的错误。由于两者方法一样，就先介绍导入txt文件的操作和错误，csv的直接在最后附上命令和简要说明。 原始数据 name owner species ...
.DBF格式数据导入到Mysql中处理方式 3、虽然Mysql提供了可以导入.DBF文件的接口，但是因为.DBF文件编码格式未知，因此无法导入。所以这里采用的方法如下： Step1：先将.DBF文件导出成txt文件 Step2：将txt文件编码格式改成UTF-8 Step3：将txt文件...
mysql中导入txt文件数据的操作指令 学习总结基本的MySQL数据库导入导出操作 1 表tt的格式： CREATE TABLE `tt` ( `ind` int NOT NULL auto_increment, `name` char(100) default NULL, PRIMARY KEY (`ind`) ) 2 文件d.txt的内容示例...
sas 导入csv文件_SAS导入外部数据|菜单及proc步导入 我们自己的数据往往是以excel，txt，csv等格式存储的，因此学习如何将这些外部数据导入到SAS软件是必须的，也是后续一系列处理和分析的基础。从菜单导入外部数据导入外部数据最简单的方式是通过SAS菜单方式导入，...
【MATLAB】导入EXCEL数据日期格式处理 【美赛前一天，打酱油小白碎碎念~】1、用Excel预处理数据时，改变单元格格式后，需要双击每个单元格才能改变格式。相信这个问题很多人都遇到过。试过网上说的很多解决办法，最好的办法还是使用Excel的分列功能。数据...
大数据分析-Excel导入及筛选数据 1.导入数据 1.1 导入外部网页上的数据 通常导入外部网站的数据时，可以先将数据下载到本地，然后在用excel打开该文件。下面介绍一种新的方法，直接将外部数导入到excel文件中。假如我们要导入如下网页中的数据：...
Oracle数据泵导入导出命令 首先在需要导入的库中建立新的表空间和用户以及数据存放目录，并赋予相关权限。 （此处以PL/SQL Developer工具创建，也可使用SQL PLUS命令创建。） /*创建表空间*/ create tablespace BBZX1500805 logging data...
hive表中加载数据方式:表数据的导入五种方式 直接向分区表中插入数据 create table score3 like score; insert into table score3 partition(month ='201807') values ('001','002','100'); 通过查询插入数据 通过load方式加载数据 load data local inpath '/...
txt文件导入mysql MySQL写入数据通常用insert语句，如 [c-sharp] view plain copy insert into person values(张三，20)，（李四，21），...但有时为了更快速地插入大批量数据或交换数据，需要从文本中导入数据或导出数据到文本。
