-
本版专家分：40结帖率 100% -
我现有一个数据采集程序A，每分钟生成一条数据，也可以人工补填（停电），数据根据采集的参数值判断天加的数据状态，然后再有一个数据筛查程序B对采集的数据进行资料补充，还有一个统计程序C对采集和补充的数据统计等。
A 程序主要涉及表为
a_DATA_In 采集数据存储表
a_TDD_User 数据字典 采集人员表
a_TDD_Site 数据字典 采集地点表
a_TDD_Type 数据字典 采集类型表
B程序主要涉及表为
b_Data_In2 采集处理数据存储表
---------------------
a_DATA_In 采集数据存储表
id
no
datatime
value1
value2
value3
value4
userID 外键 采集人员表
userID2 外键 采集人员表
siteID 外键 采集地点表
typeID 外键 采集类型表
in2ID 外键 采集处理数据存储表 未处理为空
state
Source
---------------------
a_DATA_In2 采集处理数据存储表
id
no
datatime
value1
value2
value3
value4
--------------------------
在程序B运行是，每处理一条数据，就生成一条处理数据，并修改被处理数据数据参数值。
例：a_DATA_In 采集数据存储表
id 1
no 20150101
datatime 2015-1-1 01:01:01
value1 1
value2 2
value3 3
value4 4
userID 001 外键 采集人员表
userID2 002 外键 采集人员表
siteID s001 外键 采集地点表
typeID t001 外键 采集类型表
in2ID null 外键 处理数据ID 未处理为空
state 异常
Source 人工录入
-----------------------
如何次异常数据被处理
id 1
no 20150101
datatime 2015-1-1 01:01:01
value1 1
value2 2
value3 3
value4 4
userID 001 外键 采集人员表
userID2 002 外键 采集人员表
siteID s001 外键 采集地点表
typeID t001 外键 采集类型表
in2ID null --> p001 外键 处理数据ID
state 异常 --> 异常已处理
Source 人工录入
-------------------------
那么我在程序C中要统计多少异常已处理，直接判断in2ID 不为空即可。而且基础数据采集的值不会改变，只有状态和处理ID会改变。
-----------------------------------------------
目前遇到问题，我的数据都在本地数据库，现在要把数据上传到中心机房，而我的采集端很多，采集数据量也很大，为了后续的统计和上传方便，我要如何设计更加合理。还有一个问题，比如采集数据已经上传，但是处理数据才进行处理把采集数据状态变了那么还涉及到重新上传以修改的数据修改中心数据库的数据问题，寻求好的设计方案！
---------------------------
![]()
-
本版专家分：40
-
其实我就是想找一个优化数据库设计的方法！！
老库设计是基本信息（不变），状态信息（程序A，B可变），外键基本信息（不变），外键处理ID（B程序写入），因为数据量太大（1000W条以上），虽然B程序只需要查阅7内天信息进行处理数据量不多，但是如果数据已经上传，而B程序再进行本地修改，还要到中心数据库上进行变更，这样感觉不合理。想找一个设计方法，可以避免，数据上传后修改本地数据影响中心数据库再次修改（这里数据量太大，查询浪费资源）。
-
版主本版专家分：116460
-
- GitHub 绑定GitHub第三方账户获取
-
-
优秀版主
2016年8月论坛优秀版主
2015年2月论坛优秀版主
-
-
微软MVP
2016年4月荣获微软MVP荣誉称号
2015年4月荣获微软MVP称号
2014年4月 荣获微软MVP称号
-
-
红花
2019年7月 MS-SQL Server大版内专家分月排行榜第一
2019年6月 MS-SQL Server大版内专家分月排行榜第一
2016年7月 MS-SQL Server大版内专家分月排行榜第一
-
-
可以用触发器(trigger)或复制工具(replication)实现数据的自动同步. 建议LZ了解一下..
-
本版专家分：2686 -
路过帮顶下
-
本版专家分：68909
-
- 金牌 2007年11月 总版技术专家分月排行榜第一
-
-
蓝花
2008年11月 MS-SQL Server大版内专家分月排行榜第三
2008年10月 MS-SQL Server大版内专家分月排行榜第三
2006年7月 MS-SQL Server大版内专家分月排行榜第三
-
-
还有一个问题，比如采集数据已经上传，但是处理数据才进行处理把采集数据状态变了那么还涉及到重新上传以修改的数据修改中心数据库的数据问题，寻求好的设计方案！
这个需要对业务需求非常的了解才能给出合适的方案
