读sqlite 速度慢的问题

ayun00 2012-08-17 09:43:11
我的环境 vs2010 + sqlite.net + ef4.3 + dbcontext generator


我在程序中第一次调用数据库，不管是增改删查 都很慢（要等1-2秒）， 然后的数据库操作 速度就很正常了

我找了很久 发现
http://www.cnblogs.com/osiris/articles/2013622.html

这篇文章说是
“如果你为了图省事不想建立SQLiteConnection，直接建立DataContext”的原因

如是我修改了 DbContext的创建 代码如下

1.修改一
C# code
public partial class CodeLibraryEntities : DbContext
{

private static DbCompiledModel GetDbCompiledModel()
{
string connstr = ConfigurationManager.ConnectionStrings["CodeLibraryEntities"].ConnectionString;

connstr = connstr.Remove(0, connstr.IndexOf("provider connection string=\"") + "provider connection string=\"".Length );
connstr = connstr.Remove(connstr.IndexOf("\""));

DbModelBuilder modelBuilder = new DbModelBuilder();
var conn = new System.Data.SQLite.SQLiteConnection(connstr);
DbModel model = modelBuilder.Build(conn);
return model.Compile();

}

public CodeLibraryEntities()
: base("Name=CodeLibraryEntities", GetDbCompiledModel())
{

}

。。。。。。。。。。。。。。。。。
}




报
“System.InvalidOperationException: Cannot initialize a DbContext from an entity connection string or an EntityConnection instance together with a DbCompiledModel. If an entity connection string or EntityConnection instance is used, then the model will be created from the metadata in the connection. If a DbCompiledModel is used, then the connection supplied should be a standard database connection (for example, a SqlConnection instance) rather than an entity connection.” 错误


2.修改二
C# code
public partial class CodeLibraryEntities : DbContext
{
public static System.Data.SQLite.SQLiteConnection GetSQLiteConnection()
{
string connstr = ConfigurationManager.ConnectionStrings["CodeLibraryEntities"].ConnectionString;

connstr = connstr.Remove(0, connstr.IndexOf("provider connection string=\"") + "provider connection string=\"".Length);
connstr = connstr.Remove(connstr.IndexOf("\""));

return new System.Data.SQLite.SQLiteConnection(connstr);

}
public CodeLibraryEntities()
: base(GetSQLiteConnection(), true)
{

}
。。。。。。。。。。。。。。。。。。。。。。。

}






报错
"System.Data.Entity.Infrastructure.UnintentionalCodeFirstException: Code generated using the T4 templates for Database First and Model First development may not work correctly if used in Code First mode. To continue using Database First or Model First ensure that the Entity Framework connection string is specified in the config file of executing application. To use these classes, that were generated from Database First or Model First, with Code First add any additional configuration using attributes or the DbModelBuilder API and then remove the code that throws this exception."

问题1. 我应该怎么改动

问题2. 这样的改动能提高操作sqlite数据库的速度吗？
...全文
549 13 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
13 条回复
切换为时间正序
请发表友善的回复…
发表回复
代码誊写工 2012-08-20
  • 打赏
  • 举报
 回复
[Quote=引用 8 楼 的回复:]

没有用过ef，我都是直接自己做一个业务类，然后通过DataReader读进来，需要回填的时候用ExcuteNoQuery写回去，觉得很快啊。
[/Quote]
顺便说一下，SQLite用来存储我们的生产数据配置索引的缓存（主数据的放在一个庞大的分布数据库里），即使是这样我们SQLite的数据量可都是百万条以上更新删除和插入，可确实不慢啊，你说的1-2秒钟的现象没有出现过。
IE11下面经常卡到爆 2012-08-20
  • 打赏
  • 举报
 回复
没有用EF，单纯SQL语句感觉Sqlite很快
代码誊写工 2012-08-20
  • 打赏
  • 举报
 回复
没有用过ef，我都是直接自己做一个业务类，然后通过DataReader读进来，需要回填的时候用ExcuteNoQuery写回去，觉得很快啊。
ayun00 2012-08-20
  • 打赏
  • 举报
 回复
。。。。。 就没人教教我怎么优化 ef 的初始化吗？
代码誊写工 2012-08-20
  • 打赏
  • 举报
 回复
[Quote=引用 2 楼 的回复:]
sqlite 你就别指望能快到哪里去

本来就是一个轻量级的数据库
[/Quote]
SQLite其实很快，比很多数据库快（单机时Oracle、DB2、Informix、SqlServer甚至MySQL都不一能快过它），就是因为它比较轻量。
anbin0814 2012-08-20
  • 打赏
  • 举报
 回复
ef初始化本来就慢，还指望sqlite快？
ayun00 2012-08-20
  • 打赏
  • 举报
 回复
有人吗
ayun00 2012-08-20
  • 打赏
  • 举报
 回复
就是不用对底层数据结构更了解，更多地去面向业务逻辑。

这就是我想要的

[Quote=引用 12 楼 的回复:]

引用 11 楼 的回复:

都没有看到我说的环境是ef + sqlite。net吗？

我一直问的是怎么样优化 初始化

引用 10 楼 的回复:

引用 8 楼 的回复:

没有用过ef，我都是直接自己做一个业务类，然后通过DataReader读进来，需要回填的时候用ExcuteNoQuery写回去，觉得很快啊。

顺便说一下，SQLite用来存储我们的生产数据配……
[/Quote]
代码誊写工 2012-08-20
  • 打赏
  • 举报
 回复
[Quote=引用 11 楼 的回复:]

都没有看到我说的环境是ef + sqlite。net吗？

我一直问的是怎么样优化 初始化

引用 10 楼 的回复:

引用 8 楼 的回复:

没有用过ef，我都是直接自己做一个业务类，然后通过DataReader读进来，需要回填的时候用ExcuteNoQuery写回去，觉得很快啊。

顺便说一下，SQLite用来存储我们的生产数据配置索引的缓存（主数据的放在一个庞大……
[/Quote]
为什么非要在这棵树上吊死呢？外部接口规范还是开发团队规范？
都说了用ef初始化慢，没有用过不代表不知道怎么用，只是没有确定的测试过，所以不好说是否有效，但看到很多地方对ef的诟病，所以才没有再去测了，ef又不是一个完美的架构。
当然，作为快速开发来说，它有好处，就是不用对底层数据结构更了解，更多地去面向业务逻辑。（也不知道算不算好处，就好像很多小盆友说“不知道学好算法有屁用”，你能咋办呐）
ayun00 2012-08-20
  • 打赏
  • 举报
 回复
都没有看到我说的环境是ef + sqlite。net吗？

我一直问的是怎么样优化 初始化

[Quote=引用 10 楼 的回复:]

引用 8 楼 的回复:

没有用过ef，我都是直接自己做一个业务类，然后通过DataReader读进来，需要回填的时候用ExcuteNoQuery写回去，觉得很快啊。

顺便说一下，SQLite用来存储我们的生产数据配置索引的缓存（主数据的放在一个庞大的分布数据库里），即使是这样我们SQLite的数据量可都是百万条以上更新删除和插入，可确实不慢啊，你说的1-2秒钟的现象没有出现过。
[/Quote]
ayun00 2012-08-17
  • 打赏
  • 举报
 回复
是的 ，我改的部分也是orm 的初始化部分

[Quote=引用 1 楼 的回复:]

这个应该跟数据库无关，主要慢在ORM上，第一的时候有初始化动作。
你可以直接连数据库测试，第一次应该不慢。
[/Quote]
ycproc 2012-08-17
  • 打赏
  • 举报
 回复


sqlite 你就别指望能快到哪里去

本来就是一个轻量级的数据库
cheng2005 2012-08-17
  • 打赏
  • 举报
 回复
这个应该跟数据库无关，主要慢在ORM上，第一的时候有初始化动作。
你可以直接连数据库测试，第一次应该不慢。
sqlite3开发所需库
c++下常用的库是sqlite3轻量级库，现提供该库的编译代码。
sqlite3源码
当使用sqlite3库编写程序时，需要的函数源码。
史上最强全面解析SQLite
目录 使用SQLite编程的快速介绍............................................................. 5 下载代码 .......................................................................... 5 创建一个新数据库 .................................................................. 5 使用 SQLite 编写程序 .............................................................. 5 SQLite适用的范围 ..................................................................... 7 SQLite最佳试用场合................................................................ 7 哪些场合适合使用其他的关系型数据库管理系统（RDBMS） ............................... 9 SQLite 第三版总览(简介).............................................................. 10 命名上的变化 ..................................................................... 10 新的文件格式 ..................................................................... 10 弱类型和BLOB技术支持 ............................................................ 11 支持UTF-8和UTF-16............................................................... 11 用户定义的分类排序 ............................................................... 12 64字节的行编号................................................................... 12 改良的并发性 ..................................................................... 13 致谢 ............................................................................. 13 SQLite 第三版中的数据类型............................................................ 14 1.存储类别 ....................................................................... 14 2.列之间的亲和性 ................................................................. 14 3.比较表达式 ..................................................................... 16 4.运算符 ......................................................................... 17 5.分类，排序混合挑选 ........................................................... 17 6.其它亲和性模式 ................................................................. 17 7.用户定义的校对顺序 ............................................................. 18 SQLite 不支持的 SQL 特性............................................................. 20 SQLite的体系结构简介 ................................................................ 21 简介 ............................................................................. 21 接口程序 ......................................................................... 21 Tokenizer ........................................................................ 21 Parser ........................................................................... 22 代码发生器 ....................................................................... 22 虚拟机器 ......................................................................... 22 B-树 ............................................................................. 23 页面高速缓存 ..................................................................... 23 OS 接口程序 ...................................................................... 23 Utilities ........................................................................ 23 测试代码 ......................................................................... 23 SQLite与其他数据库的速度比较 ........................................................ 24 执行程序总结 ..................................................................... 24 测试环境 ......................................................................... 24 测试1:1000 INSERTs............................................................... 25 测试2:在事务处理程序中的 25000 INSERTs........................................... 25 测试3:在编入索引表格中的25000 INSERTs ........................................... 26 测试4:没有索引的 100 SELECTs..................................................... 26 测试5:在一个字符串比较上的100 SELECTs ........................................... 27 2 / 123 测试6:创建索引................................................................... 27 测试7:没有索引的5000 SELECTs .................................................... 27 测试8:没有索引的1000 UPDATEs .................................................... 28 测试9:有索引的25000 UPDATEs ..................................................... 28 测试10:有索引的25000 text UPDATEs ............................................... 28 测试11:来源于SELECT的INSERTs ................................................... 29 测试12:没有索引的DELETE ......................................................... 29 测试13:有索引的DELETE ........................................................... 29 测试14:一个大 DELETE之后的一个大INSERT.......................................... 30 测试15:一个大的DELETE及许多小INSERTs ........................................... 30 测试16:DROP TABLE................................................................ 30 SQLite中的空处理与其它数据库引擎比较 .............................................. 31 SQLite 数据库的速度比较(wiki)........................................................ 34 Test 1: 1000 INSERTs ............................................................. 36 Test 2: 25000 INSERTs in a transaction ........................................... 36 Test 3: 25000 INSERTs into an indexed table ...................................... 37 Test 4: 100 SELECTs without an index ............................................. 37 Test 5: 100 SELECTs on a string comparison ....................................... 38 Test 6: INNER JOIN without an index .............................................. 38 Test 7: Creating an index ........................................................ 38 Test 8: 5000 SELECTs with an index ............................................... 39 Test 9: 1000 UPDATEs without an index ............................................ 39 Test 10: 25000 UPDATEs with an index ............................................. 39 Test 11: 25000 text UPDATEs with an index ........................................ 40 Test 12: INSERTs from a SELECT ................................................... 40 Test 13: INNER JOIN with index on one side ....................................... 41 Test 14: INNER JOIN on text field with index one side ......................... 41 Test 15: 100 SELECTs with subqueries. Subquery is using an index ................. 41 Test 16: DELETE without an index ................................................. 42 Test 17: DELETE with an index .................................................... 42 Test 18: A big INSERT after a DELETE ......................................... 42 Test 19: A big DELETE followed by many small INSERTs ............................. 42 Test 20: DROP TABLE .............................................................. 43 附加文件...................................................................... 43 SQLite在Windows中的性能调试 ........................................................ 44 直接使用SQLite................................................................... 44 2：Indexes 和数据库结构是非常重要的。 ............................................ 44 3：页面规模也很重要 .............................................................. 45 4：成群的索引 .................................................................... 45 5：作为读这篇文章的收获，这里有个不智能的事情需要提醒你。 ........................ 46 SQLite中如何用触发器执行取消和重做逻辑 .............................................. 47 SQLite3 C/C++ 开发接口简介（API函数） ............................................... 55 1.0 总览 ......................................................................... 55 2.0 C/C++ 接口 ................................................................... 55 如何在VS 2003下编译SQLite .......................................................... 61 下载 ............................................................................. 61 创建一个 DLL 工程 ................................................................ 61 3 / 123 把 SQLite 的源文件添加到工程当中去 ............................................... 61 Make a .DEF file ................................................................. 61 如何编译 SQLITE.EXE 命令行程序 ................................................... 62 SQLite常见问题解答 .................................................................. 64 Frequently Asked Questions ....................................................... 64 (1)如何建立自动增长字段? ......................................................... 64 (2)SQLite支持何种数据类型？...................................................... 65 (3)SQLite允许向一个integer型字段中插入字符串！.................................. 65 (4)为什么SQLite不允许在同一个表不同的两行上使用0和0.0作主键？ ................. 65 (5)多个应用程序或一个应用程序的多个实例可以同时访问同一个数据库文件吗？ .......... 65 (6)SQLite线程安全吗？............................................................ 66 (7)在SQLite数据库中如何列出所有的表和索引？ ..................................... 66 (8)SQLite数据库有已知的大小限制吗？.............................................. 67 (9)在SQLite中，VARCHAR字段最长是多少？.......................................... 67 (10)SQLite支持二进制大对象吗？................................................... 67 (11)在SQLite中，如何在一个表上添加或删除一列？ .................................. 68 (12)我在数据库中删除了很多数据，但数据库文件没有变小，是Bug吗？ ................. 68 (13)我可以在商业产品中使用SQLite而不需支付许可费用吗？ .......................... 68 (14)如何在字符串中使用单引号(')？ ................................................ 68 (15)SQLITE_SCHEMA error是什么错误？为什么会出现该错误？.......................... 69 (16)为什么 ROUND(9.95,1) 返回 9.9 而不是 10.0？ 9.95不应该圆整 (四舍五入）吗？... 70 SQLite的原子提交原理 ................................................................ 71 1.0 简介 ......................................................................... 71 2.0 硬件设定 ..................................................................... 71 3.0 单个文件提交 ................................................................. 73 3.1 实始状态.................................................................. 73 3.2 申请一个共享锁............................................................ 73 3.3 从数据库里面读取信息...................................................... 74 3.4 申请一个Reserved Lock .................................................... 74 3.5 生成一个回滚日志文件...................................................... 75 3.6 修改用户进程中的数据页.................................................... 76 3.7 刷新回滚日志文件到存储设备中.............................................. 76 3.8 获得一个独享锁............................................................ 77 3.9 将变更写入到数据库文件中.................................................. 78 3.10 刷新变更到存储........................................................... 78 3.11 删除回滚日志文件......................................................... 79 3.12 释放锁................................................................... 80 4.0 回滚 ......................................................................... 81 4.1出事了，!!! ......................................................... 81 4.2 Hot Rollback Journals..................................................... 81 4.3 取得数据库的一个独享锁.................................................... 82 4.4 回滚没有完成的变更........................................................ 83 4.5 删除hot日志文件.......................................................... 83 4.6 如果一切正常，没有什么未完成的写操作...................................... 84 5.0 多文件提交 ................................................................... 84 5.1 每个数据库文件单独拥有日志............................................ 85 5.2 主日志文件................................................................ 85 4 / 123 5.3 更新回滚日志文件头........................................................ 86 5.4 修改数据库文件............................................................ 86 5.5 删除主日志文件............................................................ 87 5.6 清除回滚日志.............................................................. 87 6.0原子操作的一些实现细节........................................................ 88 6.1 总是记录整个扇区.......................................................... 88 6.2 写日志文件时垃圾的处理.................................................... 88 6.3 提交前缓存溢出............................................................ 89 7.0 优化 ......................................................................... 89 7.1 在事务间保存缓.......................................................... 90 7.2 独享访问模式.............................................................. 90 7.3 不必将空闲页写进日志...................................................... 90 7.4 单页更新及扇区原子写...................................................... 91 7.5 Filesystems With Safe Append Semantics.................................... 91 8.0 原子提交行为测试 ............................................................. 91 9.0 会导致完蛋的事情 ............................................................. 92 9.1 缺乏文件锁实现............................................................ 92 9.2 不完整的磁盘刷新.......................................................... 92 9.3 文件部分地删除............................................................ 93 9.4 写入到文件中的垃圾........................................................ 93 9.5 删除掉或更名了“hot”日志文件............................................. 93 10.0 总结及未来的路 .............................................................. 93 SQLite的查询优化 .................................................................... 95 一、影响查询性能的因素： ......................................................... 95 二、几个查询优化的转换 ........................................................... 95 三、 几种查询语句的处理（复合查询） .............................................. 95 四、子查询扁平化 ................................................................. 96 五、连接查询 ..................................................................... 98 六、索引 ......................................................................... 99 SQLITE3 使用总结.................................................................... 102 前序： .......................................................................... 102 一、版本 ........................................................................ 102 二、基本编译 .................................................................... 102 三、SQLITE操作入门.............................................................. 103 （1）基本流程................................................................ 103 （2）SQL语句操作 ............................................................ 104 （2）操作二进制.............................................................. 108 （4）事务处理................................................................ 109 四、给数据库加密 ................................................................ 109 五、后记 ........................................................................ 122
Sqlite语法
sqlite语法规则， 使用方法，还是比较全的，可以拿来参考一下
嵌入式数据库SQLITE3使用指南
SQLite 是一个开源的嵌入式关系数据库，它在2000 年由D. Richard Hipp 发 布。SQLite 可移植性好，很容易使用，很小，高效而且可靠。SQLite 嵌入到使 用它的应用程序中，它们共用相同的进程空间，而不是单独的一个进程。从外部 看，它并不像一个RDBMS，但在进程内部，它却是完整的，自包含的数据库引 擎
C#

111,092

社区成员

642,554

社区内容

发帖
与我相关
我的任务
社区描述
.NET技术 C#
社区管理员
  • C#
  • AIGC Browser
  • by_封爱
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告

让您成为最强悍的C#开发者

试试用AI创作助手写篇文章吧

+ 用AI写文章