首页 数据库 mysql教程 随说秋色园从Access升迁到MSSQL过程

随说秋色园从Access升迁到MSSQL过程

Jun 07, 2016 pm 03:38 PM
access mssql 过程 运行

秋色 园的运行环境概况: 目前运行在国外godaddy的虚拟主机的一个子目录中,数据库为Access。 随说Access分页: 1:top max(id) 在CYQ.Data 数据框架支持上Access时,以top max(id)为分页方式。 在 秋色 园没有多少文章的情况下,基本上维持着正常的秩序。

 

秋色园的运行环境概况:

目前运行在国外godaddy的虚拟主机的一个子目录中,数据库为Access。

 

随说Access分页:

 

1:top max(id)

在CYQ.Data 数据框架支持上Access时,以top max(id)为分页方式。

秋色园没有多少文章的情况下,基本上维持着正常的秩序。

直到秋色园在进化版本时,多字段排序的情况出现,如:order by 字段1,字段2。

原始的 top max(id)已无法正常的显示分页的数据了。

 

2:not in

top max(id)只适用于单字段排序,无法适用多字段排序,自然就无法通用了。

故CYQ.Data的分页方式,从top max(id) 改成常规的 not in方式。

一开始没有测试数据量,随便点点感觉分页也挺快的。

后经秋色园的文章上到三四千时,发现分页奇慢,已无法让它在存活了,于是把它给灭了。

 

3:3次top

灭掉not in方式,换上了3次top,分起页来那是刷刷刷,速度快的不行。

于是这种方式,一直存到至今,当前3-4万的数据中,分页虽不快,但勉强也能接受。

 

虽然我一直想从程序上优化,让Access坚持到10万的数量级也能正常的表现,

 

不过有些事总来的太快,Access无法逃脱的弱点:并发。

 

Access在并发写数据上,有着不可估计的错误,从秋色园的后台异常日志记录中,最常出现的错误:

Could not update; currently locked.SQL:Update Blog_User Set VisitCount=64359+1 where ID=111

这个异常一早出现次数比较多,后来通过程序优化之后,通过在内存计数,随机概率才更新数据库方式,每天平均就2-3次的情况出现。

 

按理这个也很好解决,在update之前lock一下即可解决,

不知咋的,我就是一直下不了手,难道是次数太少,总被我忽略了啊!

 

还有另一个打击人的异常:

Unspecified errorSQL:select count(*) from Blog_Content where Year(CreateTime)=2011 and Month(CreateTime)=1 and UserID=67 and TypeID=0 and IsPub=true

这个异常平时不出现,一出现秋色园就基本打不开了,而且会占好长时间,网上搜索的答案好就是什么临时文件满了,挤不进去导致的。

这个我又控制不了服务器,也没啥法子解决。

 

今天呢,在几十个网友同时操作写数据时,情况来了,基本上也是处于打不开的状态

 

于是呢,打算把秋色园从Access升到MSSQL了。

 

为啥不考虑SQLite数据库呢?

其实一开始是有考虑用SQLite的,不过由于时间比较紧,而且框架对于一些函数的通用性,只处理了Access/MSSQL/Oracle三种,啥意思呢?

就是同一个函数,在不同的数据库时,名称,用法,都可能不同,好多其它支持多数据库的系统,多数写两条或多条语句了,不同的数据库版本提交不同的DLL复盖。

而CYQ.Data在底层上进行了处理,可以让1条语句,自动解析成不同数据库类型的语句,这样就达到一种写法,多处兼容的状态。

由于SQLite和MySQL是最近版本新加的,所以还没做兼容处理,加上感觉从Access向SQLite导数据不好导,所以就没用了。

 

不过我发现,MSSQL的数据导入导出功能,是有SQLite这一项的,前提好像就是我安装过SQLite的驱动,有空再尝试尝试了。

 

好了,决定换数据库了,Access数据库在远程服务器,咋整?

由于寄在人家子目录里,所以除了FTP权限,其它啥权限都没。

因此,最常见的文件夹压缩也没了。

所以呢,就用ICSharpCode.SharpZipLib.dll写了个Zip在线压缩,Access压缩后还是能少好几倍的大小的。

 

压缩之前,要做点什么事呢?

一开始最基本的想法是:停止站点访问,这样就不会对数据库产生读写操作。

 

后来灵机一动,用了另一种方法,什么方法?

秋色园由于自定义了生命周期,于是有很多的统一关口,我只要轻松的把OnPost事件关口给操作,改成操作输出:

很抱歉:系统正在升级,无法提交数据。

这样就轻松避开了用户对数据库的写操作了,又保证站点的正常访问。

 

接着压缩了下,300多M压缩成60多M,56K的网速,下载了十多分钟,也就下载完了。

 

下面就接着导数据了:

尝试把数据导到本机测试一下,发现很多Memo类型的字段,都导不进来!!

还得把数据库对应字段都改成nvarchar(max)才能导进去。

导完又得把字段改回去,一改一导一动,花了不少时间。

 

再接着本地测试:

运行秋色园站点,发现首页出不来,调度发现,少了个字段,重新导麻烦,只好写sql更新。

再来发现秋色园的两个系统分类失踪了,花了不少时间查到原因,于是给补上了。

 

从本机向远程导:

再后来,从本机的MSSQL向远程的MSSQL导数据了,由于有数据库链接,自然也能导了,

一开始发现两边的字段类型有点区别,还得修正一下。

然后接着导,一直到现在才导了1万多,还差2万,所以我就在这写文章了。

 

导数据自增ID的问题:

过程中,小小遇到另一个事情,由于自增ID开启时,是无法导入ID的,

所以在创建表时,只好把自增加ID去掉,想导完数据后再补上。

却发现,用SQL要补上不是件容易的事,最简单的方式自然就是用IDE。

不过SQL Server Management Studio链接远程数据库的话,几百几千的数据库,

基本上够卡死机子不用动了,更别说改好了。

 

原来还有VS:

好在发现Microsoft Visual Studio 2005的服务器链接,能只显示单个数据库,于是用它来修改主键和自增ID,的确省时又省心许多。

 

写到现在,数据才导了11649条,还有2万多条,我也得睡了,明早早点起来看了。

 

补充:

现在早上七点多,起床一看,发现:

错误 0xc0202009: 数据流任务: 出现 OLE DB 错误。错误代码: 0x80004005。
已获得 OLE DB 记录。源:“Microsoft SQL Native Client” Hresult: 0x80004005 说明:“Could not allocate a new page for database 'cyqdata' because of insufficient disk space in filegroup 'PRIMARY'. Create the necessary space by dropping objects in the filegroup, adding additional files to the filegroup, or setting autogrowth on for existing files in the filegroup.”。
 (SQL Server 导入和导出向导)


 

由于事务回滚,开机导了一个晚上,一条数据也没导过去,太让人伤心了!!

 

再补充:

刚问了下以前的同事,MSSQL的空间是多大:答复:200M!

OH。。My ..God!!

 

目前又恢复到Access版本,在提交入口和计数器入口增加了两个lock,但愿一切平安!!!

 

目前秋色正式恢复写数据操作,欢迎大伙继续访问。

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

AI Hentai Generator

AI Hentai Generator

免费生成ai无尽的。

热门文章

R.E.P.O.能量晶体解释及其做什么(黄色晶体)
2 周前 By 尊渡假赌尊渡假赌尊渡假赌
仓库:如何复兴队友
1 个月前 By 尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒险:如何获得巨型种子
4 周前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

Windows11怎么禁用后台应用程序_Windows11禁用后台应用教程 Windows11怎么禁用后台应用程序_Windows11禁用后台应用教程 May 07, 2024 pm 04:20 PM

1、在Windows11中打开设置。您可以使用Win+I快捷方式或任何其他方法。2、转到应用程序部分,然后单击应用程序和功能。3、查找要阻止在后台运行的应用程序。单击三点按钮并选择高级选项。4、找到【后台应用程序权限】部分并选择所需的值。默认情况下,Windows11设置电源优化模式。它允许Windows管理应用程序在后台的工作方式。例如,一旦启用省电模式以保留电池,系统将自动关闭所有应用程序。5、选择【从不】可防止应用程序在后台运行。请注意,如果您注意到程序不向您发送通知、无法更新数据等,您可

deepseek怎么转换pdf deepseek怎么转换pdf Feb 19, 2025 pm 05:24 PM

DeepSeek 无法直接将文件转换为 PDF。根据文件类型,可以使用不同方法:常见文档(Word、Excel、PowerPoint):使用微软 Office、LibreOffice 等软件导出为 PDF。图片:使用图片查看器或图像处理软件保存为 PDF。网页:使用浏览器“打印成 PDF”功能或专用的网页转 PDF 工具。不常见格式:找到合适的转换器,将其转换为 PDF。选择合适的工具并根据实际情况制定方案至关重要。

java里面的dao是什么意思 java里面的dao是什么意思 Apr 21, 2024 am 02:08 AM

Java 中的 DAO(数据访问对象)用于分离应用程序代码和持久层,其优点包括:分离:与应用程序逻辑独立,便于对其进行修改。封装:隐藏数据库访问细节,简化与数据库的交互。可扩展性:可轻松扩展以支持新数据库或持久性技术。通过 DAO,应用程序可以调用方法来执行数据库操作,如创建、读取、更新和删除实体,无需直接处理数据库细节。

无法允许访问 iPhone 中的摄像头和麦克风 无法允许访问 iPhone 中的摄像头和麦克风 Apr 23, 2024 am 11:13 AM

您在尝试使用应用程序时是否收到“无法允许访问摄像头和麦克风”?通常,您可以在需要提供的基础上向特定对象授予摄像头和麦克风权限。但是,如果您拒绝权限,摄像头和麦克风将无法工作,而是显示此错误消息。解决这个问题是非常基本的,你可以在一两分钟内完成。修复1–提供相机、麦克风权限您可以直接在设置中提供必要的摄像头和麦克风权限。步骤1–转到“设置”选项卡。步骤2–打开“隐私与安全”面板。步骤3–在那里打开“相机”权限。步骤4–在里面,您将找到已请求手机相机权限的应用程序列表。步骤5–打开指定应用的“相机”

field在java中是什么意思 field在java中是什么意思 Apr 25, 2024 pm 10:18 PM

在Java中,"field"是类或接口中的数据成员,用于存储数据或状态。field的属性包括:类型(可为任何Java数据类型)、访问权限、static(属于类而非实例)、final(不可变)和transient(不序列化)。field用于存储类或接口的状态信息,例如存储对象数据和维护对象状态。

oracle存储过程执行计划怎么看 oracle存储过程执行计划怎么看 Apr 18, 2024 pm 10:18 PM

Oracle存储过程执行计划提供了执行信息,包括访问路径、估计行数、连接顺序和成本。要查看执行计划,请执行 EXPLAIN PLAN 命令,查找“执行计划”部分。执行计划包含表头和正文,详细显示ID、操作类型、行数、成本、访问路径、筛选条件、涉及的表和索引,以及如有连接时的连接顺序。

Java反射机制如何修改类的行为? Java反射机制如何修改类的行为? May 03, 2024 pm 06:15 PM

Java反射机制允许程序动态修改类的行为,无需修改源代码。通过Class对象操作类,可以通过newInstance()创建实例,修改私有字段值,调用私有方法等。但应谨慎使用反射,因为它可能会导致意外的行为和安全问题,并有性能开销。

vue中iframe跨域的方法 vue中iframe跨域的方法 May 02, 2024 pm 10:48 PM

在 Vue 中解决 iframe 跨域问题的方法:CORS:启用后端服务器中的 CORS 支持,在 Vue 中使用 XMLHttpRequest 或 fetch API 发送 CORS 请求。JSONP:使用后端服务器中的 JSONP 端点,在 Vue 中动态加载 JSONP 脚本。代理服务器:设置代理服务器转发请求,在 Vue 中使用第三方库(如 axios)发送请求并设置代理服务器 URL。

See all articles