SQL Server数据访问程序优化指南
经过紧张的调查,你发现问题出在数据库上,当应用程序尝试访问/更新数据时,数据库执行得相当慢,再次深入调查数据库后,你发现数据库表增长得很大,有些表甚至有上千万行数据,测试团队开始在生产数据库上测试,发现订单提交过程需要花5分钟时间,但在网站
经过紧张的调查,你发现问题出在上,当应用程序尝试访问/更新数据时,执行得相当慢,再次深入调查数据库后,你发现数据库表增长得很大,有些表甚至有上千万行数据,测试团队开始在生产数据库上测试,发现订单提交过程需要花5分钟时间,但在网站上线前的测试中,提交一次订单只需要2/3秒。
类似这种故事在世界各个角落每天都会上演,几乎每个开发人员在其开发生涯中都会遇到这种事情,我也曾多次遇到这种情况,因此我希望将我解决这种问题的经验和大家分享。
如果你正身处这种项目,逃避不是办法,只有勇敢地去面对现实。首先,我认为你的应用程序中一定没有写数据访问程序,我将在这个系列的文章中介绍如何编写最佳的数据访问程序,以及如何优化现有的数据访问程序。
范围
在正式开始之前,有必要澄清一下本系列文章的写作边界,我想谈的是“事务性(OLTP)SQL Server数据库中的数据访问性能优化”,但文中介绍的这些技巧也可以用于其它数据库平台。
同时,我介绍的这些技巧主要是面向程序开发人员的,虽然DBA也是优化数据库的一支主要力量,但DBA使用的优化方法不在我的讨论范围之内。
当一个基于数据库的应用程序运行起来很慢时,90%的可能都是由于数据访问程序的问题,要么是没有优化,要么是没有按最佳方法编写代码,因此你需要审查和优化你的数据访问/处理程序。
我将会谈到10个步骤来优化数据访问程序,先从最基本的索引说起吧!
第一步:应用正确的索引
我之所以先从索引谈起是因为采用正确的索引会使生产系统的性能得到质的提升,另一个原因是创建或修改索引是在数据库上进行的,不会涉及到修改程序,并可以立即见到成效。
我们还是温习一下索引的基础知识吧,我相信你已经知道什么是索引了,但我见到很多人都还不是很明白,我先给大家将一个故事吧。
很久以前,在一个古城的的大图书馆中珍藏有成千上万本书籍,但书架上的书没有按任何顺序摆放,因此每当有人询问某本书时,图书管理员只有挨个寻找,每一次都要花费大量的时间。
[这就好比数据表没有主键一样,搜索表中的数据时,数据库引擎必须进行全表扫描,效率极其低下。]
更糟的是图书馆的图书越来越多,图书管理员的工作变得异常痛苦,有一天来了一个聪明的小伙子,他看到图书管理员的痛苦工作后,想出了一个办法,他建议将每本书都编上号,然后按编号放到书架上,如果有人指定了图书编号,那么图书管理员很快就可以找到它的位置了。
[给图书编号就象给表创建主键一样,创建主键时,会创建聚集索引树,表中的所有行会在文件系统上根据主键值进行物理排序,当查询表中任一行时,数据库首先使用聚集索引树找到对应的数据页(就象首先找到书架一样),然后在数据页中根据主键键值找到目标行(就象找到书架上的书一样)。]
于是图书管理员开始给图书编号,然后根据编号将书放到书架上,为此他花了整整一天时间,但最后经过测试,他发现找书的效率大大提高了。
[在一个表上只能创建一个聚集索引,就象书只能按一种规则摆放一样。]
但问题并未完全解决,因为很多人记不住书的编号,只记得书的名字,图书管理员无赖又只有扫描所有的图书编号挨个寻找,但这次他只花了20分钟,以前未给图书编号时要花2-3小时,但与根据图书编号查找图书相比,时间还是太长了,因此他向那个聪明的小伙子求助。
[这就好像你给Product表增加了主键ProductID,但除此之外没有建立其它索引,当使用Product Name进行检索时,数据库引擎又只要进行全表扫描,逐个寻找了。]
聪明的小伙告诉图书管理员,之前已经创建好了图书编号,现在只需要再创建一个索引或目录,将图书名称和对应的编号一起存储起来,但这一次是按图书名称进行排序,如果有人想找“Database Management System”一书,你只需要跳到“D”开头的目录,然后按照编号就可以找到图书了。
于是图书管理员兴奋地花了几个小时创建了一个“图书名称”目录,经过测试,现在找一本书的时间缩短到1分钟了(其中30秒用于从“图书名称”目录中查找编号,另外根据编号查找图书用了30秒)。
图书管理员开始了新的思考,读者可能还会根据图书的其它属性来找书,如作者,于是他用同样的办法为作者也创建了目录,现在可以根据图书编号,书名和作者在1分钟内查找任何图书了,图书管理员的工作变得轻松了,故事也到此结束。

핫 AI 도구

Undresser.AI Undress
사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover
사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool
무료로 이미지를 벗다

Clothoff.io
AI 옷 제거제

AI Hentai Generator
AI Hentai를 무료로 생성하십시오.

인기 기사

뜨거운 도구

메모장++7.3.1
사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전
중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기
강력한 PHP 통합 개발 환경

드림위버 CS6
시각적 웹 개발 도구

SublimeText3 Mac 버전
신 수준의 코드 편집 소프트웨어(SublimeText3)

뜨거운 주제











Java의 DAO(Data Access Object)는 애플리케이션 코드와 지속성 계층을 분리하는 데 사용되며 다음과 같은 장점이 있습니다. 분리: 애플리케이션 로직에서 독립되어 수정이 쉽습니다. 캡슐화: 데이터베이스 액세스 세부 정보를 숨기고 데이터베이스와의 상호 작용을 단순화합니다. 확장성: 새로운 데이터베이스 또는 지속성 기술을 지원하기 위해 쉽게 확장할 수 있습니다. DAO를 사용하면 애플리케이션은 데이터베이스 세부 정보를 직접 처리하지 않고도 엔터티 생성, 읽기, 업데이트 및 삭제와 같은 데이터베이스 작업을 수행하는 메서드를 호출할 수 있습니다.

FP8 이하의 부동 소수점 수량화 정밀도는 더 이상 H100의 "특허"가 아닙니다! Lao Huang은 모든 사람이 INT8/INT4를 사용하기를 원했고 Microsoft DeepSpeed 팀은 NVIDIA의 공식 지원 없이 A100에서 FP6을 실행하기 시작했습니다. 테스트 결과에 따르면 A100에 대한 새로운 방법 TC-FPx의 FP6 양자화는 INT4에 가깝거나 때로는 더 빠르며 후자보다 정확도가 더 높은 것으로 나타났습니다. 또한 오픈 소스로 제공되고 DeepSpeed와 같은 딥 러닝 추론 프레임워크에 통합된 엔드투엔드 대규모 모델 지원도 있습니다. 이 결과는 대형 모델 가속화에도 즉각적인 영향을 미칩니다. 이 프레임워크에서는 단일 카드를 사용하여 Llama를 실행하면 처리량이 듀얼 카드보다 2.65배 더 높습니다. 하나

U 디스크는 일상 업무와 생활에서 일반적으로 사용되는 저장 장치 중 하나이지만 때로는 U 디스크가 쓰기 금지되어 데이터를 쓸 수 없는 상황이 발생할 수 있습니다. 이 문서에서는 USB 플래시 드라이브의 쓰기 보호를 신속하게 제거하고 USB 플래시 드라이브의 정상적인 사용을 복원하는 데 도움이 되는 몇 가지 간단하고 효과적인 방법을 소개합니다. 도구 자료: 시스템 버전: Windows1020H2, macOS BigSur11.2.3 브랜드 모델: SanDisk UltraFlair USB3.0 플래시 드라이브, Kingston DataTraveler100G3USB3.0 플래시 드라이브 소프트웨어 버전: DiskGenius5.4.2.1239, ChipGenius4.19.1225 1. 물리적 쓰기 방지 스위치를 확인하세요. 일부 USB 플래시 드라이브의 USB 플래시 드라이브

MySQL은 다음과 같은 주요 기능을 제공하는 관계형 데이터베이스 관리 시스템입니다. 데이터 저장 및 관리: 데이터 생성 및 구성, 다양한 데이터 유형, 기본 키, 외래 키 및 인덱스를 지원합니다. 데이터 쿼리 및 검색: SQL 언어를 사용하여 데이터를 쿼리, 필터링 및 검색하고 실행 계획을 최적화하여 효율성을 향상시킵니다. 데이터 업데이트 및 수정: INSERT, UPDATE, DELETE 명령을 통해 데이터를 추가, 수정 또는 삭제하고 트랜잭션을 지원하여 일관성을 보장하고 변경 사항을 취소하는 롤백 메커니즘을 지원합니다. 데이터베이스 관리: 데이터베이스와 테이블을 생성 및 수정하고, 데이터를 백업 및 복원하고, 사용자 관리 및 권한 제어를 제공합니다.

API 인터페이스는 소프트웨어 구성 요소 간의 상호 작용을 위한 사양이며 서로 다른 응용 프로그램이나 시스템 간의 통신 및 데이터 교환을 구현하는 데 사용됩니다. API 인터페이스는 애플리케이션이 함께 작동할 수 있도록 개발자의 지침을 컴퓨터 언어로 변환하는 "번역기" 역할을 합니다. 편리한 데이터 공유, 단순화된 개발, 향상된 성능, 강화된 보안, 향상된 생산성 및 상호 운용성 등의 장점이 있습니다.

MySQL의 스키마는 데이터 일관성, 데이터 액세스 제어를 보장하고 데이터베이스 설계를 단순화하기 위해 데이터베이스 개체(예: 테이블, 뷰)를 구성 및 관리하는 데 사용되는 논리적 구조입니다. 스키마의 기능은 다음과 같습니다. 1. 데이터 구성 2. 데이터 일관성 4. 데이터베이스 설계

Java의 서비스 계층은 비즈니스 규칙 처리, 데이터 캡슐화, 비즈니스 로직 중앙 집중화 및 테스트 가능성 향상을 포함하여 애플리케이션 실행을 위한 비즈니스 로직 및 비즈니스 규칙을 담당합니다. Java에서 서비스 계층은 일반적으로 독립 모듈로 설계되고 컨트롤러 및 리포지토리 계층과 상호 작용하며 인터페이스 생성, 종속성 주입 및 서비스 메서드 호출과 같은 단계에 따라 종속성 주입을 통해 구현됩니다. 모범 사례에는 단순성 유지, 인터페이스 사용, 데이터 직접 조작 방지, 예외 처리 및 종속성 주입 사용이 포함됩니다.

Redis 캐싱 메커니즘은 키-값 저장소, 메모리 저장소, 만료 정책, 데이터 구조, 복제 및 지속성을 통해 구현됩니다. 데이터 획득, 캐시 히트, 캐시 미스, 캐시 쓰기, 캐시 업데이트의 단계를 거쳐 빠른 데이터 접근과 고성능 캐싱 서비스를 제공합니다.
