데이터 베이스 MySQL 튜토리얼 Nosql之普罗米修斯猜想

Nosql之普罗米修斯猜想

Jun 07, 2016 pm 05:41 PM
nosql 빅데이터

Nosql带领我们进入到一个新的数据库世界,字面上我们不要理解为是Nosql,应该正确理解为Noto..

 

              Nosql带领我们进入到一个新的数据库世界,字面上我们不要理解为是“No sql”,应该正确理解为“Not only sql”就是说我们不仅仅使用sql来查询和处理数据,还可以利用编程语言和其他技术来管理我们的数据,数据是多种多样的,就跟达尔文的进化论类似,数据也会进化,从远古的甲骨文,到现代的二进制,还有最近流行起来的二维码,不同的数据其管理方法也是不一样的。由原来无库时代->层次状数据库->网状数据库->关系型数据库->非关系型数据库-> 未来超级数据库,这也是进化而来,前些日子看了放映的大片《普罗米修斯》,里面有一个震撼的场面“星际云图”,虚拟主机,如下图所示,在一个有限空间里展示出了整个宇宙分布,每个星系每个星球都非常逼真而清晰,自己知道自己所在的位置,这样的信息是如何保存起来的呢?

   

              这可能不太适合使用关系型数据库来管理,说说为什么!

1.数据量:星际云图如果要实现,首先存储起来的数据量可想而知,这不是几个oracle就可以装下的。需要强大的存储设备。



 

2.运算量:数据转换为图形,计算各自的信息与资源,展示出来,这也不是仅仅追加硬件就可以的,早晚会碰触到天花板。



 

3.传输流量:数据如果是不流动的只能称之为标本,要计算出星球自己所在的位置和运行轨迹,并且要让其他的天体也知道每个行星的位置和自己的位置,这种输入/输出数据量可以想象是巨大的。



 

4.存储方式:这种星际云图已经不能单纯使用table来存放数据了,因为它是一种非结构化数据,最简单理解是一种三维数据,而表只能表示出二维数据,更甚者如果加上时间就是四维数据了。


 

              如果要设计一个符合条件的Nosql数据库那么需要重点关注是什么呢?

1.解决数据量:那么我想不用多说分布式存储可能是目前可行的一个好方法,香港空间,因为集中存储总有一天会碰触到天花板,不管是空间上 or 资金上 or I/O。而分布式存储可以适当降低成本,最重要的是可以大幅度提高I/O性能。

 

2.解决运算量:这个方案可以采用集群作战方式,也就是人海战术,最关键的是如何协调好大家一起来井然有序的工作,需要一个中央控制系统来协调集群工作。


 

3.解决传输流量:可以使用超级黑电缆,这种黑电缆速率40Gb/s,低延迟,高带宽。有一个不成熟的想法,来源于Exadata RAC架构,它是用一整块背板(集成电路板)把两台机器背靠背拼起来,数据走在总线上。我们是不是可以把集群中的节点也用总线的方式串起来,香港虚拟主机,这样基本上就跟上了内存IO效率啦。


 

4.解决存储方式:星际云图它是一种三维或者是多维的数据集合,我想这种数据可以用数学上的坐标方法来量化,每个星球有自己的坐标集合,若干个星球可以组成一个星系,就这样逐渐的拼接起来构建出图中震撼画面。



 

Leonarding
2012.12.19
天津&winter
分享技术~成就梦想
Blog:


 

 

本文出自 “leonarding Blog” 博客,请务必保留此出处

본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

AI Hentai Generator

AI Hentai Generator

AI Hentai를 무료로 생성하십시오.

인기 기사

R.E.P.O. 에너지 결정과 그들이하는 일 (노란색 크리스탈)
1 몇 달 전 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. 최고의 그래픽 설정
1 몇 달 전 By 尊渡假赌尊渡假赌尊渡假赌
Will R.E.P.O. 크로스 플레이가 있습니까?
1 몇 달 전 By 尊渡假赌尊渡假赌尊渡假赌

뜨거운 도구

메모장++7.3.1

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

PHP의 빅데이터 구조 처리 능력 PHP의 빅데이터 구조 처리 능력 May 08, 2024 am 10:24 AM

빅 데이터 구조 처리 기술: 청킹(Chunking): 데이터 세트를 분할하고 청크로 처리하여 메모리 소비를 줄입니다. 생성기: 전체 데이터 세트를 로드하지 않고 데이터 항목을 하나씩 생성하므로 무제한 데이터 세트에 적합합니다. 스트리밍: 파일을 읽거나 결과를 한 줄씩 쿼리하므로 대용량 파일이나 원격 데이터에 적합합니다. 외부 저장소: 매우 큰 데이터 세트의 경우 데이터를 데이터베이스 또는 NoSQL에 저장합니다.

C++ 개발 경험 공유: C++ 빅데이터 프로그래밍 실무 경험 C++ 개발 경험 공유: C++ 빅데이터 프로그래밍 실무 경험 Nov 22, 2023 am 09:14 AM

인터넷 시대에 빅데이터는 새로운 자원으로 자리 잡았으며, 빅데이터 분석 기술의 지속적인 발전으로 인해 빅데이터 프로그래밍에 대한 수요가 더욱 절실해지고 있습니다. 널리 사용되는 프로그래밍 언어로서 빅 데이터 프로그래밍에서 C++의 고유한 장점은 점점 더 두드러지고 있습니다. 아래에서는 C++ 빅데이터 프로그래밍에 대한 실제 경험을 공유하겠습니다. 1. 적절한 데이터 구조 선택 적절한 데이터 구조를 선택하는 것은 효율적인 빅데이터 프로그램을 작성하는 데 중요한 부분입니다. C++에는 배열, 연결 목록, 트리, 해시 테이블 등과 같이 사용할 수 있는 다양한 데이터 구조가 있습니다.

2024년 AEC/O 산업의 5가지 주요 개발 동향 2024년 AEC/O 산업의 5가지 주요 개발 동향 Apr 19, 2024 pm 02:50 PM

AEC/O(Architecture, Engineering & Construction/Operation)는 건설 산업 분야에서 건축 설계, 엔지니어링 설계, 시공 및 운영을 제공하는 종합 서비스를 말합니다. 2024년 AEC/O 산업은 기술 발전으로 인해 변화하는 도전에 직면하게 될 것입니다. 올해는 첨단 기술이 집약되어 ​​설계, 시공, 운영의 패러다임 전환을 예고하는 해가 될 것으로 예상됩니다. 이러한 변화에 대응하여 업계에서는 빠르게 변화하는 세계의 요구 사항에 적응하기 위해 작업 프로세스를 재정의하고 우선 순위를 조정하며 협업을 강화하고 있습니다. AEC/O 산업의 다음 5가지 주요 트렌드는 2024년 핵심 주제가 될 것이며, 더욱 통합되고 대응력이 뛰어나며 지속 가능한 미래로 나아갈 것을 권장합니다. 통합 공급망, 스마트 제조

58 초상화 플랫폼 구축에 알고리즘 적용 58 초상화 플랫폼 구축에 알고리즘 적용 May 09, 2024 am 09:01 AM

1. 58초상화 플랫폼 구축 배경 먼저, 58초상화 플랫폼 구축 배경에 대해 말씀드리겠습니다. 1. 기존 프로파일링 플랫폼의 전통적인 사고로는 더 이상 충분하지 않습니다. 사용자 프로파일링 플랫폼을 구축하려면 여러 비즈니스 라인의 데이터를 통합하여 정확한 사용자 초상화를 구축하는 데이터 웨어하우스 모델링 기능이 필요합니다. 그리고 알고리즘 측면의 기능을 제공해야 하며, 마지막으로 사용자 프로필 데이터를 효율적으로 저장, 쿼리 및 공유하고 프로필 서비스를 제공할 수 있는 데이터 플랫폼 기능도 있어야 합니다. 자체 구축한 비즈니스 프로파일링 플랫폼과 중간 사무실 프로파일링 플랫폼의 주요 차이점은 자체 구축한 프로파일링 플랫폼이 단일 비즈니스 라인에 서비스를 제공하고 필요에 따라 사용자 정의할 수 있다는 것입니다. 모델링하고 보다 일반적인 기능을 제공합니다. 2.58 Zhongtai 초상화 구성 배경의 사용자 초상화

Go 언어에서 빅데이터 프레임워크가 부족한 이유와 해결 방법에 대한 토론 Go 언어에서 빅데이터 프레임워크가 부족한 이유와 해결 방법에 대한 토론 Mar 29, 2024 pm 12:24 PM

오늘날 빅데이터 시대에 데이터 처리 및 분석은 다양한 산업 발전에 중요한 지원 요소가 되었습니다. 개발 효율성이 높고 성능이 뛰어난 프로그래밍 언어로서 Go 언어는 점차 빅데이터 분야에서 주목을 받고 있습니다. 그러나 Go 언어는 Java, Python 등 다른 언어에 비해 빅데이터 프레임워크에 대한 지원이 상대적으로 부족하여 일부 개발자에게 어려움을 초래했습니다. 이 글에서는 Go 언어에서 빅데이터 프레임워크가 부족한 주된 이유를 살펴보고, 그에 따른 솔루션을 제안하고, 구체적인 코드 예제를 통해 이를 설명하겠습니다. 1. 언어로 이동

AI, 디지털 트윈, 시각화... 2023년 Yizhiwei 가을 제품 출시 컨퍼런스의 하이라이트! AI, 디지털 트윈, 시각화... 2023년 Yizhiwei 가을 제품 출시 컨퍼런스의 하이라이트! Nov 14, 2023 pm 05:29 PM

Yizhiwei의 2023년 가을 제품 출시가 성공적으로 마무리되었습니다! 컨퍼런스의 주요 내용을 함께 살펴보겠습니다! 1. 지능적 포용적 개방성, 디지털 트윈의 생산성 향상 Kangaroo Cloud의 공동 창업자이자 Yizhiwei의 CEO인 Ning Haiyuan은 개회 연설에서 다음과 같이 말했습니다. 올해 회사 전략 회의에서 우리는 제품 연구 개발의 주요 방향을 다음과 같이 정했습니다. '지능형 포괄 개방성' '3대 핵심역량', '지능형 포괄 개방성' 3대 핵심 키워드에 초점을 맞춰 '디지털 트윈을 생산력으로 만든다'는 개발 목표를 더 제시했다. 2. EasyTwin: 사용하기 쉬운 새로운 디지털 트윈 엔진 탐색 1. 0.1에서 1.0까지 디지털 트윈 퓨전 렌더링 엔진을 계속 탐색하여 성숙한 3D 편집 모드, 편리한 대화형 청사진 및 대규모 모델 자산을 갖춘 더 나은 솔루션을 제공합니다.

시작 가이드: Go 언어를 사용하여 빅 데이터 처리 시작 가이드: Go 언어를 사용하여 빅 데이터 처리 Feb 25, 2024 pm 09:51 PM

오픈 소스 프로그래밍 언어로서 Go 언어는 최근 몇 년 동안 점차적으로 광범위한 관심과 사용을 받아 왔습니다. 단순성, 효율성 및 강력한 동시 처리 기능으로 인해 프로그래머가 선호합니다. 빅데이터 처리 분야에서도 Go 언어는 강력한 잠재력을 갖고 있으며, 대용량 데이터를 처리하고 성능을 최적화하며 다양한 빅데이터 처리 도구 및 프레임워크와 잘 통합될 수 있습니다. 본 글에서는 Go 언어의 빅데이터 처리에 대한 몇 가지 기본 개념과 기법을 소개하고, 구체적인 코드 예시를 통해 Go 언어를 사용하는 방법을 보여드리겠습니다.

C++ 기술의 빅데이터 처리: 인메모리 데이터베이스를 사용하여 빅데이터 성능을 최적화하는 방법은 무엇입니까? C++ 기술의 빅데이터 처리: 인메모리 데이터베이스를 사용하여 빅데이터 성능을 최적화하는 방법은 무엇입니까? May 31, 2024 pm 07:34 PM

빅 데이터 처리에서 인메모리 데이터베이스(예: Aerospike)를 사용하면 컴퓨터 메모리에 데이터를 저장하고 디스크 I/O 병목 현상을 제거하며 데이터 액세스 속도를 크게 높이기 때문에 C++ 애플리케이션의 성능을 향상시킬 수 있습니다. 실제 사례에서는 인메모리 데이터베이스를 사용할 때의 쿼리 속도가 하드 디스크 데이터베이스를 사용할 때보다 몇 배 더 빠른 것으로 나타났습니다.

See all articles