第3集:2000年代/数据库分型及国产数据库开端
y2k问题
千年虫,又叫做“计算机2000年问题”“电脑千禧年千年虫问题”或“千年危机”。缩写为“Y2K]”。是指在某些使用了计算机程序的智能系统包括计算机系统、自动控制芯片等)中,由于其中的年份只使用两位十进制数来表示,因此当系统进行(或涉及到)跨世纪的日期处理运算时(如多个日期之间的计算或比较等),就会出现错误的结果,进而引发各种各样的系统功能紊乱甚至崩溃。因此从根本上说千年虫是一种程序处理日期上的bug(计算机程序故障),而非病毒。
1997年那时候大家突然意识到时间字段保存的问题:
这个问题是因为之前存储很贵,很多字段能省就省,所以1975年就写75,但是大家突然意识到还有2000年,这时候00-75就要出问题了,所以这个问题还是比较麻烦的,大家都在进行改造,解决这个问题。
不管哪一轮的新潮都要想要取代数据库,但是每次数据库都会更加发展起来。
IBM:有自己的系统,绑定硬件一起销售
微软:没有unix系统,在window平台上,其他数据库没有竞争力。
DB2:睡觉的狮子,千万别叫醒他,叫醒了之后大家会吃苦头
当时的互联网很热,大家都想在这里进行发展,就牵扯到了很多精力。
00年新的数据库
一、列式数据库,sybase,金融客户的发展
IQ代表列式数据库进入中国的的标志,列式数据 OLTP
列数据存储区也称为面向列的DBMS或列式数据库管理系统。列存储DBMS将数据存储在列而不是行中。
列式数据库是以列相关存储架构进行数据存储的数据库,主要适合于批量数据处理和即时查询。相对应的是行式数据库,数据以行相关的存储体系架构进行空间分配,主要适合于大批量的数据处理,常用于联机事务型数据处理。
列存储数据库使用一个称为 keyspace 的概念。keyspace 有点像关系模型中的模式。keyspace 包含所有列族(有点像关系模型中的表),其中包含行,包含列。
像这样,一个 keyspace 包含多个列族:
动感时代:就是当时外企对于国企的一个启发,用多种组合的套餐来吸引年轻人。
二、内存数据库,对列式数据库有影响,
内存数据库,顾名思义就是将数据放在内存中直接操作的数据库。相对于磁盘,内存的数据读写速度要高出几个数量级,将数据保存在内存中相比从磁盘上访问能够极大地提高应用的性能。
三、嵌入式数据库:
SQLAnywhere,SQLite,
自适应自调整的能力,轻量化
SQLite是一个轻量级的嵌入式关系型数据库管理系统。它由D. Richard Hipp在2000年开发,它实现了一个小型、快速、独立、高可靠性、功能齐全的SQL数据库引擎。
SQLite 用C语言开发,最开始的设计目标是嵌入式系统,它可以在不需要单独的服务器进程的情况下,直接嵌入到应用程序中。后来正好赶上智能手机等智能设备普及,正好契合 SQLite 的使用场景,于是大量的智能设备都在使用 SQLite 。这么说吧,你用的手机上,一定有 SQLite 存在。
像 MySQL 一样,SQLite 也是开源且免费的,据官方统计,目前正在使用的 SQLite 数据库超过 1 万亿个。SQLite 支持C、C 、Java、Python、Swift等大多数语言直接使用。 SQLite 会随着应用程序代码一起打包,所以这样说来,你的手机上还不止一个 SQLite ,可能有很多,例如微信有一个、美团有一个、网易云音乐等等 APP ,都可能包含自己的 SQLite。
四、数据流,流式数据库:
以数据流的形式流动过去,时间窗口,
流式SQL是指采用用于编写数据库查询的相同的声明式SQL,而在快速变化的数据流上运行。
这很有用,因为。
- 当你能迅速采取行动时,数据往往更有价值
- 现有的从数据流中获得实时洞察力的工具过于复杂。
铁路票购买
分布式系统NoSQL,
12306在开始诞生的前几年,每到重大节假日,经常“瘫痪”,直接原因就是集中超负荷的访问量。技术原因是它在此期间所采用的国际著名的某大型关系型数据库产品。这里暴露出来的问题特点便是:
(1) 传统大型关系型数据库无法更好地解决问题
(2) 在互联网上的应用
(3) 超大规模集中时间段在线访问和业务处理(订火车票)。
NoSQL正是为了解决这个问题而诞生了,重点突出处理速度的响应和海量数据的存储问题。
海量数据?PB级以上
据说一张票的购买要涉及到很多数据库,是因为铁路是分段的,比如武汉铁路段,北京铁路段,他是分段的,不同的段的票还是不一样的。
每次查询有没有车票都要到数据库,但是这样数据库的压力就非常大,尤其是中国的人很多。所以当时就做了一个读写分离。
读写分离,余票数据库放到内存中,这样大家查到这里面是上一秒的数据,减轻了数据库的压力。
关于CRM
CRM客户关系管理系统(英文全称Customer Relationship Management),主要就是利用软件、硬件和网络技术,为企业建立一个客户信息收集、管理、分析、利用的信息系统。
CRM系统主要是以客户为核心,企业和客户之间在品牌推广、销售产品或提供服务等场景下所产生的各种关系的处理过程,其最终目标就是吸引新客户关注并转化为企业付费用户、提高老客户留存率并帮助转介绍新用户,以此来增加企业的市场份额及利润,增强企业竞争力。
noSQL
从no SQL 到 not only SQL,
把数据库的那的包袱丢掉了,然后又开始建立了一个新的生态,这个生态里面开源数据库很多。
NoSQL(NoSQL = Not Only SQL ),意即"不仅仅是SQL"。
在现代的计算系统上每天网络上都会产生庞大的数据量。这些数据有很大一部分是由关系数据库管理系统(RDBMS)来处理。
1970年 E.F.Codd's提出的关系模型的论文 "A relational model of data for large shared data banks",这使得数据建模和应用程序编程更加简单。
通过应用实践证明,关系模型是非常适合于客户服务器编程,远远超出预期的利益,今天它是结构化数据存储在网络和商务应用的主导技术。NoSQL 是一项全新的数据库革命性运动,早期就有人提出,发展至2009年趋势越发高涨。NoSQL的拥护者们提倡运用非关系型的数据存储,相对于铺天盖地的关系型数据库运用,这一概念无疑是一种全新的思维的注入。
国产数据库
达梦,
十一五,市场没有那么大,而且国家的支持不是很多,当时就很难,裁了很多人。
国产数据库的发展经历了从跟随到超越的过程。在过去,由于技术门槛和市场垄断,国内数据库市场主要由国外品牌占据。然而,随着国内技术实力的增强和政策的扶持,国产数据库逐渐崭露头角。如今,国产数据库已经形成了较为完整的产业链,并在某些领域实现了对国外品牌的超越。