存储工具适应其数据集用户想要搜索的内容
大数据已经变得非常非常大:到2025年,全球所有数据总计将达到175万亿千兆字节。为了获得视觉效果,如果将这么多的数据存储在DVD上,它将堆积得足够高,可以绕地球旋转222次。
计算中的最大挑战之一是在处理这种猛烈的信息的同时仍然能够有效地存储和处理信息。麻省理工学院计算机科学与人工智能实验室(CSAIL)的一个小组认为,答案在于所谓的“实例优化系统”。
传统的存储和数据库系统被设计为可用于各种应用程序,因为构建它们需要花费多长时间(数月甚至是数年)。结果,对于任何给定的工作负载,此类系统提供的性能都很好,但通常不是最好的。更糟糕的是,有时它们需要管理员手动调整系统以提供合理的性能。
相反,实例优化系统的目标是构建针对其存储的数据和所服务的工作负载进行优化和部分重新组织的系统。
麻省理工学院的蒂姆·克拉斯卡(Tim Kraska)教授说:“这就像从头开始为每个应用程序构建数据库系统,这在传统系统设计上在经济上是不可行的。”
作为实现这一愿景的第一步,Kraska及其同事开发了Tsunami和Bao。Tsunami使用机器学习功能根据用户进行查询的类型自动重新组织数据集的存储布局。测试表明,它运行查询的速度比最新系统快10倍。而且,它的数据集可以通过一系列“学习的索引”进行组织,这些索引比传统系统中使用的索引小100倍。
克拉斯卡(Kraska)多年来一直在探讨学习索引的主题,可追溯到2017年他与Google同事的有影响力的工作。
并未参与海啸项目的哈佛大学教授Stratos Idreos表示,学习型索引的独特优势在于其尺寸小,除了节省空间外,还可以显着提高性能。
Idreos说:“我认为这一工作线是一种范式转变,它将长期影响系统设计。” “我希望基于模型的方法将成为新一轮自适应系统核心的核心组成部分之一。”
同时,Bao致力于通过机器学习提高查询优化的效率。查询优化器将高级声明性查询重写为查询计划,该计划实际上可以在数据上执行以计算查询结果。但是,通常存在不止一个查询计划来回答任何查询。选择错误的查询可能会导致查询花几天时间才能计算出答案,而不是几秒钟。
传统的查询优化器需要花费数年的时间来构建,很难维护,而且最重要的是,不要从错误中吸取教训。Bao是第一个基于学习的查询优化方法,已完全集成到流行的数据库管理系统PostgreSQL中。首席作者Ryan Marcus是Kraska小组的博士后,他说Bao生成的查询计划比PostgreSQL优化器创建的查询计划快50%,这意味着它可以帮助显着降低云服务的成本,例如Amazon的Redshift,基于PostgreSQL的。
免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!
-
如果您想体验零跑汽车的试驾服务,可以通过以下步骤在4S店快速预约:首先,访问零跑汽车的官方网站或通过其官...浏览全文>>
-
试驾奔驰迈巴赫S级的预约流程简单清晰,以下是具体步骤:首先,访问奔驰官方网站或联系当地授权经销商。在网站...浏览全文>>
-
纳米01试驾流程通常包括以下几个步骤:第一步:预约试驾用户可以通过品牌官网、4S店或电话预约试驾。提前预约...浏览全文>>
-
奔腾B70是一款集时尚设计与卓越性能于一身的中型轿车,近期有幸对其进行了一次深度试驾。这款车型不仅外观大气...浏览全文>>
-
想要快速预约福特蒙迪欧的试驾体验驾驶乐趣?以下是一些简单步骤帮助您轻松完成:首先,访问福特官网或通过福...浏览全文>>
-
大众试驾,轻松搞定试驾想要深入了解一款车的性能与驾驶感受?试驾是最佳选择!无论是追求操控感的运动型轿车...浏览全文>>
-
试驾现代胜达时,您需要满足一些基本条件以确保安全和顺利的体验。首先,您必须持有有效的驾驶证,并且驾龄通...浏览全文>>
-
小鹏G7是一款备受关注的智能电动车,对于新手来说,试驾前需要了解一些关键步骤和注意事项,确保安全且充分体...浏览全文>>
-
如果您对别克GL8感兴趣并希望亲身体验其性能与舒适性,预约试驾是一个很好的选择。以下是4S店提供的贴心服务及...浏览全文>>
-
奇瑞新能源QQ多米试驾新手指南对于初次试驾奇瑞新能源QQ多米的新手来说,了解试驾流程至关重要。以下是一份详...浏览全文>>
- 零跑汽车试驾,如何在4S店快速预约?
- 江淮iEV7试驾预约预约流程
- 试驾MG4 EV全攻略
- 奥迪SQ5 Sportback预约试驾,线上+线下操作指南
- 全顺试驾预约,一键搞定,开启豪华驾驶之旅
- 魏牌预约试驾全攻略
- 试驾零跑汽车零跑C01,畅享豪华驾乘,体验卓越性能
- 试驾哈弗H6操作指南
- 零跑T03试驾,畅享豪华驾乘,体验卓越性能
- 菱势汽车预约试驾,轻松搞定试驾流程
- MINI试驾,线上+线下操作指南
- 试驾沃尔沃XC60,从预约到试驾的完美旅程
- 试驾QQ多米,畅享豪华驾乘,体验卓越性能
- 试驾丰田汉兰达,一键搞定,开启豪华驾驶之旅
- 力帆预约试驾,一键搞定,开启豪华驾驶之旅
- 阿维塔12预约试驾,4S店体验全攻略
- 试驾江铃E路顺V6,简单几步,开启完美试驾之旅
- 灵悉L试驾预约,如何享受4S店的专业服务?
- 极氪7X试驾,如何享受4S店的专业服务?
- 鸿蒙智行智界R7预约试驾,新手必知的详细步骤