1 个不稳定版本
0.1.2 | 2023年5月23日 |
---|---|
0.1.1 |
|
0.1.0 |
|
#86 在 #索引
每月 25 下载
22KB
532 行
INFINI 搜索,代号:Pizza
下一代实时搜索与AI原生创新引擎。
INFINI Pizza 的主要特性
- 真正实时:插入后立即获得搜索结果,无需再刷新。
- 支持就地部分更新:不再需要拉取和推送整个文档。
- 高性能:具有极高的吞吐量和低延迟,硬件优化。
- 高可扩展性:支持超大规模集群,超过PB级别。
- 内存索引和列存储,使用对象存储进行持久化。
- 与LLMs和ML的本地集成,推动AI原生企业创新。
采用存储和计算分离设计,以及存储和索引分离。此功能强调存储和计算的解耦,以及存储和索引的分离。它通过允许独立管理和优化存储资源、计算资源和索引策略,实现了高效和可扩展的数据处理。
文档以Parquet文件的形式在对象存储中持久化。通过对象存储和标准Parquet格式与其它大数据系统进行本地集成。
INFINI Pizza 的理念是索引应根据用例进行设计,而不要试图用一个索引来适应所有用例。因此,我们引入了视图,允许将不同的文档源合并为一个索引,或将文档分离成不同层级的索引,以适应不同的用例。
与LLMs(语言模型)和ML(机器学习)技术的本地集成是INFINI Pizza的关键方面,为AI原生企业创新提供强大功能。通过无缝集成LLMs和ML框架,INFINI Pizza能够在搜索和数据检索管道中直接实现高级自然语言处理、机器学习和数据分析。
此集成使企业能够充分利用人工智能技术的潜力,例如情感分析、语言理解、推荐系统和预测分析,以增强其搜索和基于数据的应用程序。通过利用LLM和ML模型的力量,INFINI Pizza实现了更准确和情境感知的搜索结果、个性化的推荐、智能查询理解和其他AI驱动的功能。
INFINI Pizza与LLM和ML的原生集成消除了单独基础设施或复杂集成工作的需求。它为企业提供了一个无缝高效的平台,以在其搜索和数据处理工作流程中利用最前沿的AI能力。此集成开辟了AI驱动创新的新的可能性,并释放了企业数据的全部潜力,以增强决策、客户体验和业务洞察力。
欲了解更多关于INFINI Pizza的信息,请访问: http://infinilabs.com/
依赖项
~17-28MB
~498K SLoC