#搜索引擎 #实时 #人工智能 #索引 #集成 #更新 #处理

已删除 infini-pizza

下一代实时搜索与AI原生创新引擎

1 个不稳定版本

0.1.2 2023年5月23日
0.1.1 2023年5月23日
0.1.0 2023年5月23日

#86#索引

每月 25 下载

AGPL-3.0 或更高版

22KB
532

INFINI 搜索,代号:Pizza

下一代实时搜索与AI原生创新引擎。

INFINI Pizza 的主要特性

  • 真正实时:插入后立即获得搜索结果,无需再刷新。
  • 支持就地部分更新:不再需要拉取和推送整个文档。
  • 高性能:具有极高的吞吐量和低延迟,硬件优化。
  • 高可扩展性:支持超大规模集群,超过PB级别。
  • 内存索引和列存储,使用对象存储进行持久化。
  • 与LLMs和ML的本地集成,推动AI原生企业创新。

采用存储和计算分离设计,以及存储和索引分离。此功能强调存储和计算的解耦,以及存储和索引的分离。它通过允许独立管理和优化存储资源、计算资源和索引策略,实现了高效和可扩展的数据处理。

文档以Parquet文件的形式在对象存储中持久化。通过对象存储和标准Parquet格式与其它大数据系统进行本地集成。

INFINI Pizza 的理念是索引应根据用例进行设计,而不要试图用一个索引来适应所有用例。因此,我们引入了视图,允许将不同的文档源合并为一个索引,或将文档分离成不同层级的索引,以适应不同的用例。

与LLMs(语言模型)和ML(机器学习)技术的本地集成是INFINI Pizza的关键方面,为AI原生企业创新提供强大功能。通过无缝集成LLMs和ML框架,INFINI Pizza能够在搜索和数据检索管道中直接实现高级自然语言处理、机器学习和数据分析。

此集成使企业能够充分利用人工智能技术的潜力,例如情感分析、语言理解、推荐系统和预测分析,以增强其搜索和基于数据的应用程序。通过利用LLM和ML模型的力量,INFINI Pizza实现了更准确和情境感知的搜索结果、个性化的推荐、智能查询理解和其他AI驱动的功能。

INFINI Pizza与LLM和ML的原生集成消除了单独基础设施或复杂集成工作的需求。它为企业提供了一个无缝高效的平台,以在其搜索和数据处理工作流程中利用最前沿的AI能力。此集成开辟了AI驱动创新的新的可能性,并释放了企业数据的全部潜力,以增强决策、客户体验和业务洞察力。

欲了解更多关于INFINI Pizza的信息,请访问: http://infinilabs.com/

依赖项

~17-28MB
~498K SLoC