dyer

概览

dyer 设计用于可靠、灵活且快速的服务，基于请求-响应，包括数据处理、网络爬虫等，在不牺牲速度的前提下，提供一些友好、互操作、全面的特性。

特性

• 异步、并发流和 I/O，充分利用线程池、网络和系统资源。
• 事件驱动，一旦设置初始值和递归生成器，dyer 将以互操作的方式处理其余部分。
• 用户友好且灵活，dyer 提供高级、灵活、易于使用的包装器和 API，为您做很多事情。

特性标志

为了减少代码冗余并加快编译速度，dyer 使用特性标志来标记必要的模块/函数，目前这里有一些支持的特性

• xpath: 启用使用 xpath 解析 HTML 响应
• compression: 启用 HTTP 压缩：br，deflate，gzip
• proxy: 启用使用代理
• full: 启用所有功能

指南

入门，请安装 dyer-cli 并查看 示例。

食谱 提供了 dyer 的详细视图。