本文介绍，在Vuepress中实现自定义algolia crawler爬虫来实现网站全文搜索功能。

背景介绍

网站的全文搜索功能是必备利器。经过对比选中algolia

建议有特殊需求可以寻求Pro版本，本实践是使用algolia提供的免费服务来实现全文搜索。

本实践针对本网站实现全文搜索功能。其他网站可以参考本文档修改配置文件来实现。

实践步骤

本文介绍，在Vuepress中修改robots内容。

背景

在Vuepress, 我发现robots.txt文件是自动生成的，我想改变其内容。故在Vuepress中修改了robots.txt文件，那么在生成的网站中，robots.txt文件的内容也会被修改。

环境说明

开发是Windows 10 专业版，系统版本是19043.928，系统语言是中文简体。

vscode版本是1.76.2，系统语言是中文简体。