ChatGPT/FastGPT
1
0
Fork 0
mirror of https://github.com/labring/FastGPT.git synced 2025-07-24 22:03:54 +00:00
Code Issues Packages Projects Releases Wiki Activity

V4.6.6-2 (#673)

Browse Source
This commit is contained in:
Archer
2023-12-31 14:12:51 +08:00
committed by GitHub
parent ccca0468da
commit 9ccfda47b7
270 changed files with 8182 additions and 1295 deletions
Download Patch File Download Diff File Expand all files Collapse all files

4
docSite/content/docs/course/websync.md
View File

@@ -9,6 +9,8 @@ weight: 105
![](/imgs/webSync1.jpg)
该功能目前仅向商业版用户开放。
## 什么是 Web 站点同步
Web 站点同步利用爬虫的技术，可以通过一个入口网站，自动捕获`同域名`下的所有网站，目前最多支持`200`个子页面。出于合规与安全角度，FastGPT 仅支持`静态站点`的爬取，主要用于各个文档站点快速构建知识库。
@@ -16,7 +18,7 @@ Web 站点同步利用爬虫的技术，可以通过一个入口网站，自动
Tips: 国内的媒体站点基本不可用，公众号、csdn、知乎等。可以通过终端发送`curl`请求检测是否为静态站点，例如：
```bash
curl ai.fastgpt.in
curl https://doc.fastgpt.in/docs/intro/
```
## 如何使用