为什么爬取帖子数少于创作者首页内容

[phbst]

比如：https://www.xiaohongshu.com/user/profile/62b2c1c6000000001b0271c3?xsec_token=ABTjQ1zo95DJb4Smp-cnmydKwjQX_Hvs4mYNUMAwsMdLc=&xsec_source=pc_search&tab=note

使用createor的方式json输出只有15条。为什么怎么解决

感谢作者！

[dosubot]

这是因为项目的默认配置限制了爬取数量。在 config/base_config.py 中有一个参数：

CRAWLER_MAX_NOTES_COUNT = 15

解决方法：将这个值改成你需要的数量，比如 100 或更大。

需要注意的是，小红书平台本身也有风控限制，爬取过多可能会触发反爬机制。建议：

• 适当控制爬取数量
• 考虑启用 CDP 模式来减少被风控的概率

To reply, just mention @dosu.

---

^{How did I do? Good | Irrelevant | Incorrect | Verbose | Hallucination | Report 🐛 | Other}