普通的网站直接把代码放在根目录就可以了

django需要单独处理

方法一：

修改 nginx 配置

location  /robots.txt {
    alias  /path/to/static/robots.txt;
}

方法二：

修改 urls.py，将 robots.txt 放到 templates 目录

# urls.py
from django.views.generic import TemplateView

# robots.txt
path('robots.txt', TemplateView.as_view(template_name='robots.txt', content_type='text/plain')),