robots.txt文件 [复制链接]

请问4.0系统需要设置robots.txt文件吗？
这样写可以吗？

User-agent: *

Disallow: /appdata
Disallow: /appplugins
Disallow: /areas

Disallow: /bin
Disallow: /Config
Disallow: /Entities
Disallow: /FrameUi
Disallow: /Incs
Disallow: /Templates
Disallow: /Views


感觉那个文件夹都不允许访问才可以