当一个页面发给前端工程师，在他眼里自动转换成一堆代码，就像一个扫描仪器一样，把它自动扫描成一段段代码，内容的信息对待就是HTML的结构。比如一个评论区，当没有设计稿的前提下，可以用HTML语言来定位它的整个结构，因为里面有很多内容是相对固定的，而且都是通用的。好比作者啊，时间啊，评论的内容啊，表单等等。那么其他内容就可以进一步细化，如评论表单还可以拆成更细的对象，如富文本编辑器。这样将信息对象化之后会发现有大量重复的对象和固定模式可被重用。
一个优质的网站从设计上来说一定不能是千篇一律的，好的视觉效果能够让用户觉得舒适，页面的层次感、逻辑性以及细节上的处理都是影响用户对网站好感度的关键。好的视觉效果除了能够吸引用户外，对网站搜索引擎优化也是有好处的。
为了追求网站的视觉效果，有的站用毫无意义的一些特效以及一些无用的字符，使网站显得更加高端，这种想法在新手站长中尤其明显，其实这是一个错误。其实上做好上个网站就先要做网站的内容，这样才能做好一个网站。
SEO教程 robots.txt文件常见用途
1. 允许所有的搜索引擎访问网站的任何部分
2. 禁止所有搜索引擎访问网站的任何部分
User-agent: *
Disallow: /
3. 禁止所有搜索引擎访问网站中所有的动态页面
User-agent: *
Disallow: /*?*
4. 禁止网站上的程序文件被搜索引擎蜘蛛索引，这样可以节省服务器资源。
一般网站中不需要蜘蛛抓取的文件有：后台管理文件、程序脚本、附件、数据库文件、编码文件、样式表文件、模板文件、导航图片和背景图片等等。
User-agent: *
Disallow: /admin/ 后台管理文件
Disallow: /require/ 程序文件
Disallow: /attachment/ 附件
Disallow: /images/ 图片
Disallow: /data/ 数据库文件
Disallow: /template/ 模板文件
Disallow: /css/ 样式表文件
Disallow: /lang/ 编码文件
Disallow: /script/ 脚本文件
注：每个网站的文件夹名字可能会不一样
扫描二维码