许多开发人员都会忽视网页结构中一个非常重要的方面——HTML代码的有效性。大部分网页都是由HTML编写而成的，同其他任何语言一样，HTML也有自己的语法、词汇和句式，用HTML写成的任何文件都应该遵守这些规则。
像所有编程语言一样，HTML是在不断发展变化的。随着HTML成长为一个相对强大的语言，它的错误也开始出现。那些不遵守官方语法规则的HTML代码称为无效HTML代码，网络蜘蛛按照标准语法确定HTML的合法性从而找到相关内容。如果HTML代码有错误，搜索引擎就可能在你的网页上找不到任何内容。
如果一个f网页符合HTML标准那么它就会被索引。如果代码中含有一个错误，网络蜘蛛可能会停止抓取你的网站并丢掉已经收集到的内容。虽然大多数搜索引擎会忽略一些小的HTML代码错误，但是一个字符的缺少很有可能会使网页无法出现在搜索引擎的结果页面。