Разумеется, оценка сайта не всегда однозначна, так как разные пользователи воспринимают его по-своему. Также критическая оценка зависит от предназначения сайта и целевой аудитории. Например, если сайт разрабатывался для того, чтобы продемонстрировать возможности Flash анимации, то большое время на загрузку будет оправдано. Коммерческие проекты, разумеется, должны подвергаться более жёсткому тестированию, чем частные проекты. Ниже приведён список тех моментов, которые должны быть учтены при критической оценке сайта.

В первую очередь задайте себе вопросы на следующие темы:

Время загрузки

Оправдывает ли себя время загрузки страницы?
Если есть Flash intro, то предусмотрена ли функция пропуска заставки?
Есть ли HTML версия Flash сайта?
При ответе на эти вопросы вам могут помочь следующие инструменты:

NetMechanic HTML Toolbox -
Сервис, который просчитывает время загрузки страницы.

WebSpeed Optimizer -
Софтина, которая оценить целесообразность использования Java, flash и тд, но только стоит 99 вечнозелёных.

Внешний вид

Выдержаны ли цвета, шрифты, графика в едином стиле? У всех страниц должен быть один стиль, чтобы пользователь не думал, что попал уже на другой сайт, если просто перешёл по ссылке в другой раздел сайта.
Для того, чтобы найти нужную информацию, пользователю приходится делать не более 3х кликов?
Сбалансированы ли цвета дизайна страниц?
Удовлетворит ли сайт целевую аудиторию? Не введёт ли в заблуждение бизнесмена, который хочет заключить контракт с фирмой, которая владеет сайтом призыв сменить памперс виртуальному ребёнку? )))))))))
Сбалансирован ли макет страницы и не перегружена ли она информацией (особенно касается главных станиц)?
Качественна ли графика и сочетается ли она с остальными составляющими страницы?
Не мешает ли графика пользователю воспринимать информацию?
Не "режут" ли цвета сайта глаза?
Легко ли читается текст? Не сливается ли он с фоном?
Удобен ли сайт для тех людей, у которых разрешение экрана 600х800 пиклелей? Помните, что постоянноая необходимость прокручивать станицу во все четыре сороны раздражает.
Доступна ли информация об авторских правах и обратная связь?
Ясно ли предназначение сайта?

Структура и навигация

Организовано ли содержание логически?
Расположена ли навигация в одном и том же месте на всех страницах?
Всем ли ясно, что это пятно с крылышками - навигация? Не вводит ли она в заблуждение?
Все ли ссылки работают верно?
Понятно ли куда они ведут?
Просто ли использовать навигацию?
Нет ли тупиковых страниц?
Если в навигации использованы иконки, то есть ли к ним текстовое пояснение или всплывающие подсказки?
Понятно ли предназначение каждой страницы? Нет ли лишних?
Есть ли в навигации ссылка обратной связи?
Позволяет ли навигация вернуться на предыдущие подуровни?
Имеется ли понятный способ между последовательно связанными страницами и разделами сайта?

Контент (содержание)

Отражает ли содержание предназначение сайта?
Удовлетворит ли контент пользователя?
Найдут ли юзеры на сайте то, что искали?
Есть ли грамматические или синтаксические ошибки?
Не слишком ли вы утомляете пользователя чтением?
Достоверна ли информация?
Если сайт располагает большим количеством информации, то предусмотрен ли поиск?

Юзабилити

Работает ли сайт на всех платформах и браузерах?
Можно ли просматривать сайт на разных разрешениях?
Если есть формы, то организованы ли они логически?
Все ли компоненты сайта функционируют корректно?
Если вы применяете технические и програмные новшества, то доступны ли плагины?
Могут ли пользоватедли понять всю информацию и термины?
Есть ли функция отключения музыки?
Могут ли инвалиды просматривать сайт?

Главные цели дизайна:

Простота
Понятность
Содержание
Тщательность
Расположение пользователя
Полезность

Не забывайте узнавать мнение других!

Думаю что самое важное - это, уже вами отмеченное, совместимость в большинстве браузерах!
Ведь как классно когда заходиш на сайт под mzl и получаеш офигенно - кривую нарезку, в IE все класс. ИЛИ НАОБОРОТ!
Это отстой!
Поэтому надо нарезать под наиболее распространенные браузера: IE, Mozilla, Opera!