Table 7 Comparative assessment results of the WAEE tool with existing models and automated tools in terms of functional properties.
From: Automated evaluation of accessibility issues of webpage content: tool and evaluation
References | Assessment features | |||||||
|---|---|---|---|---|---|---|---|---|
Guideline information | Semantic information | Additional evaluation criteria | Accessibility score computation | |||||
WCAG 2.2 | Success criteria feedback | Conformance level feedback | Textual/non-textual evaluation feedback | User and Expert evaluation feedback | User requirements evaluation | Overall accessibility score | Accessibility score for disability type | |
Scientific models | ||||||||
Jens Pelzetter43 | ✗ (No) | ✓(Yes) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
Michailidou et al.25 | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
Shrestha44 | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
Boyalakuntla et al.15 | ✓(Yes) | ✓(Yes) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
Hilera et al.45 | ✗ (No) | ✓(Yes) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
Ingavélez-Guerra et al.46 | ✗ (No) | ✓(Yes) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
Robal et al.29 | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
Commercial open-source automated tools | ||||||||
Accessibility Checker | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
AccessMonitor | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
aCe | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
AChecker | ✗ (No) | ✓(Yes) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
Bulk Accessibility Checker | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
MAUVE | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
Rocket Validator | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
TAW | ✗ (No) | ✓(Yes) | ✓(Yes) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
WAVE | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) |
Nibbler | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✗ (No) | ✓(Yes) | ✗ (No) |
Proposed automated tool | ||||||||
WCAEE tool | ✓(Yes) | ✓(Yes) | ✓(Yes) | ✓(Yes) | ✓(Yes) | ✓(Yes) | ✓(Yes) | ✓(Yes) |
