Den "mekaniska eran" är inte en formellt definierad period i datorutvärdering, eftersom datorutvärderingsmetoder utvecklades tillsammans med själva tekniken. Vi kan emellertid diskutera hur begränsningarna för mekanisk dator påverkade hur tidiga datorer bedömdes.
I eran med mekaniska datorer (ungefär sent på 1800- och början av 1900 -talet) fokuserade utvärderingen främst på:
* hastighet och tillförlitlighet: Mekaniska datorer var notoriskt långsamma och benägna att fungera. Utvärderingar fokuserade på att mäta den tid det tar för att slutföra specifika beräkningar och frekvensen av fel. Detta involverade ofta noggrant tidsoperationer med stoppur och noggrant dokumenterande misslyckanden. Tillförlitligheten hos komponenter (som växlar och reläer) var ett stort problem.
* noggrannhet: Resultatens precision var av största vikt. Med tanke på den mekaniska karaktären kan felaktigheter härröra från slitage, felinställning eller begränsningar i designen. Utvärdering skulle innebära att jämföra utgångar med kända korrekta lösningar för att bestämma noggrannheten och precisionen.
* Komplexitet av problem löst: Skalan på problem som en maskin kunde hantera var en viktig differentierare. En maskin som kan hantera mer komplexa beräkningar än föregångarna ansågs vara överlägsna. Detta uttrycktes ofta i termer av de typer av matematiska problem som det kunde lösa, inte nödvändigtvis när det gäller beräkningskraft som vi förstår den idag.
* Kostnad och storlek: Mekaniska datorer var stora och dyra att bygga. Utvärderingar skulle överväga kostnaderna för tillverkning, underhåll och rymdkrav, eftersom det var betydande faktorer som begränsade deras antagande.
I huvudsak påverkades utvärderingskriterierna under den mekaniska eran starkt av tidens tekniska begränsningar. Till skillnad från moderna riktmärken, som fokuserar på saker som floppar (flytande punktoperationer per sekund) eller minnesbandbredd, var de tidiga utvärderingarna mer kvalitativa och bekymrade över grundläggande funktionalitet, tillförlitlighet och praktik. De saknade de standardiserade och kvantitativa mätvärden som vi använder idag.