Όταν ψάχνουμε για να αγοράσουμε το επόμενό μας τηλέφωνο, το καλύτερο πράγμα που μπορούμε να κάνουμε είναι να πάμε σε ένα κατάστημα για να το δούμε από κοντά. Έτσι όμως ελέγχουμε μόνο την ποιότητα κατασκευής και όχι τα χαρακτηριστικά του, που είναι στο κάτω κάτω το πιο σημαντικό από όλα. Υπάρχει επίσης η περίπτωση μία συσκευή να πωλείται μόνο online (κινέζικα), πώς λοιπόν μπορούμε να ελέγξουμε τις δυνατότητές της; Για αυτό το σκοπό έχουν δημιουργηθεί τα benchmark τα οποία αν και δε λένε πάντα την αλήθεια, μπορούμε να βγάλουμε πολύ χρήσιμα συμπεράσματα για τις συσκευές μας.
Το benchmark είναι ένα εργαλείο που εκτελεί stress test σε συγκεκριμένα στοιχεία της συσκευής, δίνοντάς μας τη δυνατότητα να καταλάβουμε τα όριά της. Για παράδειγμα υπάρχουν benchmark που τσεκάρουν το μέγιστο φορτίο του επεξεργαστή, τις δυνατότητες του chip γραφικών, την ταχύτητα εγγραφής της εσωτερικής μνήμης και άλλα πολλά τα οποία συνθέτουν αυτό που λέμε "τεχνικά χαρακτηριστικά". Επειδή τα αποτελέσματά τους βγαίνουν σε διάφορες μονάδες μέτρησης που πολύς κόσμος δεν μπορεί να καταλάβει (GHz, Mflops, MB/s), στις περισσότερες περιπτώσεις έχει υιοθετηθεί το αριθμητικό μοντέλο. Βλέπουμε δηλαδή ένα νούμερο που μπορούμε να κατανοήσουμε και να συγκρίνουμε ευκολότερα με άλλες συσκευές, για να έχουμε μία καλύτερη τελική άποψη.
Οι προϋποθέσεις
Για να βγάλουμε ασφαλή συμπεράσματα από τα benchmark, πρέπει να τα τρέξουμε στις κατάλληλες συνθήκες, επειδή όμως σίγουρα θα θέλουμε να συγκρίνουμε τη συσκευή μας με κάποια άλλη, οι συνθήκες πρέπει να είναι και ίδιες ανά συσκευή. Η κάθε συσκευή λοιπόν πρέπει να έχει περίπου τον ίδιο αριθμό εφαρμογών και διεργασιών που τρέχουν στο παρασκήνιο, να είναι συνδεδεμένη στο ίδιο WiFi, να τεστάρουμε τον ίδιο browser και λοιπά. Ακόμη και η έκδοση του Android και του kernel επηρεάζει ένα benchmark κι έτσι τα αποτελέσματα θα είναι διαφορετικά αν αλλάξουμε ROM, ενώ θα πρέπει να γνωρίζουμε επίσης ότι αν εκτελέσουμε πολλές φορές το ίδιο benchmark με τις ίδιες συνθήκες, αυτό δε θα μας δώσει ποτέ το ίδιο αποτέλεσμα στη συσκευή. Η απόκλιση συνήθως δεν είναι πολύ μεγάλη και έτσι βγάζουμε τα συμπεράσματά μας με σιγουριά.
Στο Dr. Android για παράδειγμα έχουμε αποφασίσει να τρέχουμε όλα τα benchmark αμέσως μόλις ενεργοποιούμε για πρώτη φορά την κάθε συσκευή. Δεν κατεβάζουμε επιπλέον εφαρμογές από τις προεγκατεστημένες, τις συνδέσουμε στο ίδιο WiFi και δεν προσθέτουμε λογαριασμούς Google και κάρτες SIM. Τέλος τρέχουμε τα benchmark τρεις φορές και κρατάμε το καλύτερο αποτέλεσμα. Δεν είναι απαραίτητα ο σωστός τρόπος, αλλά είναι ο ίδιος για όλες τις συσκευές που κάνουμε review και αυτό είναι το σημαντικότερο αν θέλουμε να τις συγκρίνουμε στη συνέχεια.
Ποιο benchmark να επιλέξω;
Τα benchmark είναι πολλά και υπάρχουν για όλα τα λειτουργικά συστήματα, εμείς στο Dr. Android όμως έχουμε επιλέξει τέσσερα για διάφορους λόγους, που θα εξηγήσουμε ευθύς αμέσως.
Antutu
Πρώτο από όλα είναι φυσικά το Antutu που είναι το πιο γνωστό και μας δίνει τη δυνατότητα να συγκρίνουμε τη συσκευή μας με οποιαδήποτε κυκλοφορεί στον κόσμο. Το Antutu στην έκτη έκδοσή του τεστάρει τέσσερις τομείς:
Τα επιμέρους σκορ είναι φυσικά στη διάθεσή μας, αλλά δεν υπάρχει κάποια κατάταξη για να τα συγκρίνουμε με άλλες συσκευές.
Vellamo
Ερχόμαστε λοιπόν στο δεύτερο benchmark που μας προσφέρει αυτό που λείπει από το Antutu. Το Vellamoτρέχει ένα σετ εργαλείων τα οποία μας δίνουν χρήσιμες πληροφορίες για τρεις κατηγορίες, που δείχνουν τη συμπεριφορά του σε καθημερινή χρήση:
Σημείωση:
Στα benchmark των review, τρέχουμε πάντα το Vellamo με τον Chrome, για να έχουμε ένα ασφαλές αποτέλεσμα και να μπορούμε να συγκρίνουμε τα αποτελέσματα με άλλες συσκευές.
Geekbench 3
Μετά το Vellamo και αφού πήραμε μια ιδέα για τις δυνατότητες του επεξεργαστή, τρέχουμε το Geekbench, το οποίο είναι το καλύτερο σε αυτό τον τομέα και έρχεται να επιβεβαιώσει τα ως άνω αποτελέσματα. Το Geekbench λοιπόν τεστάρει κυρίως τρία πράγματα:
Το μόνο κακό με αυτό είναι ότι το ενσωματωμένο συγκριτικό του δεν περιλαμβάνει μία τόσο μεγάλη γκάμα συσκευών και έτσι είναι κατά κάποιο τρόπο άχρηστο, αλλά μπορούμε να δούμε την πλήρη λίστα αποτελεσμάτων που υπάρχει στην επίσημη σελίδα του. Έτσι έχουμε τη δυνατότητα να αναζητήσουμε εκεί μία συσκευή πριν καν την αγοράσουμε.
3D Mark
Για το τέλος αφήσαμε αυτό που κάνει τη διαφορά σε μία συσκευή και δείχνει πραγματικά αν είναι δυνατή ή όχι. Πρόκειται για το 3D Mark το οποίο είναι το απόλυτο εργαλείο που σου δείχνει τι μπορεί να κάνει η συσκευή σου στο χειρότερο δυνατό σενάριο, τα βαριά παιχνίδια.
Το 3D Mark θα λέγαμε ότι ξεχωρίζει τους άντρες από τα γατάκια (ή τις γυναίκες από τις ψιψίνες) και το κάνει τεστάροντας πώς συμπεριφέρεται η συσκευή, όταν τρέχουμε παιχνίδια στην καλύτερη δυνατή έκδοση του OpenGL. Το συγκεκριμένο benchmark λαμβάνει υπ' όψιν και την ανάλυση της οθόνης της συσκευής μας, ενώ πριν καν ξεκινήσουμε, μας προτείνει ποιο είναι το καλύτερο benchmark και ποια είναι πολύ ελαφριά για τη συσκευή μας.
Το καλύτερο αυτή τη στιγμή είναι το Sling Shot, αλλά επειδή δεν υποστηρίζεται ακόμη από όλες τις συσκευές ή πολλές από αυτές απλά δεν μπορούν να το τρέξουν, στο Dr. Android τρέχουμε και το Ice Storm Unlimited, για να έχουμε συγκρίσιμα αποτελέσματα.
Σημείωση:
Εξίσου καλό εργαλείο, το οποίο δε χρησιμοποιούμε γιατί όλη τη μέρα θα έπρεπε να κάνουμε benchmark, είναι το PC Mark το οποίο μας δίνει χρήσιμα συμπεράσματα όσον αφορά την μπαταρία και τις επιδόσεις σε καθημερινή χρήση.
Συνέχεια του άρθρου Android Basics: Τι είναι τα benchmark και πώς μας βοηθούν να αγοράσουμε μια καλή συσκευή | Dr. Android)
Επιμέλεια: Chris K
Το benchmark είναι ένα εργαλείο που εκτελεί stress test σε συγκεκριμένα στοιχεία της συσκευής, δίνοντάς μας τη δυνατότητα να καταλάβουμε τα όριά της. Για παράδειγμα υπάρχουν benchmark που τσεκάρουν το μέγιστο φορτίο του επεξεργαστή, τις δυνατότητες του chip γραφικών, την ταχύτητα εγγραφής της εσωτερικής μνήμης και άλλα πολλά τα οποία συνθέτουν αυτό που λέμε "τεχνικά χαρακτηριστικά". Επειδή τα αποτελέσματά τους βγαίνουν σε διάφορες μονάδες μέτρησης που πολύς κόσμος δεν μπορεί να καταλάβει (GHz, Mflops, MB/s), στις περισσότερες περιπτώσεις έχει υιοθετηθεί το αριθμητικό μοντέλο. Βλέπουμε δηλαδή ένα νούμερο που μπορούμε να κατανοήσουμε και να συγκρίνουμε ευκολότερα με άλλες συσκευές, για να έχουμε μία καλύτερη τελική άποψη.
Οι προϋποθέσεις
Για να βγάλουμε ασφαλή συμπεράσματα από τα benchmark, πρέπει να τα τρέξουμε στις κατάλληλες συνθήκες, επειδή όμως σίγουρα θα θέλουμε να συγκρίνουμε τη συσκευή μας με κάποια άλλη, οι συνθήκες πρέπει να είναι και ίδιες ανά συσκευή. Η κάθε συσκευή λοιπόν πρέπει να έχει περίπου τον ίδιο αριθμό εφαρμογών και διεργασιών που τρέχουν στο παρασκήνιο, να είναι συνδεδεμένη στο ίδιο WiFi, να τεστάρουμε τον ίδιο browser και λοιπά. Ακόμη και η έκδοση του Android και του kernel επηρεάζει ένα benchmark κι έτσι τα αποτελέσματα θα είναι διαφορετικά αν αλλάξουμε ROM, ενώ θα πρέπει να γνωρίζουμε επίσης ότι αν εκτελέσουμε πολλές φορές το ίδιο benchmark με τις ίδιες συνθήκες, αυτό δε θα μας δώσει ποτέ το ίδιο αποτέλεσμα στη συσκευή. Η απόκλιση συνήθως δεν είναι πολύ μεγάλη και έτσι βγάζουμε τα συμπεράσματά μας με σιγουριά.
Στο Dr. Android για παράδειγμα έχουμε αποφασίσει να τρέχουμε όλα τα benchmark αμέσως μόλις ενεργοποιούμε για πρώτη φορά την κάθε συσκευή. Δεν κατεβάζουμε επιπλέον εφαρμογές από τις προεγκατεστημένες, τις συνδέσουμε στο ίδιο WiFi και δεν προσθέτουμε λογαριασμούς Google και κάρτες SIM. Τέλος τρέχουμε τα benchmark τρεις φορές και κρατάμε το καλύτερο αποτέλεσμα. Δεν είναι απαραίτητα ο σωστός τρόπος, αλλά είναι ο ίδιος για όλες τις συσκευές που κάνουμε review και αυτό είναι το σημαντικότερο αν θέλουμε να τις συγκρίνουμε στη συνέχεια.
Ποιο benchmark να επιλέξω;
Τα benchmark είναι πολλά και υπάρχουν για όλα τα λειτουργικά συστήματα, εμείς στο Dr. Android όμως έχουμε επιλέξει τέσσερα για διάφορους λόγους, που θα εξηγήσουμε ευθύς αμέσως.
Antutu
Πρώτο από όλα είναι φυσικά το Antutu που είναι το πιο γνωστό και μας δίνει τη δυνατότητα να συγκρίνουμε τη συσκευή μας με οποιαδήποτε κυκλοφορεί στον κόσμο. Το Antutu στην έκτη έκδοσή του τεστάρει τέσσερις τομείς:
- 3D - τη δυνατότητα της συσκευής να τρέχει παιχνίδια με υψηλής ποιότητας γραφικά
- CPU - το μέγιστο φορτίο που μπορεί να αντέξει ο επεξεργαστής
- RAM - το χώρο αποθήκευσης της RAM
- UX - τις καθημερινές εργασίες που μπορεί να κάνουμε με τη συσκευή μας
Τα επιμέρους σκορ είναι φυσικά στη διάθεσή μας, αλλά δεν υπάρχει κάποια κατάταξη για να τα συγκρίνουμε με άλλες συσκευές.
Vellamo
Ερχόμαστε λοιπόν στο δεύτερο benchmark που μας προσφέρει αυτό που λείπει από το Antutu. Το Vellamoτρέχει ένα σετ εργαλείων τα οποία μας δίνουν χρήσιμες πληροφορίες για τρεις κατηγορίες, που δείχνουν τη συμπεριφορά του σε καθημερινή χρήση:
- Browser - στην ταχύτητά της συσκευής κατά την περιήγηση στο ίντερνετ
- Metal - στις δυνατότητες του επεξεργαστή όταν τρέχει μία διεργασία, σε έναν μόνο πυρήνα
- Multicore - στην ταχύτητα του επεξεργαστή γενικότερα
Σημείωση:
Στα benchmark των review, τρέχουμε πάντα το Vellamo με τον Chrome, για να έχουμε ένα ασφαλές αποτέλεσμα και να μπορούμε να συγκρίνουμε τα αποτελέσματα με άλλες συσκευές.
Geekbench 3
Μετά το Vellamo και αφού πήραμε μια ιδέα για τις δυνατότητες του επεξεργαστή, τρέχουμε το Geekbench, το οποίο είναι το καλύτερο σε αυτό τον τομέα και έρχεται να επιβεβαιώσει τα ως άνω αποτελέσματα. Το Geekbench λοιπόν τεστάρει κυρίως τρία πράγματα:
- Single core - την ταχύτητα μόνο ενός πυρήνα του επεξεργαστή
- Multi core - το φορτίο που μπορούν να αντέξουν όλοι οι πυρήνες
- Battery - την αυτονομία της συσκευής
Το μόνο κακό με αυτό είναι ότι το ενσωματωμένο συγκριτικό του δεν περιλαμβάνει μία τόσο μεγάλη γκάμα συσκευών και έτσι είναι κατά κάποιο τρόπο άχρηστο, αλλά μπορούμε να δούμε την πλήρη λίστα αποτελεσμάτων που υπάρχει στην επίσημη σελίδα του. Έτσι έχουμε τη δυνατότητα να αναζητήσουμε εκεί μία συσκευή πριν καν την αγοράσουμε.
3D Mark
Για το τέλος αφήσαμε αυτό που κάνει τη διαφορά σε μία συσκευή και δείχνει πραγματικά αν είναι δυνατή ή όχι. Πρόκειται για το 3D Mark το οποίο είναι το απόλυτο εργαλείο που σου δείχνει τι μπορεί να κάνει η συσκευή σου στο χειρότερο δυνατό σενάριο, τα βαριά παιχνίδια.
Το 3D Mark θα λέγαμε ότι ξεχωρίζει τους άντρες από τα γατάκια (ή τις γυναίκες από τις ψιψίνες) και το κάνει τεστάροντας πώς συμπεριφέρεται η συσκευή, όταν τρέχουμε παιχνίδια στην καλύτερη δυνατή έκδοση του OpenGL. Το συγκεκριμένο benchmark λαμβάνει υπ' όψιν και την ανάλυση της οθόνης της συσκευής μας, ενώ πριν καν ξεκινήσουμε, μας προτείνει ποιο είναι το καλύτερο benchmark και ποια είναι πολύ ελαφριά για τη συσκευή μας.
Το καλύτερο αυτή τη στιγμή είναι το Sling Shot, αλλά επειδή δεν υποστηρίζεται ακόμη από όλες τις συσκευές ή πολλές από αυτές απλά δεν μπορούν να το τρέξουν, στο Dr. Android τρέχουμε και το Ice Storm Unlimited, για να έχουμε συγκρίσιμα αποτελέσματα.
Σημείωση:
Εξίσου καλό εργαλείο, το οποίο δε χρησιμοποιούμε γιατί όλη τη μέρα θα έπρεπε να κάνουμε benchmark, είναι το PC Mark το οποίο μας δίνει χρήσιμα συμπεράσματα όσον αφορά την μπαταρία και τις επιδόσεις σε καθημερινή χρήση.
Συνέχεια του άρθρου Android Basics: Τι είναι τα benchmark και πώς μας βοηθούν να αγοράσουμε μια καλή συσκευή | Dr. Android)
Επιμέλεια: Chris K
