Каскадный · [ Стандартный ] · Линейный Кросс-тест производительности, Хочу изготовить тест для Wiz /GPX/Dingoo

[EugeneP]

Хочу провести сколько-нибудь объективное сравнение производительности линуксовых хэндхельдов. Люди спрашивают, да и самому интересно.

Свои мысли:
1) Код тестов должен быть единым и универсальным. Т.е. опираться надо на консольные утили и, возможно, на распространённую кросс-платформу (типа феникса, или кто-что предложит?)
2) Тесты должны бегать на Wiz, старых GP и Динго (минимум), и, желательно, запускаться в любом линуксовом окружении.
3) Гонять надо: память на i/o, хранилище на i/o, проц на чистые вычисления, SDL на всё, комплексные тесты (сжатие-распаковка, проигрывание видео, что ещё?)

Вопросы старшим товарищам:
Какие тесты есть в природе?
Какие узкие места есть у хэндхельдов?
Какие мысли по тестированию есть вообще?

Сообщение отредактировал Hahahoj - Четверг, 27 августа 2009, 18:17

[quasist]

Написать свой LinuxGadgetMark и барыжить им чтобы производители линукс-хэндхелдов срались из-за результатов между собой.

[EugeneP]

Написать свой LinuxGadgetMark и барыжить им чтобы производители линукс-хэндхелдов срались из-за результатов между собой.

You've got the point.

P.S.
Название софтины уже придумано

Сообщение отредактировал EugeneP - Понедельник, 24 августа 2009, 08:22

[quasist]

ИМХО проект стоет разделить на 2 части

1. оболочка (скины, вывод, логи)
2. набор тестов

[Hahahoj]

Сравнить адекватно модели с разным размером набортной памяти весьма сложно. Но будет конечно подспорьем, если действительно пойдет в народ, поскольку заставит вылизовать фирмварю и хардварю под конкретные уже запросы.
Но,имхо, для России производство такой проги не реально. Её просто не заметят ни в Корее ни в Китае ни в Японии.

[quasist]

Прогу неплохо можно будет через форумы агитировать (регаешь нуба ... "О! мой виз набрал 2387 очка в этой проге! А твой?")

Незабываем, что бэнчмарк можно было бы использовать для и диагностических целей.

[Hahahoj]

Много ли производителей консолей ходит на подобные форумы?

[EugeneP]

Попробовал накидать простые тесты скриптами
типа dd if=/dev/zero of=/dev/null bd=1M count=100
>____<
ППЦ. Бизибокс ведёт себя вообще непоймикак и выдаёт фигню. Видимо делать тесты шелл-скриптами и граф оболочку сверху - плохая идея.
Буду пробовать всё фениксом. Или питоном.

[quasist]

А чем си не устраивает?

Много ли производителей консолей ходит на подобные форумы?

"Заболеет стадо, засуетится и пастух"

[EugeneP]

А чем си не устраивает?

Некоторые тесты можно и на Си. Если компилять под базовый ARM9 и полагаться только на libc, то должно бегать на любом линуксе. А вот графику для интерфейса кроспатформенно... разве что через fb.
Это я к чему... Хотелось бы чтоб бяка бегала без перекомпиляции на как можно большем числе платформ.

[500mhz]

ну думаю динго всех победит ) он же single task девайс а у того же гпх и shell и еше куча всякой лабуды в фоне запушено
имхо тест нада делать в виде бинаря и прошивать вместо кернела , ну и потом естественно унбрик типа делать консоли )

[EugeneP]

ну и потом естественно унбрик типа делать консоли )

Угу Руками

[500mhz]

или сначала killall а потом ./test
)))

[EugeneP]

Вот оформление основной мысли в коде (FENIX 0.92a):

Фигня конечно, но забавно. Жду идей для фаллометров тестов

CODE

PROGRAM mark;

LOCAL
   int tp, tt1, tt2, fp;
   string system  = "SYSTEM";
   string testname  = "name";
   string teststate = "state";
   string testres   = "result";
END
BEGIN
   set_mode(320,240,8);
   set_fps( 1000, 0);
   
   fp = fopen("/proc/version",O_READ);
   IF(fp==0)
DOERROR("NOT A LINUX HOST!");
FRAME;
   END;
   
   system = fgets(fp);
   fclose(fp);
   
   write_string(0, 5, 5, 0, &system);
   write_string(0, 160, 100, 4, &testname);
   write_string(0, 160, 120, 4, &teststate);
   write_string(0, 160, 140, 4, &testres);
   
   tt1 = get_timer();
   tp = TEST1(id, &testname, &teststate);
   say("Parent sleep");
   SIGNAL(id,S_SLEEP);
   FRAME;
   say("Parent wake");
   WHILE( EXISTS(tp) ) END;
   testres = itoa(get_timer()-tt1)+" ms";
   
   WHILE( !(KEY(_ENTER) OR KEY(_ESC)) )
FRAME;
   END;
   
   save_png(0, get_screen(), "results.png");
   
END;

PROCESS TEST1(int ppid, string * name,string * state)
LOCAL
   int fin, fout, k;
   short buf[10240];
END
BEGIN
   *name = "Random generator speed";
   fin = fopen("/dev/urandom",O_READ);
   IF( fin==0 )
*state = "error";
say(*state);
   ELSE
       FOR(k = 99; k>=0; k--)
    *state = "[ "+itoa(100-k)+"% ]";
    fread(fin, buf);
    FRAME;
END;
   fclose(fin);
   END;
   
   SIGNAL(ppid, S_WAKEUP);
END;

PROCESS DOERROR(string stext)
BEGIN
   LET_ME_ALONE();
   
   write(0, 160, 120, 4, stext);
   
   WHILE( !(KEY(_ENTER) OR KEY(_ESC)) )
FRAME;
   END;
END;

Вот так выглядит результат:

(Это для моего компа, Виза нет с собой)

----
EDIT:
ПЫшшшш.... А для Динги-то феникс есть O__o ??

Сообщение отредактировал EugeneP - Пятница, 28 августа 2009, 14:31

[EugeneP]

А вот результаты для домашнего ноута:

А вот и для Виза:


Ну... Вполне вменяемо.

Жду результатов от владельцев ГП2х и прочих.

[Hahahoj]

Бенну убила мой Феникс. Может кто кинется откомпилированной dcb-шкой.

[EugeneP]

Бенну убила мой Феникс. Может кто кинется откомпилированной dcb-шкой.

Присоединённые файлы
 mark.dcb.gz ( 2.02кб ) Кол-во скачиваний: 116

[EugeneP]

Вопрос: в прошивке виза в /mnt/nand/game/runime лежит рантайм Феникса. На предыдущих версиях приставки так же?

Сообщение отредактировал EugeneP - Пятница, 28 августа 2009, 21:42

[500mhz]

2584ms на Асер Оне и линюх

[EugeneP]

2584ms на Асер Оне и линюх

Спасибо.
Отлично. Теперь нужно придумать способ перевода секунд в попугаев. Надо наверно взять за 100 попугаев скорость самого медленного из вообразимых устройств.