Sanchezzz, выдвинул интересную идею и разработчики ее уже реализовали:


Т.к. создавать тесты целиком довольно трудоёмкое занятие, то винградовские разработчики сделали возможность пополнения теста сообществом. Т.е. это выглядит так:
Объявляется название теста (пример: Основы C++) и каждый может предложить вопрос и варианты ответов к нему. Затем модераторы могут допустить к тесту или же отклонить.
Конечно же возможен также вариант, когда один человек составляет полностью тест целиком.


1. Давайте определимся с темами для тестов. Предлагайте.
2. Кто-то хочет составить какой-нить тест целиком полностью? Если да, то напишите, какой тест хотите составить. Заодно вы также протестируете этот функционал.


P.S. По каждому тесту также ведется статистика(сколько баллов набрано, затраченное время, средний балл достигаемый в тесте и т.п.), а также есть таблица результатов со списком всех людей прошедших тест и набранного кол-ва баллов.

Первейший вопрос - какая мыслится технология проверки? назначать за это ответственного - по сути аналогия модераторства? Значит, надо быть заранее готовым объяснять, что проверка прохождения теста и получение оценки может занять некоторое, и иногда неслабое, время. 

Альтернативный вариант - пристегнуть среду автоматической проверки - предлагаю даже не рассматривать, весьма трудоёмко, бажно, и нужна своя среда для каждого аспекта или диалекта, а тупое сравнение ответа с эталонным, а равно как и угадайка - это вообще туфта.

Если же принять "ручную" проверку - то сразу надо разрабатывать и механизм апелляций. Не все вопросы тестов могут уложиться в варианты "чёрное-белое".

Ответы проверяются автоматически, задается вопрос и на выбор предлагаются варианты ответов, как одиночные, так и множественные.
Т.е. это не экзамен, а просто тест по типу multiple choice.

Далеко не всё может быть уложено в вариант угадайки... или это будут тесты ну самого начального уровня.

Конечно не всё, но такие тесты даже в университетах применяются на экзаменах. Так что даже довольно сложные темы можно в тесты уложить. В любом случае это единственный возможный вариант автоматического тестирования. Вручную понятное дело никто не будет проверять непонятно как "рукописные" на компьютере ответы.

Wowa, ну я просто прикидываю на одну из близких мне областей... SQL - на одной и той же исходной структуре один и тот же результат можно получить порой в принципе не похожими друг на друга запросами - бывает, не то что текст, вообще подходы различаются...

А ценность тестов с вопросами типа "Какой тип поля задаёт ключевое слово NCHAR" и ответами "целое-строковое-дата" мне кажется не выше чем нулевой...

А почему нельзя предложить на выбор 3 неправильных и один правильный ответ (не взирая на то, что теоретически другие правильные также существуют)?

По той простой причине, что тестирование очень быстро потеряет свой смысл и превратится в область для фаллометрии. Вместо реального тестирования своих знаний народ будет "набивать звёзды". А ведь именно этот момент

как я понимаю, является основным резоном за реализацию идеи...

Это самое сложное во всей этой задумке. Нужно придумать такие вопросы и варианты ответов на них, что бы нельзя было выехать тупо на логике. В предложенном тобой примере как раз подобное и происходит. Доже тот, кто не знает SQL, увидев char поймет, что правильный ответ - строковое. Придумать вопрос - пол дела. Вот подобрать не правильные ответы, которые не будут на столько очевидно не правильными - вот тут задачка. Даже в университетских тестах я процентов 20-30 ответов подбирал исключительно логическим путем. 

PS. Я все еще требую разработать сертификаты. 

не зная ответов на вопросы будет сложно "набить звезды". Ведь неизвестно какие N вопросов из базы вопросов теста будут заданы.

Добавлено через 2 минуты и 10 секунд

верно, поэтому составление тестов сделано веб-два-нульным. Придумать несколько вопросов многим под силу, а весь тест целиком уже очень трудоёмко.

Я - за. К примеру, можно брать вопросы из всякого рода сертификационных экзаменов (типа SCJP для java) - двойная польза: человек и награду на форуме получит и руку набьет для сдачи официального теста.

Могу выложить опросник на позицию программиста c#. 4 вопроса по назначению кода и его улучшению.

а у меня есть вопросы на SCJP.

Как вы думаете, нужно ли в тестах сразу сообщать человеку, что он неправильно ответил и показывать правильный ответ или же лишь в конце теста?

Если давать за это награды, имеет ли вообще смысл показывать ошибки?
Имеется в виду говорить правильный ответ.

Это сообщение отредактировал(а) Guinness - 30.5.2013, 14:07

Или регулировать это настройками. Или сделать прохождение в вариантах самоконтроль/тестирование, в первом показывать, во втором нет...
И - мне по итогам раздумий кажется, что идея звездить по результатам всё-таки порочна. Варианта "проверь себя и млей от счастья" вполне достаточно.

Имхо, есть варианты.
Если тест не ограничен по количеству запусков, а его главное назначение образовательное (а тогда зачем не ограничивать?), то можно правильные ответы писать как сразу, так и после. На мой взгляд, лучше писать после, так как не будет эмоций по поводу неправильного ответа в середине теста.
Если тест ограничен (например, не чаще раза в месяц, неделю или пол года), а его назначение - звезды опыта/знаний, то тогда ответ можно вообще не писать. Или, дать ссылки на литературу (книга, издание, глава, часть) по неверно данным ответам. Хотя, если не давать, то человек изучит все - а это вряд ли во вред пойдет.   

я думаю, что главное назначение должно быть образовательное. А наличие в профиле значков пройденных тестов стоит рассматривать как маленький бонус.

Тут фишка в чем, можно тест проходить 20 раз подряд пока не получишь максимальный набор "звезд". Когда у гуру и чайника будет по одному количеству "звезд", то их смысл будет нулевым.
Поэтому нужно определиться, или тесты для "звезд", или для образования.
Кстати, можно и тот, и тот вариант сделать. Только на звезды чтобы был очень сложным (например результат операции a[i++] = func(i), где func(i) этот i меняет, или результат операции i++++++++++++++i). А для образования попроще. Без серьезных выпендрюгов.

Чего тут сложного? Забил в IDE и получил ответ!  

На каждом тесте есть таблица рейтинга результатов, которая содержит "Номер попытки". Можно сделать, чтобы и в профиле на значках/рядом с ними или при наведении отображался номер попытки. Хотя наверное лучше просто со значка делать ссылку на тест или статистику теста.



Добавлено @ 17:33

Для теста выбираются N вопросов из базы теста, т.е. если в базу теста забить много вопросов, то при каждом прохождении можно выбирать N случайных.

Добавлено @ 17:36
После прохождения теста отображается результат вот так вот:

Wowa, не уверен, что многие будут изучать историю сдачи очередного "гуру"...

Даже если ограничить кол-во попыток, то человек может потренироваться на "левых" аккаунтах. Поэтому 100% защититься все равно нельзя. Единственный вариант, это проводить иногда региональные тесты в разных городах, чтобы люди отвечали в присутствии наблюдателя от Винграда.

Это уж серьезная заявка, она требует большей мотивации, чем простая звездочка на форуме. Человек должен собраться, выбрать вемя и прийти, что "просто так" захочет сделать далеко не каждый. Особенно проблемно будет это для жителей небольших городов, куда наблюдатели от форума не поедут. Если, к примеру, сходить на тот же SCJP и сдать его - это значит получить признанный сертификат, то надо подумать о том, зачем люди будут ходить на тестирование от винграда.

Что вы тут выдумываете? Нужно сделать как с тестами на водительское удостоверение. Разрешить сдавать раз в определенный период (неделю, декаду, месяц). Кто наконец-таки сдал - вешаем медаль в профиль со ссылкой на статистику сдач. 

 Не коем случаи)

Награды можно сделать в виде +бал к рейтингу + бал этот зависит например насколько хорошо человек прошел тест.

Например я прошел тест на 70% к моему рейтингу прибавляем 0.7 рейтинга если прошел следующий раз тест еще лучше например 100% то прибавляем к моему рейтингу 0.3 оставшихся, так как те балы я уже получил.

Вариант над сертификатом, только генерация PDF распечатать и на стеночку, отсылать каждому да еще и почтой России накладно)

Wowa, предложения такие:
Сделать тесты вообще анонимным. Человек при прохождении теста должен больше всего хотеть узнать свой уровень.
Не показывать правильные варианты. Во-первых, если тест сдан очень плохо, то значит надо учить много и всего, а не учить ответы теста. Во-вторых, после укрепления знаний можно пройти тест еще раз и оценить свои свершения в самосовершенствовании.

Чтобы среди участников общества был интерес к созданию новый, причем хороших и качественных тестов, ввести ненавязчивую систему оценки пройденного теста (оценка доступна только после прохождения, разумеется).
Например, оценить очевидность правильных ответом, сложность теста, формулировку и понятность вопросов...
Оценки выводить на общее обозрение. Можно будет, например, сформировать рейтинг по сложности и пользователи смогут выбрать для себя тест той или иной сложности, чтобы оценить свой профессионализм.

Проходить тесты за пряники — мертвая затея. Это просто погубит весь их смысл, да еще репутацию ресурса за собой захватит.

Это сообщение отредактировал(а) Arantir - 30.5.2013, 23:57

Тест должен быть по категориям, нельзя мешать всю базу вопросов в одну кучу и генерить случайным выбором.
Еще хотелось бы всетаки иметь возможность узнавать на какие именно вопросы даны неверные ответы (хотя бы в случае малеького процента неверных ответов) и
получение консультации по этому конкретному вопросу 

  Всё-таки не можем мы жить без двух линеек в сортире...

Согласен. Если 2 ошибки из 20 вопросов, то можно показать где они, что должно быть и почему. Это, кстати, поможет отлавливать ошибки в самих тестах.
Вот тут проблем уже нет - для этого форум и существует.

Предлагаю всем пройти Тест по истории IT и быть может дополнить его еще своими вопросами с вариантами ответов.

Я провалил тест, а при попытке добавит' вопрос огреб на всю катушку:
1. Транслита нет. Пришлос' все набират' в старом вингарде и копи-пастит'
2. Добавления ответов не нашел и написал прямо в вопросе. После сохранения возможност' добавит' ответы появилас', зато исчезла возможност' исправит' вопрос. С одним иz вопросов был не согласен, но пока воевал с добавлением своего - забыл s каким.

Mirkes, ты добавлял  в тест по Истории? Там два вопроса на премодерации было, я их допустил сейчас. Оформлены были они, как положено.

Да, мне удалос' их подчистит' после написания последнего сообщения.
А вот насчет оформлены как положено - неправда  в предпоследнем вопросе вместо мягкого знака - апостроф, так как транслит козлит. Если не сложно, исправ'те пожалуйста.

Подправил. Спасибо. Уже кстати удалось сообща во многих тестах выявить неточности и подправить вопросы с ответами.

А что, тестами уже никто не занимается? Практически во всех созданных тестах до 20 вопросов, исключение - только тест по истории IT, там аж 32 вопроса. Удивил тест по С++. На эти жалкие 7 вопросов все ответили на 100%! Гуру однако... Интересно, сохранится ли у них эта статистика, когда вопросов станет гораздо больше, и уже новозможно будет подобрать ответы методом тыка? Хотя, если учесть что там последний вопрос был добавлен где-то летом, такое вряд ли случится. Еще интересно, как это некоторые умудрялись пройти тест по java за  или ? 
Они что, месяц не выключали комп?
Короче, похоже из тестов получается пшик, и, если честно, мне становится в падлу туда еще что-то добавлять. Тем более, непонятна мотивация. Ну, набрал я на новом винграде 52 бала, и что?  

Это сообщение отредактировал(а) Pawl - 28.12.2013, 21:06

Народ нынче ленивый, мало кто добавляет. Но так по чуть-чуть и соберутся тесты.

Кроме тобой перечисленных, довольно неплохие тесты с многими вопросами еще:

Тест PHP для новичков
Тест знаний по Objective-C
Тестирование знаний по MongoDb

http://ru.vingrad.com/category-learning

Мне кажется народ всегда был и будет ленивый, а для совершения каких либо действий нужна конкретная цель.
Да и кстати, а новый дизайн скоро будет? )

ну да, там вопросов чуть больше 20 (кстати, по MongoDb - 19) 

Согласен! А еще лучше - конкретная мотивация!  

Надеюсь в течении ближайшего месяца. Сейчас это сугубо от дизайнера зависит.

Я так понял, этот функционал в системе тестов
так и не реализован?

запись была, а вывода не было. Сделал только что вывод. Пример: http://ru.vingrad.com/Test-Java-id5288b63c...2e20fba/control

Есть еще предложения?

Да, интересно! Про некоторые вопросы не думал, что такие сложные  Теперь, исходя из этих сведений, некоторым вопросам можно будет добавить балл к сложности.

Награждать орденами и медалями самых активных авторов тестов? 
И я правильно понял, что доступ к управлению тестами имеет любой зарегистрированный пользователь? Если так, то, может следует это дело как-то ограничить? Я имею ввиду следующее: захочет какой-нибудь нехороший человек пройти тест на 100%, залезет в его управление и выставит, к примеру, на все вопросы правильный ответ первый...

Это сообщение отредактировал(а) Pawl - 30.12.2013, 10:15

Редактировать можно только свои (то, что человек сам добавил - вопросы и ответы).
При добавлении всё на премодерации. Я смотрю регулярно и модерирую.



Механизм награждения уже сделан в новом движке. Не хватает самих орденов и медалей