オンライン試験の監督：どのように機能しますか？

ステピックは現在、誰でも試験監督（オンラインサポートと学生管理）を行うことで試験を作成できるロシア語の教育オンラインプラットフォームです。 さらに、そのような試験には、所定の期間、合格の制限時間、正確な開始日を設定できます。



この記事では、プロクターが必要な理由について説明し、ProctorEduオンラインプロクターシステムとStepikプラットフォームの統合について詳しく説明します。











オンライン試験監督とは何か、オンライン試験を実施するプロセスを実施することで得られるメリットを知っている場合は、以下の説明部分をスキップして、 Stepik試験とは何ですか？

エントリー

ITからHRまで、ほぼすべての知識分野が、トレーニング資料やテストタスクをオンライン形式に翻訳するのに適しています。 たとえば、社内の新入社員をオンラインでトレーニングしたり、自動コード検証を実行したり、データベースの操作方法を教えることができます。これらすべては、教師や学生がローカルコンピューターにインフラストラクチャを展開する必要なく、教育プラットフォームで直接実行できます。 この場合、取得した知識を検証する問題は解決されます。 学生がオンラインコースを受講したのと同じオンライン形式でコースの最終試験を実施できます。 証明書を取得したい人を勤務時間中にテストセンターに行くように強制する必要はありません。快適な椅子に座って、使い慣れた同じインターフェイスでオンライン試験を受験する機会を提供できると、新しい不慣れな環境のために緊張します。



IT業界について考えてみましょう。たとえば、Microsoft Certification Authorityでは、リモートで認定試験に合格することができます。Hortonworks は、独自のプラットフォームを管理するための証明書の受領を整理し、リモート仮想マシンへのアクセスと実行する必要があるタスクのリストを提供します。



それでも、受験者の不便にもかかわらず、IT業界の証明書のコストは非常に高く、合格者の身元を確認し、合格プロセスを厳密に制御する必要がある試験目的の物理的な部屋の設備は、費用対効果が高い場合があります。 しかし、いくつかの地域で事業を展開する急成長企業が従業員の知識を大規模に訓練およびテストし、この情報に基づいて財務およびHRの意思決定を行う必要がある状況を見ると、試験における従業員の物理的存在を整理するプロセスは非常に高価で組織的になる可能性がありますスケーリングが難しい。

監督者はどのようにして全員を救うことができますか？

TaxibusがUberの新しい競争相手として浮上したことを想像してみてください。Uberはドライバーの礼儀正しく高度なプロ意識を重要な利点と呼んでいます。 これを行うには、タクシーバスで作業するドライバーは、効果的なコミュニケーションのルールに従って、交通ルールの理論と試験に四半期ごとに合格する必要があります。 試験に合格した場合、ドライバーは優遇料金を受け取ります。これにより、運輸会社に各旅行の費用の7％ではなく5％を与えることができます。 国内の15都市の約7000人のドライバーはすでにタクシーバスに接続しており、施設を借りたり、試験プロセスを監督する監督官に給与を支払ったりしないように、同社はいつでもドライバーが利用できるオンライン試験を開発しました。パーソナルコンピューターまたはモバイルデバイス。 ただし、試験の準備を望まないドライバーもいますが、会社から追加のボーナスを受け取る機会に魅力を感じています。 そのため、試験に合格した友達に代わりに試験に合格するように依頼します。



引渡し人の身元を明確に確認し、外部の助けを借りずに試験に正直に合格したという自信を得るために、トレーニングオーガナイザーはトレーニングプラットフォームで試験にオンライン試験監督システムを接続できます。 このようなシステムの主なタスクは、実際の試験官が試験を引き渡す場合に行うように、ウェブカメラ、マイク、およびユーザーのデスクトップにアクセスして、自動モードまたは半自動モード（以下で説明します）で試験規則への準拠を確認することです このようなシステムがどのように機能するかについては、 こちらをご覧ください 。



IT分野のオンライン試験に合格する場合、同じシステムを使用できます。 監督システムは、それ自体が非常に複雑です。 いくつかのビデオストリームの操作、ビデオおよびオーディオ情報用のストレージシステムの編成、顔および音声認識技術、試験および試験官の合格プロセスを制御するためのプロクターインターフェイスの開発が必要です。 そのため、Stepikはオンラインの監督技術の開発を開始せず、既存のソリューションを使用しています。 この投稿では、ProctorEduオンライン試験監督システムをプラットフォームと統合する方法、およびコースセッションの教師がStepikのコースで試験の試験の信頼性を高めるために試験で試験監督を設定する方法に関する技術的な詳細をお伝えします。

Stepik試験とは ？

Stepikでは、レッスンはモジュールまたは学校の週にまとめられます。 設定で「試験」モジュールタイプを選択し、試験期間を設定することにより、任意のモジュールを試験に変えることができます。 生徒は、「試験を開始」ボタンをクリックして、教師がコースを設定する期間内に試験に合格できるようになります。 試験の継続中、学生にはカウントダウンタイマーが表示されます。 試験を完了すると、学生は試験でポイントを獲得できなくなります。



ユーザーが試験を開始すると、データベースに試験セッションレコードが作成され、そこで試験日が開始されます。 Exam_duration_minutes試験の開始日と期間がわかっているため、残りの時間がユーザーにインターフェイスに表示されます。 ユーザーは、試験の終了前に何とかして正しい決定を下したポイントのみを受け取ります。

監督者と技術的にどのように統合されていますか？

オンライン試験監督による試験を受ける機会の実現は、試験セッション記録の作成の可能性に追加の制限を課しました-ユーザーは、アクセス可能な試験監督セッションにサインアップし、試験監督の許可を受けた場合にのみ試験を開始できる必要があります。 この場合、試験官は、違反の場合に試験へのアクセスを時期尚早に閉鎖でき、試験中に違反の有無を評価できる必要があります。これは最終評価に影響する可能性があります。 これを行うために、別のプロクターセッションモデルをStepikに追加しました。これは、試験モジュールに関連付けられ、プロクターセッションが実行されている場合にのみ試験セッションを作成できます（start_dateが設定されています）。



監督システムは、次のコマンドを使用して、APIを介して監督セッションを制御できるようになります。

• 開始-セッションを開始します（start_dateを設定）;
• 停止-ユーザーはProctorEduインターフェースを介して試験を途中で完了できます。
• 送信-プロクターと結論によるセッションの完了（スコアフィールド、0〜1の数値が格納されます（境界が「承認されていない」/「承認された」スケール）。
  
  

監督者は、フェッチングメソッドを使用してユーザー試験のリストを取得し、監督者セッションに記録するときにそれらをインターフェイスに表示することもできます。



前述のように、学生の場合、試験監督試験と通常試験の違いは、試験を管理する試験監督に空き時間枠がある場合は、事前に試験監督の予約をする必要があることです。 Stepikのインターフェイスでは、これは試験ページで解決されます-ユーザーは、監督セッションにサインアップし、記録のために、ユーザーはProctorEduリンクをクリックします（この時点で、このユーザーのproctor-sessionが作成されます）。試験に利用できます。



学生は、プロクターセッションが実行されている場合（プロクターが開始コマンドを実行した場合）にのみ、試験を開始（つまり、試験セッションを作成）できます。 学生の試験に合格すると、アクティブなボタン「試験の開始」が表示され、試験の合格を開始できます。



ユーザーの監督者セッションを管理するために、監督者（特別な役割「監督者」を割り当てる）がサーバーアプリケーションをOAuth2プロトコルに登録します。 このアプリケーションは、上記で説明したチームを使用して、Stepikプラットフォームで学生の監督セッションを管理できます。

Stepikで監督試験を作成する方法は？

試験監督官による試験を実施することを決定した教師または組織の場合、以下を行う必要があります。

1. コースを作成します。
2. その中に試験モジュールを作成し、試験タスクのレッスンでそれを埋めます。
3. 試験の開始日と終了日、試験セッションの期間を設定します。
4. コースのプロクターモードを有効にし、プロクタープロバイダーのドメインへのリンクを設定します。これにより、プロクターサービスのさまざまな顧客向けにブランドドメインを作成できます（インターフェイスではまだ利用できず、プラットフォーム管理者の要求に応じて行われます ）。

監督サービスを使用するには、私たちが言ったことで十分です。 教師の場合、すべての設定はそこで終わります。 次に、Stepikと対話するときにProctorEduシステムの内部で何が起こるかをより詳細に説明します。 多くの興味深い技術的ポイントもあります。

ProctorEduとStepikの統合：監督システムからの眺め

自動監督システムProctorEduは、クラウドベースのSaaSソリューション（サービスとしてのソフトウェア）であり、これにより、監督手続きに関する試験を整理および実施できます。 セッションは記録され、違反がないか分析された後、レポートが生成されます。

ProctorEduは、教育機関がプロクターワークスペースを整理するためのインターフェイスを提供しますが、独自のプロクターを提供することもできます。

一般的な場合のProctorEduとLMSの統合はどうですか？

eラーニングシステム（LMS）とのより完全な相互作用および一部の機能を自動化するために、ProctorEduはAPIおよびUIレベルでの統合を含む他のシステムとの統合メカニズムを提供します。 ProctorEduシステムは、2つの統合オプションをサポートしています。

• LMSをProctorEduシステムに接続します。
• LMSに監督機能を追加します。

LMSをProctorEduシステムに接続するには、LMS側で多数のAPI関数を実装し、OAuth2プロトコルを使用する外部認証プロバイダーを介してシステムへのエントリポイントを設定する必要があります。 この場合、学生は試験監督システムを介して試験に合格し、試験監督システムは試験監督者の監督下で試験または他のタイプのタスクに合格するためのLMSインターフェイスへのアクセスを既に許可します。

別のオプションでは、インターフェイスレベルでシームレスに統合することにより、LMS自体に監督機能を追加できます。 これを行うために、スーパーバイザーSDK開発キットを使用できます。これにより、LMSの試験ページから直接監督機能を使用し、特別なJavaScriptライブラリをLMSに接続して、対応するライブラリ関数の呼び出しを構成できます。 これは非常に簡単で、サイトページにオンラインコンサルタントのコードを配置するのに匹敵する複雑さです。

ProctorEduとStepikの統合

ProctorEduシステムへのStepik接続スキーム



Stepikプラットフォームとの統合には、上記の最初のオプションが現在使用されています：LMSとProctorEduシステム間のデータ交換プロトコルをJSON形式で柔軟に構成できるように構築された特別なAPIが開発されました。



ProctorEduシステムとの相互作用のシナリオを次の図に示し、次のように説明できます。

1. 学生は、OAuth2プロトコルを使用して、Stepikプラットフォームを介してProctorEduシステムにログインします。 認証ページには、Stepikから入力するボタンがあります。 このボタンをクリックすると、Stepikプラットフォーム上の現在のユーザーのプロファイルへのアクセスが要求されます。 アクセスを許可すると、システムはユーザー名とパスワードを入力せずに自動的にログインします。
2. 学生はProctorEduインターフェースに入り、プロフィールに記入します。 特定の教育機関の要件によっては、プロファイルの記入は必要な手順ではありません。 人物のプロフィール写真が撮影され、テキストフィールドに入力され、必要に応じて追加のドキュメントが読み込まれます。 ユーザーのプロファイルからの写真は、各試験で生徒の身元を識別するために使用されます。 プロフィール写真を撮っていない場合は、最初の試験の開始時に写真が保存され、将来的に生徒の性格を識別するために使用されます。
3. その後、学生はすぐに試験を開始するか、試験の時間を選択し、選択した時間に試験を開始する必要があります。 試験計画はオプション機能であり、試験監督者がオンラインで利用できるかどうかに依存します。 試験に合格するためのシナリオでオンラインオブザーバーが必要な場合は、スケジュールを使用するのが理にかなっています。 この場合、監督者は作業のスケジュールを作成し、学生はこのスケジュールに基づいて試験を計画します。 監督者ごとの同時試験の数には制限があり、通常は9を超えないことに注意してください。

（写真はクリック可能です）





ProctorEduの相互作用シナリオ



各試験（セッション）を開始する前に、接続とコンピューターの設定が最小技術要件を満たしているかどうか自動的にチェックされます：動作するウェブカメラとマイク、少なくとも1 Mbpsのネットワーク帯域幅、1000ミリ秒以下のネットワーク応答時間、WebRTCトラフィックが許可され、設定されますブラウザ拡張（オプション）。



これらの要件が満たされるまで、試験は開始されません。 試験中は、生徒のウェブカメラ、デスクトップ、セカンダリカメラがブロードキャストおよび記録され、自動違反が追跡されます。 各セッションの開始時に、生徒の顔の写真が自動的に撮影され、この写真は人格識別手順を経て、セッション内の人物とプロフィール写真の類似度が決定されます。

試験全体を通して、コンピュータでの個人の身元の継続的な検証が実行されます。これは、顔の自動検出および認識の方法とキーボード手書きの分析方法に基づいています。 プロクターは、自分に割り当てられた生徒を観察し、彼らの放送を見て、記録された違反の通知を見ることができます。 必要に応じて、監督者はビデオまたはチャットで生徒に連絡できます。 また、試験監督はいつでも試験を中断して、セッションのコメントに理由を示すことができます。

試験が完了した後、試験結果の信頼度をパーセントで評価し、すべてのブロードキャストのビデオ、通信の履歴、記録された違反の詳細を記録したインタラクティブなプロトコルを生成します。





ProctorEduシステムを介して実施される、Stepik試験に合格した場合の学生のインターフェース



Stepikとのやり取りは、ProctorEduシステムのインターフェースから学生によって行われます。この場合、試験ページはセッションで指定されたアドレスのIFRAMEを介してロードされます。 学生がProctorEduシステムにログインすると、Stepikから試験がインポートされます。



Stepikプラットフォームと対話するために、ProctorEduシステムには次の機能が含まれています。

• Stepikから試験のリストを取得します。
• ユーザーがProctorEduシステムにログインするとすぐに、Stepikプラットフォームで試験に合格するために利用可能な試験のリストが表示されます。 これらの試験を受験します。コースとStepikモジュールの設定で設定された特定の時間に既にスケジュールされているか、学生自身が試験官のスケジュールを考慮して都合の良い時間にサインアップできます;
• 監督セッションの開始の通知。
• 試験が来ると、学生は適切なセッションに接続します。 この時点で、APIはStepikにリクエストを送信し、この試験へのアクセスが開始されます。 したがって、試験監督システムなしでは試験を開始できません。
• 監督セッションの終了の通知。
• 試験に合格すると、生徒は試験監督セッションを終了します。 この時点で、APIはStepikにリクエストを送信して試験を完了し、試験を終了します。
• セッションレポートをStepikに送信します。
• セッションプロトコルを確認した後、プロクターはセッションの結論を自動または手動で設定します。 この結果はStepikに渡され、試験の横に表示されます。 結論が否定的な場合、試験結果はカウントされません。

おわりに

記事の最後に、試験の長所と短所をオンラインの監督者に説明します。



長所：

• 試験のためにコンピュータークラスを編成し、試験プロセスに従う必要のある人を見つけてトレーニングするための費用と時間を節約します。自動試験監督は、実績のあるスケーラブルで構成が容易なツールです。 タスクを含むコースを作成し、そのための監督をオンにするだけです。 受験者の数は1000人または1万人です。
• 合格のしやすさ-試験官は、試験に合格するのに都合のよい時間を選択できます。試験監督は、勤務時間中だけでなく利用できます。
• 高い試験結果をもたらす快適な環境で自宅から試験を受けることができます。
• 機器の最低コスト：誰もがコンピューター、ウェブカメラ、マイクを持っているか、非常に安価です。
• 成功したテスト結果に地元の主催者の関心を持つ問題の欠如。 試験では、教師が生徒を助けることがよくあります。なぜなら、 教師は生徒の結果に対して罰せられるか報酬を与えられます。 カメラが設置されているクラスでさえ、教師が生徒に声を出して聞くことに同意する場合があります。 そして、音がない場合、このタイプの不正行為は検出が困難です。
• 迅速な結果：非同期の監督機能により、すでに手動で表示できる疑わしいセッションのみを除外し、試験が正直に合格したことを確認できます。

短所：

• かなり高速で安定したインターネットチャネルの存在（ネットワーク接続速度1 Mbps）。
• 問題の漏洩の問題-クリックして回答を覚えてから友人に渡す「パイオニア」を送ります（ステップのバリエーション、集中的な質問の流れ、覚えにくい回答を作成することにより、試験官によって解決されます）。

Stepikの試験監督または本格的なオンラインコースで試験を行うことに興味がある場合は、メールでお問い合わせください 。



監督の結果は十分に信頼できると思いますか？ オンライン試験を実施するタスクがある場合、監督機能を使用しますか？