Észlelheti a HackerRank a Cluely-t?
Szerző: Aaron Cao · Frissítve
Részben. A HackerRank a böngészőben fut, és egy weboldal nem látja közvetlenül a különálló asztali alkalmazást, mint a Cluely. A felügyeleti funkciók igen: a webkamera-figyelés, a képernyőrögzítés és a fókuszkövetés valódi expozíciós utakat teremt. A felügyelt értékelések kívül esnek az élő asszisztensek hatókörén, beleértve a SubcueAI-t is.
Mit láthat és mit nem láthat a HackerRank
A HackerRank értékelések weboldalként futnak, és a weboldalak a böngésző homokozójában élnek. Egy oldal megfigyelheti a saját lapját: van-e fókusza, a böngésző teljes képernyőn van-e, a beillesztési események a szerkesztőjébe, és az időbeli mintázatok a kód megjelenési módjában. A jelölt engedélyével a webkamerát is használhatja, és felügyelt konfigurációkban rögzítheti a képernyőt.
Amit egy weboldal nem tud megtenni, az a gépen lévő többi szoftver felsorolása. Nem tudja listázni a futó folyamatokat, nem olvashat más ablakokat, és nem láthat egy asztali átfedést, amely a böngészőn kívül renderel. Ez a határ böngészőbiztonság, és minden értékelési platformra vonatkozik, nem csak a HackerRankre.
A kérdés tehát két részre osztódik. Felügyelet nélkül a HackerRanknek nincs közvetlen módja egy asztali alkalmazás, mint a Cluely, megtekintésére. A felügyelet bekapcsolásával a kép megváltozik, és a következő szakasz pontosan elmagyarázza hol.
Ahol az asztali átfedés találkozik a felügyelettel
Fontos időzített tesztet tölt ki, tudja, hogy léteznek átfedési eszközök, és tudni szeretné, mit figyel meg valójában az értékelés. Ez egy jogos kérdés, és ez a szakasz konkrétan válaszol rá. A rövid változat: maga az átfedés az oldalon kívül van, de a felügyelet az embert és a képernyőt figyeli, nem a folyamatlistát.
- Képernyőrögzítés. Ha a felügyelt mód rögzít vagy megoszt egy képernyőt, az azon a képernyőn megjelenített minden a felvételben van, beleértve az átfedést is.
- Webkamera-figyelés. Egy átfedés olvasása tekintetetváltásokat és hosszú kameráról eltérő pillantásokat produkál, amelyeket a bírálók és az automatizált ellenőrzések keresnek.
- Fókusz- és teljes képernyő-követés. Az ablakváltás vagy a teljes képernyőből való kilépés pontosan az a jel, amelynek rögzítésére ezek a módok léteznek.
- Kódhasonlóság. A beillesztett, AI által formált megoldásokat a plágium- és hasonlósági ellenőrzések utólag jelölhetik meg, mindenféle élő felügyelet nélkül.
Egy felügyelt HackerRank tesztre meghívott háttérrendszer-mérnök elolvassa az értékelési e-mailt, látja a webkamerát és a képernyőrögzítést felsorolva, és AI-használatát a teszt előtti gyakorlónapokra helyezi át. Az értékelés jól sikerül, mert a próbaismétlések elvégezték azt a munkát, amelyet az átfedés úgy tett volna, mintha csinálna.
A szabályok rétege: felügyelt azt jelenti, hatókörön kívül
Az észlelési mechanizmusok csak a válasz fele; a másik fele a politika. A felügyelt értékelés integritási feltételekkel jár, és egy élő válaszeszköz benne való futtatása megsérti ezeket a feltételeket, függetlenül attól, hogy az adott pillanatban észrevesz-e bármi. A megjelölt eredményeket érvényteleníteni lehet, és ajánlatokat vontak vissza az értékelési integritás miatt.
Ez az a hely is, ahol érdemes megfogalmazni a SubcueAI saját álláspontját, mert ez ugyanaz az álláspont, amelyet mindenhol közzéteszünk: a felügyelt és rögzített értékelések kívül esnek az élő segítségnyújtás hatókörén, beleértve a SubcueAI-t is. Ez nem marketingfedezet; ez egy architektonikus őszinteségi vonal. Egyetlen átfedési eszköz sem, amit szállítója állít, láthatatlan egy rögzített képernyőn, webkamerán vagy eltökélt bírálón.
Az érzékelhetőségi klaszter ugyanezt a forgatókönyv szerinti őszinteséget alkalmazza a képernyőmegosztásra, a találkozó platformokra és a vállalat által kezelt eszközökre.
Mit tegyünk helyette: helyezzük az AI-t oda, ahol megengedett
Az AI legitim helye egy HackerRank folyamatban az, mielőtt az időzítő elindul. Egy AI-interjúztatóval reális kódolási kérdéseken való gyakorlás azt az emlékezetet építi, amelyet egy felügyelt teszt ténylegesen tesztel, és a saját próbáidon nincs beleegyezési vagy integritási kérdés.
Egy konkrét hurok, amely működik: futtasson egy időzített próbainterjút a tesztet lefedő kérdéscsaládon, nézze meg, hol akadt meg a megoldása, és ismételje meg, amíg a minta unalmassá nem válik. A SubcueAI próbamódja szerepspecifikus kérdéseket és munkamenet utáni áttekintést generál, ami az oldal tanácsának gyakorlati fele, automatizálva.
Az élő emberi interjúkhoz a számítás más, mint a felügyelt teszteknél: azok inkább beszélgetések, semmint figyelt tesztek, és a jelölt oldali asszisztensek ott működnek az ebben a könyvtárban dokumentált őszinte határokon belül. Hogy hol van a határ az egyes forgatókönyveknél, pontosan azt térképezik fel az érzékelhetőségi oldalak.