Pytania dotyczące inżynierii promptów
Pytania z zakresu inżynierii prompt oceniają umiejętność kandydata do pisania ustrukturyzowanych instrukcji, które prowadzą systemy AI do generowania dokładnych i niezawodnych wyników.
Aby używać pytań z zakresu inżynierii prompt, wybierz je z Biblioteka HackerRank przy tworzeniu testu lub rozmowy kwalifikacyjnej.
Ocena pytań inżynierii prompt
Pytania z zakresu inżynierii prompt są oceniane automatycznie przy użyciu wstępnie skonfigurowanych przypadków testowych. Każdy przypadek porównuje wynik modelu z oczekiwanym wynikiem przy użyciu dokładnego dopasowania tekstu.
Logika punktacji
Gdy kandydaci klikną Uruchom prompt, system używa ścisłego modelu oceniania Zaliczony lub Niezaliczony opartego na porównaniu tekstu. System ocenia odpowiedź względem zestawu wstępnie skonfigurowanych przypadków testowych.
Dla każdego przypadku testowego:
System porównuje wynik modelu z oczekiwanym wynikiem.
Porównanie wymaga dokładnego dopasowania, włączając znaki, wielkość liter, interpunkcję, akcenty, odstępy i kolejność słów.
Jakiekolwiek odchylenie, takie jak dodatkowe słowa, wyjaśnienia, bloki kodu lub formatowanie, skutkuje Niepowodzeniem.
Niedeterministyczne prompty mogą produkować niespójne wyniki, co również skutkuje niepowodzeniem.
Wynik dla każdego przypadku to albo Sukces albo Niepowodzenie.
Na przykład:Oczekiwane:
MerciWynik:
Merci!Rezultat: Niepowodzenie (dodatkowa interpunkcja)
System oblicza wynik końcowy jako:
Wynik końcowy = Waga na przypadek testowy × Status przypadku testowego
Wskazówki:
Uczyń wyniki deterministycznymi i zablokowanymi formatem.
Zwróć tylko żądany wynik.
Odwzoruj dokładnie wielkość liter, interpunkcję, akcenty, odstępy i kolejność.
Najczęściej zadawane pytania
Czy przypadek testowy może otrzymać częściowe punkty?
Nie. System ocenia każdy przypadek testowy jako Zaliczony lub Niezaliczony. Nie przyznaje częściowych punktów.
Czy spacje i nowe linie wpływają na ocenianie?
Tak. Odstępy i łamanie linii muszą dokładnie odpowiadać oczekiwanemu wynikowi, chyba że określono inaczej.
