Data ostatniej aktualizacji:
Thibaud Gloaguen, Niels Mündler, Mark Müller, Veselin Raychev, Martin Vechev
Zapytaj o ten dokument AI
Kopuj link
Abstrakt
Kluczowe wnioski
Strategie z raportu:
Mierzenie rzeczywistego wpływu kontekstu: Zamiast zakładać, że dodatkowe pliki typu AGENTS.md zawsze pomagają AI, należy mierzyć ich wpływ na konkretne zadania. Badania wykazały, że dodawanie obszernego, generowanego kontekstu często wręcz obniża wskaźnik sukcesu rozwiązywania problemów o kilka procent.
Objaśnienie lub prompt
Uruchom testy A/B dla swojego agenta programistycznego. Zleć mu naprawę 5 błędów z wykorzystaniem pliku AGENTS.md i 5 bez niego, a następnie obiektywnie porównaj, w którym przypadku wskaźnik sukcesu był wyższy.
Skupienie się na interwencji chirurgicznej (Surgical Intervention): Pliki kontekstowe powinny rozwiązywać tylko te niejednoznaczności, z którymi kod i wbudowane narzędzia agenta nie radzą sobie samodzielnie. Raport nakazuje traktowanie tych plików jako zbiór "drogich prawd", a nie uniwersalną dokumentację.
Objaśnienie lub prompt
Analizowanie, czy podczas pisania bardzo uprzejmego maila dla użytkownika, sztuczna inteligencja nie aktywuje w ukryciu pojęć takich jak "manipulacja" albo "oszustwo".
Szukanie "przestrzeni roboczej" (Global Workspace): Wyodrębnienie faktu, że AI posiada specjalne miejsce w swoim wirtualnym mózgu, gdzie przechowuje tymczasowe, ważne informacje potrzebne do rozwiązania problemu, oddzielając je od zwykłego składania zdań.
Objaśnienie lub prompt
Kiedy prosisz AI o ułożenie planu wycieczki, system w swoim wirtualnym "brudnopisie" trzyma informacje o budżecie, żeby o nim nagle nie zapomnieć w połowie pisania odpowiedzi.
Publikacje AI
Prompting
Bezpieczeństwo AI
O mnie
Mój blog
Wsparcie projektu
Buy me a coffe
Create by Mateusz Jędraszczyk