Автодовршувањето беше влезната точка, а не крајната цел. Предлагањето на следниот ред код може да отстрани мали моменти на триење, но софтверското инженерство ретко е ограничено само од брзината на пишување. Потешката работа е разбирањето на системот, изборот на безбедна промена, проверката на претпоставките, координирањето на зависностите и достоинственото закрепнување кога реалноста не се согласува со планот.

Агентите со вештачка интелигенција стануваат вредни кога помагаат со тој поширок циклус. Кога се користат добро, тие не го заменуваат инженерското расудување. На инженерите им овозможуваат побрзо да соберат контекст, да извршат ограничена работа и да го одржуваат процесот на испорака во движење, без секоја задача да се претвори во рачно пребарување.

Размислувајте во работни текови, не во промптови

Најкорисното прашање не е: „Кој модел пишува најдобар код?“ Туку: „Кој повторлив работен тек има доволно структура за агент безбедно да помогне?“

Практичен агент е поврзан со дефиниран процес: прима контекст, презема дозволени дејства, ги проверува резултатите и известува што се случило. Тоа суштински го разликува од прозорец за разговор што создава веројатен исечок код без свест за складиштето, тестовите, правилата за распоредување или оперативните последици.

Добрите рани кандидати обично се повторливи, прегледливи и со низок ризик:

• Сумирање на проблем и лоцирање на релевантните модули.
• Подготовка на мало барање за повлекување со тестови за тесно специфицирана промена.
• Класифицирање на ажурирања на зависности и идентификување на веројатни грижи за компатибилност.
• Тријажа на неуспешни тестови со собирање дневници, неодамнешни промени и веројатни одговорни лица.
• Подготвување белешки за издание од споени промени за човечки преглед.

Овие работни текови создаваат корисни артефакти што човек може да ги прегледа. Тие имаат и јасна точка на запирање, што е суштинско. Агент кој знае кога да ја врати работата на човек обично е повреден од оној дизајниран да дејствува неограничено.

Дајте им на агентите тесен оперативен опсег

Автономијата треба да се заслужи со докази, а не да се доделува затоа што демонстрацијата изгледа импресивно. Почнете со дефинирање на оперативниот опсег на агентот: што може да чита, што може да менува, кои алатки смее да ги повика и кои дејства секогаш бараат одобрување.

На пример, на агент на кој му е доделено да поправи неуспешен тест на единица може да му биде дозволено да чита изворни датотеки, да уредува на посебна гранка, да го извршува пакетот тестови и да отвори нацрт-барање за повлекување. Не треба да му биде дозволено да спојува код, да ротира акредитиви, да менува продукциска конфигурација или да активира распоредување.

Оваа разлика не е бирократија. Таа е инженерска контрола. Колку е позначајно некое дејство, толку посилни треба да бидат патеката за проверка и одобрување.

Користете експлицитни услови за успех

„Поправи ја грешката“ е слаба инструкција. Подобра задача го наведува очекуваното однесување, засегнатата граница, релевантните ограничувања и начинот на кој ќе се провери успехот. Ако постоечки регресиски тест го покажува проблемот, тој тест често е најдобрата почетна точка.

За мала промена на API, корисна задача може да бара агентот да ја зачува наназадната компатибилност, да додаде или ажурира тестови, да го изврши фокусираниот пакет тестови и да објасни секоја претпоставка што не можел да ја потврди. Ова му дава на агентот конкретна цел, додека конечната одлука останува кај прегледувачот.

Контекстот е вистинската интеграциска работа

Моделите можат да расудуваат само врз основа на контекстот што го добиваат или преземаат. Во софтверските системи, расфрланиот контекст е нормален: архитектонските белешки се на едно место, конвенциите на друго, а вистинското однесување е кодирано низ изворниот код, тестовите, конфигурацијата и алатките за распоредување.

Сигурните интеграции на агенти го прават релевантниот контекст лесен за наоѓање и тежок за погрешно разбирање. Тоа не значи вчитување на целата база на знаење на организацијата во секое барање. Значи изложување на минималните доверливи информации потребни за задачата.

• Инструкции за складиштето што ги опишуваат конвенциите за градење, тестирање, форматирање и преглед.
• Архитектонски документи што ги објаснуваат главните граници и сопственоста.
• Шаблони за проблеми што бараат критериуми за прифаќање и детали за репродукција.
• Пристап само за читање до дневници или контролни табли при истражување инцидент.
• Интерфејси на алатки со ограничени влезови наместо широк пристап до школка или администрација.

Кога контекстот е нецелосен, агентот треба да го каже тоа. Самоуверен одговор заснован на информации што недостигаат не е знак на автономија; тоа е сигнал за ризик. Градете работни текови што наградуваат пријавување неизвесност, барања за појаснување и концизни објаснувања за тоа што било потврдено.

Направете ја проверката дел од работата на агентот

Генерираниот код треба да се третира како секој друг код: му се потребни тестови, преглед и оперативни проверки соодветни на промената. Разликата е во тоа што агентот може да изврши голем дел од рутинската проверка пред човек да потроши време читајќи ја разликата.

Корисен циклус е едноставен:

1. Прегледајте ги задачата, релевантниот код и постоечките тестови.
2. Предложете или направете ја најмалата одржлива промена.
3. Извршете фокусирани проверки, а потоа пошироки проверки кога тоа е оправдано.
4. Сумирајте ги разликата, резултатите, ограничувањата и преостанатите ризици.
5. Предајте ја работата на човечки прегледувач или на одобрен последователен работен тек.

Извештајот на агентот е важен исто колку и неговата закрпа. Прегледувачот треба брзо да види што се променило, кои тестови поминале, кои проверки биле недостапни и зошто имплементацијата избрала еден пристап наместо друг. Тој извештај претвора непрозрачен чекор на автоматизација во инженерски придонес што може да се ревидира.

Мерете го влијанието таму каде што навистина се случува работата

Броењето генерирани редови код е лоша мерка за вредност. Повеќе код може да значи повеќе одржување, повеќе напор за преглед и повеќе начини на откажување. Подобрите мерки го одразуваат работниот тек што се подобрува.

За агент за тријажа на тестови, мерете го времето до идентификување веројатна причина, стапката на корисни предавања и колку често неговата дијагноза опстојува по прегледот. За агент за документација, разгледајте ги свежината, точноста и намалувањето на повторливите прашања за поддршка. За агент за промени во кодот, гледајте го времето на обработка на прегледите, стапката на преработка, избеганите дефекти и дали инженерите ќе изберат повторно да го користат.

Квалитативните повратни информации се исто така важни. Инженерите брзо ќе утврдат дали агентот ја отстранува здодевната работа или само создава нов ред излезни резултати за преглед. Усвојувањето треба да биде доброволно на почетокот, бидејќи присилната употреба може да скрие лош дизајн на работниот тек зад усогласеност.

Зачувајте ја човечката сопственост

Агентите со вештачка интелигенција можат да го забрзаат извршувањето, но не ги поседуваат последиците од дизајнерска одлука, безбедносен исклучок или прекин во продукција. Тимовите ги поседуваат. Најтрајниот оперативен модел ги задржува луѓето одговорни за целите, компромисите, одобрувањата и отчетноста.

Тоа го менува начинот на кој тимовите треба да ги обучуваат луѓето. Клучната вештина не е пишување сè попаметни промптови. Таа е учење прецизно да се дефинира работата, да се оценуваат докази, да се препознава неизвесност и да се дизајнираат заштитни мерки околу автоматизацијата. Тоа веќе се основни вештини на искусните инженери; агентите едноставно го прават нивното отсуство повидливо.

Трајната предност се подобри инженерски системи

Трајното влијание на агентите со вештачка интелигенција нема да дојде од барањето од нив да имитираат програмери на тастатура. Ќе дојде од нивно интегрирање во добро дизајнирани инженерски системи: јасни задачи, доверлив контекст, ограничени дозволи, автоматизирана проверка и човечки преглед на значајни точки на одлучување.

Автодовршувањето им помага на луѓето да пишуваат побрзо. Промислените агенти им помагаат на тимовите да учат побрзо, да потврдуваат порано и да посветуваат повеќе внимание на одлуките што навистина го обликуваат производот. Тоа е можноста што вреди да се следи: не помалку инженерство, туку инженерство со помалку избегливо триење и попромислено расудување.