Agentes de codificação podem ser avaliados. Só precisamos avaliar o trabalho. - The New Stack

- O The New Stack explora uma mudança na avaliação de agentes de codificação de IA não determinísticos, argumentando que eles devem ser graduados por sua entrega real, em vez de serem avaliados como chatbots conversacionais.
- A metodologia proposta utiliza contratos executáveis e cartões de pontuação detalhados para medir o sucesso funcional do código produzido por esses agentes.
- Essa abordagem é importante porque os benchmarks tradicionais de LLM frequentemente falham em capturar se um agente consegue realmente resolver uma tarefa complexa de engenharia de software em um ambiente do mundo real.
- Ao focar na execução do trabalho, os desenvolvedores podem mensurar com maior precisão o desempenho dos agentes e aprimorar a confiabilidade do desenvolvimento de software impulsionado por IA.
Fontes e Citações
1 fonteMais Matérias
Resumo AP News às 2h17 EDT | Notícias Nacionais
• Um comandante de drones ucraniano informou à AP que os ataques à Crimeia poderiam aumentar sete vezes se o financiamento ocidental fosse entregue mais rapidamente. • No Reino Unido, o candidato cômico Count Binface, conhecido por usar uma lata de lixo na cabeça, está concorrendo a uma vaga no Parlamento.
Ler original · militarynews.com'Não tive a intenção de atirar': Ex-deputado tailandês mata funcionário local após disputa financeira - RTL Today
• Um ex-membro do Parlamento da Tailândia atirou e matou um funcionário do governo local na segunda-feira durante uma disputa financeira na província de Nonthaburi. • O ataque ocorreu à luz do dia do lado fora de um prédio governamental; o suspeito foi posteriormente preso e confessou o crime a jornalistas na delegacia de polícia.
Ler original · today.rtl.luTiroteio em escritório governamental na Tailândia é anunciado durante live no YouTube - Newsweek
• Chalong Reawraeng, membro da Câmara dos Representantes da Tailândia, teria baleado o ex-policial Thongchai Yenprasert e seu motorista em um escritório governamental na província de Nonthaburi nesta segunda-feira. • Relatos da mídia local confirmam que Thongchai morreu devido aos ferimentos, enquanto o chefe da polícia provincial, Major General Dejrapee Kongdee, confirmou que o suspeito foi detido.
Ler original · newsweek.com
NewsweekÚltimas notícias sobre tiroteio na Tailândia: ex-parlamentar ataca autoridade antes de admitir ter aberto fogo
• Um ex-membro do Parlamento na Tailândia abriu fogo contra um alto funcionário provincial e seu motorista, deixando ambas as vítimas gravemente feridas. • O autor admitiu o tiroteio, embora a motivação específica do ataque ainda não tenha sido detalhada.
Ler original · independent.co.ukChalong Riewrang: Ex-parlamentar tailandês supostamente mata funcionário e confessa no YouTube - BBC News
• O ex-parlamentar tailandês Chalong Riewrang supostamente baleou e matou um funcionário do governo. • Após o incidente, Riewrang utilizou uma transmissão ao vivo no YouTube para confessar publicamente o assassinato.
Ler original · bbc.co.uk
BBCEx-deputado tailandês mata funcionário local após disputa financeira
• O ex-deputado tailandês Chalong Riewrang baleou e matou o funcionário do governo local Thongchai Yenprasert em Nonthaburi. • O tiroteio fatal teria sido desencadeado por uma disputa financeira entre os dois homens.
Ler original · thesun.my
The SunAtirador mata ex-coronel enquanto Tailândia se recupera de segundo tiroteio em três dias - ABC News
• Um atirador, identificado como ex-membro do parlamento, foi preso após matar um ex-coronel e ferir um motorista em um escritório governamental perto de Bangkok. • Este incidente marca o segundo tiroteio na Tailândia em três dias, despertando preocupação generalizada sobre a segurança pública e a violência.
Ler original · abc.net.auEx-deputado tailandês é acusado de atirar em funcionário local e motorista: Polícia - CNA
• O ex-deputado tailandês Chalong Riewrang foi preso pela polícia de Nonthaburi após supostamente atirar em um funcionário local e em um motorista. • O incidente ocorreu na província de Nonthaburi, localizada ao norte de Bangkok, e foi confirmado pelo chefe de polícia Dejrapee Kongdee.
Ler original · channelnewsasia.com
CNAMinistro do Interior Amit Shah responderá ao debate após governo Modi concordar em discutir ação policial de 20 de julho
• O governo Modi concordou com um debate parlamentar abrangente sobre a ação policial tomada contra estudantes manifestantes em 20 de julho. • O Ministro do Interior, Amit Shah, deve apresentar a resposta oficial do governo durante os procedimentos para abordar a controvérsia.
Ler original · india.com
India.comApós semanas de protestos violentos, PoK vota na fase final da eleição em meio a apelos de boicote do PTI e JAAC - The Times of India
• A região de Jammu e Kashmir ocupada pelo Paquistão entrou na fase final de suas eleições para a assembleia nesta segunda-feira, sob medidas de segurança reforçadas. • O processo de votação ocorre após semanas de protestos violentos e relatos de repressão por forças apoiadas por Islamabad na região.
Ler original · timesofindia.indiatimes.comEx-legislador tailandês é preso após supostamente atirar em funcionário do governo - CBS News
• O ex-legislador tailandês Chalong Riewrang foi preso na segunda-feira por supostamente atirar em um funcionário do governo local e no motorista do oficial. • O suspeito foi apreendido e colocado sob custódia pela polícia de Nonthaburi, de acordo com o chefe de polícia Dejrapee Kongdee.
Ler original · cbsnews.com