Berliner Boersenzeitung - IA se tornou poderosa demais para ser controlada?

EUR -
AED 4.177857
AFN 75.655231
ALL 93.77151
AMD 415.873647
AOA 1043.183623
ARS 1703.139744
AUD 1.632144
AWG 2.047688
AZN 1.938444
BAM 1.955206
BBD 2.292004
BDT 140.367353
BHD 0.42917
BIF 3399.667097
BMD 1.137604
BND 1.468954
BOB 12.637161
BRL 5.783017
BSD 1.137954
BTN 109.829631
BWP 15.719224
BYN 3.264008
BYR 22297.045604
BZD 2.288705
CAD 1.60408
CDF 2570.986282
CHF 0.931214
CLF 0.027331
CLP 1075.683181
CNY 7.703975
CNH 7.703527
COP 3641.493624
CRC 517.842667
CUC 1.137604
CUP 30.146516
CVE 110.231509
CZK 24.15874
DJF 202.638433
DKK 7.478957
DOP 66.269866
DZD 151.755893
EGP 58.441244
ERN 17.064066
ETB 183.671796
FJD 2.561093
FKP 0.854706
GBP 0.854089
GEL 2.986257
GGP 0.854706
GHS 13.233979
GIP 0.854706
GMD 84.183128
GNF 9983.966623
GTQ 8.681362
GYD 238.077666
HKD 8.921265
HNL 30.479739
HRK 7.538112
HTG 148.784795
HUF 361.246708
IDR 20388.145475
ILS 3.465542
IMP 0.854706
INR 109.855614
IQD 1490.261721
IRR 1564206.005764
ISK 143.114968
JEP 0.854706
JMD 180.495161
JOD 0.806606
JPY 186.402209
KES 147.365227
KGS 99.483939
KHR 4601.601919
KMF 493.720694
KRW 1660.413643
KWD 0.352749
KYD 0.948312
KZT 541.065611
LAK 25767.171293
LBP 101903.839083
LKR 382.413813
LRD 205.967422
LSL 19.146315
LTL 3.35905
LVL 0.688126
LYD 7.281788
MAD 10.650825
MDL 20.112889
MGA 5042.467973
MKD 61.556298
MMK 2389.220422
MNT 4089.366147
MOP 9.191907
MRU 45.561486
MUR 53.957006
MVR 17.576418
MWK 1976.019179
MXN 19.890107
MYR 4.654399
MZN 72.697161
NAD 19.14631
NGN 1553.403001
NIO 41.877277
NOK 10.89723
NPR 175.72761
NZD 1.971414
OMR 0.437597
PAB 1.137954
PEN 3.870703
PGK 5.090453
PHP 70.173169
PKR 316.095262
PLN 4.3192
PYG 6879.909713
QAR 4.145601
RON 5.218476
RSD 117.354345
RUB 88.93298
RWF 1676.790549
SAR 4.282815
SBD 9.1931
SCR 16.541191
SDG 683.135604
SEK 11.056268
SGD 1.46825
SLE 27.558509
SOS 650.145062
SRD 42.992917
STD 23546.113594
STN 24.492559
SVC 9.956975
SZL 19.146301
THB 38.342998
TJS 10.497611
TMT 3.981615
TND 3.370887
TRY 53.857039
TTD 7.731651
TWD 36.813295
TZS 3004.187253
UAH 50.997906
UGX 4289.696684
USD 1.137604
UYU 45.696116
UZS 13771.81578
VES 843.307715
VND 29941.746954
VUV 134.790696
WST 3.123527
XAF 655.757765
XAG 0.019523
XAU 0.000281
XCD 3.074433
XCG 2.050877
XDR 0.815552
XOF 655.757765
XPF 119.331742
YER 271.375935
ZAR 19.150778
ZMK 10239.808511
ZMW 21.080595
ZWL 366.308142
IA se tornou poderosa demais para ser controlada?

IA se tornou poderosa demais para ser controlada?

O ciberataque perpetrado de maneira autônoma por dois agentes de inteligência artificial da OpenAI levantou dúvidas sobre como os modelos de IA mais poderosos serão controlados.

Tamanho do texto:

O teste da OpenAI, em um ambiente fechado, buscava avaliar as habilidades de seu modelo "mais avançado", GPT-5.6 Sol, e seu sucessor, ainda não comercializado, uma avaliação que a startup americana costuma aplicar às suas IAs.

Os agentes conseguiram se conectar à internet e lançaram um ataque à plataforma Hugging Face, um repositório de modelos de IA.

"Eles entendiam que a OpenAI não queria que saíssem de seu ambiente de testes e invadissem outra empresa, mas mesmo assim fizeram isso", disse Jeffrey Ladish, diretor da Palisade Research, uma organização independente que avalia os novos modelos em termos de cibersegurança.

"Quase parecia que eles fizeram isso antes mesmo de ter um plano sobre o que fazer com o acesso à internet", segundo Ladish.

Em março, um grupo de desenvolvedores afiliados à empresa chinesa Alibaba descobriu que um de seus modelos tentava, por conta própria, criar uma criptomoeda após se conectar, sem autorização, a um servido externo.

Em abril, Sam Bowman, responsável pela segurança na Anthropic, recebeu um e-mail do modelo Mythos, que estava sendo testado. Ele informou que estava navegando na internet apesar de, inicialmente, estar isolado.

Os modelos, advertiu Ladish, "buscam liberdade para cumprir com seus objetivos de maneira mais efetiva. E isso dá muito medo".

- "Será mais difícil supervisioná-la" -

O relatório de eventos publicados pela OpenAI sugere que a startup não detectou a situação suficientemente cedo para solucioná-la em tempo real ou alertar a Hugging Face. Questionada sobre o assunto pela AFP, a empresa não respondeu.

Desde os ataques hackers, a OpenAI disse que "implementou proteções mais fortes" para suas próximas avaliações.

Para Gang Wang, professor de Ciência da Computação na Universidade de Illinois, ainda é possível impedir que um modelo se conecte à internet cortando fisicamente o acesso.

O problema, disse, é que "as pessoas subestimam a IA".

Garantir o ambiente "é algo que devemos prestar mais atenção (...) como se faz com os acidentes de laboratório" que liberam vírus ou bactérias, advertiu Andrew Lohn, do Centro de Segurança e Tecnologias Emergentes da Universidade de Georgetown.

Porém, para Dan Lahav, diretor executivo da Irregular - uma empresa de cibersegurança dedicada à IA de ponta -, realizar simulações em um ambiente completamente isolado "é um desafio de pesquisa muito difícil".

"É possível aplicar medidas de mitigação, mas devido à forma como a tecnologia está construída, quanto mais se tenta dar liberdade e autonomia para realizar tarefas mais sofisticadas, será mais difícil supervisioná-la", explicou Lahav sobre as salvaguardas nos testes.

O incidente da OpenAI sem dúvida impulsionará o atual debate no governo dos Estados Unidos sobre se deve inspecionar os modelos mais avançados de IA antes de seu lançamento.

O governo de Donald Trump obrigou a Anthropic a suspender dois de seus modelos e a OpenAI a submeter seus desenvolvimentos a testes antes de comercializá-los.

Na quinta-feira (23), dois congressistas americanos, um republicano e outro democrata, apresentaram um projeto de lei que obrigaria os gigantes de IA a contar com um "interruptor de desligamento" ("kill switch") que permita desativar seus sistemas caso representem um risco grave.

(K.Müller--BBZ)