top of page
Generatif (Beta) |. Memberikan berita dan tren terkini dalam AI generatif
logo.png

NVIDIA Mengumumkan Langkah-Langkah Keamanan untuk Alat Pengkodean AI

Generatived

14/10/25, 09.00

Para pengembang semakin banyak mengadopsi perangkat lunak pengkodean berbasis AI seperti Cursor, OpenAI Codex, Claude Code, dan GitHub Copilot untuk meningkatkan produktivitas mereka. Meskipun bermanfaat, perangkat lunak ini juga dapat menciptakan kerentanan keamanan baru dengan memperluas permukaan serangan untuk ancaman siber. Perangkat lunak ini mengandalkan prinsip model bahasa berskala besar (LLM) untuk mengotomatiskan tugas bagi pengembang, tetapi sifat otonomnya dapat menyebabkan hasil yang tidak terduga.

Para pakar keamanan menunjukkan bahwa perangkat AI ini dapat dieksploitasi melalui serangan watering hole, di mana aktor ancaman memasukkan kode berbahaya untuk menguasai mesin pengembang. Perangkat ini memiliki kemampuan untuk melakukan tindakan dengan tingkat akses yang sama dengan pengguna, menciptakan loop eksekusi yang sulit diprediksi dan dikendalikan, sehingga semakin meningkatkan risiko.

Salah satu teknik yang digunakan penyerang adalah memanipulasi interaksi alat dengan tugas pengguna, seperti mengedit kode atau menjalankan perintah, dengan menyuntikkan instruksi berbahaya ke dalam sumber data seperti masalah GitHub atau permintaan tarik (pull request). Hal ini dapat menyebabkan eksekusi kode jarak jauh (RCE) pada mesin pengembang. Misalnya, muatan buatan yang tersembunyi dalam paket Python yang tampaknya tidak berbahaya dapat secara tidak sengaja dipasang oleh alat AI dan membahayakan sistem.

Untuk memitigasi risiko ini, para ahli merekomendasikan penerapan sikap "asumsikan injeksi cepat" saat merancang dan mengevaluasi aplikasi AI. Alat seperti pemindai kerentanan LLM NVIDIA dan NeMo Guardrails dapat membantu melindungi LLM dari ancaman ini. Praktik terbaik yang direkomendasikan meliputi pembatasan otonomi agen-agen ini, mewajibkan persetujuan manusia untuk operasi sensitif, dan menjalankannya di lingkungan yang terisolasi. Dalam kasus Cursor, risiko dapat dimitigasi lebih lanjut dengan menonaktifkan kemampuan eksekusi otomatis atau membatasi eksekusi hanya pada perintah yang sah. Seiring industri memanfaatkan alat-alat canggih ini, pemahaman dan penerapan langkah-langkah keamanan akan menjadi penting untuk melindungi dari potensi serangan siber.

Bagikan artikel ini:

Tin tức mới nhất
Inisiatif Kesehatan AI Meningkatkan Layanan Kesehatan di Daerah Terpencil Australia

Inisiatif Kesehatan AI Meningkatkan Layanan Kesehatan di Daerah Terpencil Australia

13/3/26, 09.00

Lanskap perawatan kesehatan Australia akan mendapat manfaat dari inisiatif baru yang bertujuan untuk meningkatkan hasil kesehatan bagi penduduk di daerah terpencil

Nemotron Merilis AI yang Ditingkatkan untuk Sistem Multi-Agen

Nemotron Merilis AI yang Ditingkatkan untuk Sistem Multi-Agen

13/3/26, 09.00

Model AI baru, Nemotron 3 Super, telah diperkenalkan untuk meningkatkan kemampuan sistem multi-agen dalam aplikasi kompleks seperti pengembangan perangkat lunak

Wayfair Meningkatkan Dukungan Katalog dan Pemasok dengan OpenAI

Wayfair Meningkatkan Dukungan Katalog dan Pemasok dengan OpenAI

13/3/26, 09.00

Wayfair telah berhasil mengintegrasikan model OpenAI ke dalam sistem internalnya, meningkatkan dukungan pemasok dan manajemen katalog produk.

ChatGPT Meningkatkan Keamanan AI Terhadap Injeksi Prompt

ChatGPT Meningkatkan Keamanan AI Terhadap Injeksi Prompt

13/3/26, 09.00

Agen AI semakin mahir dalam penjelajahan web, pengambilan informasi, dan tindakan otonom, yang, meskipun bermanfaat, membuka jalan baru bagi serangan siber.

Copyright © 2024 Generatived - All right Reserved.

Bagikan artikel ini:

Bagikan artikel ini:

Generatived

Hãy theo dõi chúng tôi

  • Facebook
  • X

Bahasa

Generatived là dịch vụ cung cấp thông tin và xu hướng chuyên về Generative AI. Chúng tôi sẽ cố gắng hết sức để cung cấp thông tin về thế giới đang thay đổi nhanh chóng.

Generatived AI Logo

Generatived adalah layanan yang memberikan informasi dan tren khusus dalam AI Generatif. Kami akan melakukan yang terbaik untuk menyampaikan informasi tentang dunia yang berubah dengan cepat.

  • Facebook
  • X

Ikuti kami

Bahasa

Berita terkini
Inisiatif Kesehatan AI Meningkatkan Layanan Kesehatan di Daerah Terpencil Australia

Inisiatif Kesehatan AI Meningkatkan Layanan Kesehatan di Daerah Terpencil Australia

13/3/26, 09.00

Lanskap perawatan kesehatan Australia akan mendapat manfaat dari inisiatif baru yang bertujuan untuk meningkatkan hasil kesehatan bagi penduduk di daerah terpencil

Nemotron Merilis AI yang Ditingkatkan untuk Sistem Multi-Agen

Nemotron Merilis AI yang Ditingkatkan untuk Sistem Multi-Agen

13/3/26, 09.00

Model AI baru, Nemotron 3 Super, telah diperkenalkan untuk meningkatkan kemampuan sistem multi-agen dalam aplikasi kompleks seperti pengembangan perangkat lunak

Wayfair Meningkatkan Dukungan Katalog dan Pemasok dengan OpenAI

Wayfair Meningkatkan Dukungan Katalog dan Pemasok dengan OpenAI

13/3/26, 09.00

Wayfair telah berhasil mengintegrasikan model OpenAI ke dalam sistem internalnya, meningkatkan dukungan pemasok dan manajemen katalog produk.

ChatGPT Meningkatkan Keamanan AI Terhadap Injeksi Prompt

ChatGPT Meningkatkan Keamanan AI Terhadap Injeksi Prompt

13/3/26, 09.00

Agen AI semakin mahir dalam penjelajahan web, pengambilan informasi, dan tindakan otonom, yang, meskipun bermanfaat, membuka jalan baru bagi serangan siber.

bottom of page