Teknologi PKSHA (Bunkyo-ku, Tokyo) akan menjadi tuan rumah "YANS2023" yang diadakan di Asakusabashi Hulic Hall dari tanggal 29 hingga 31 Agustus 2023. Pada Simposium ke-18 (2023) NLP Young People's Association (YANS), dua model yang mencapai akurasi tinggi adalah ``sentence embedding'', sebuah metode untuk mengubah kalimat teks dan kalimat ke dalam format vektor yang mudah dipahami komputer, ` `Bahasa Jepang Dia menyajikan ``model penyematan kalimat khusus'' dan ``model penyematan kalimat kompatibel multibahasa''. Model-model ini juga sangat kompatibel dengan penggunaan model bahasa skala besar (LLM), dan akan digunakan sebagai komponen penting dari ``PKSHA LLMS'' milik PKSHA di masa depan. ``Model penyematan kalimat khusus Jepang'' dikembangkan untuk memecahkan masalah kurangnya data bahasa Jepang. Dengan menggabungkan data yang terkait dengan beberapa tugas berbeda untuk membuat data baru dan menerapkan pembelajaran dua langkah, ini dapat digunakan untuk tugas-tugas seperti menentukan kesamaan makna kalimat atau mencari area yang belum dapat kami peroleh hasilnya sama atau lebih baik dari metode sebelumnya. Model ini diterbitkan dengan nama GLuCoSE (General Luke-based Contrastive Sentence Embedding). Di sisi lain, ``model penyematan kalimat multibahasa'' dikembangkan untuk memungkinkan penanganan terpadu bahasa di seluruh dunia (Jepang, Inggris, Cina, dll.). Kami mengusulkan ``Kalimat Multibahasa T5,'' sebuah metode lanjutan yang dapat menangani berbagai bahasa secara terpadu, dan mengadopsi ``LoRA,'' yang secara efisien dapat melatih model bahasa berskala besar. Hasilnya, kami mampu mencapai kinerja yang lebih unggul dari metode yang ada dalam berbagai eksperimen. Teknologi PKSHA sedang mengerjakan implementasi sosial dari berbagai AI, termasuk LLM, berdasarkan visi "evolusi bersama manusia dan perangkat lunak". Berdasarkan hasil penelitian tersebut, PKSHA LLMS akan maju, dan R&D serta bisnis (AI Solution/AI SaaS) akan semakin erat kaitannya, sambil terus berupaya mempercepat implementasi sosial LLM.