Cara Penggunaan Claude Fable 5.1 Anda Salah... Lakukan Ini Sebagai Gantinya
AAI LABS
Computing/Software
Transcript
00:00:00Fable 5.1 adalah rilis terbaru dari Anthropic, dan ini adalah salah satu model terbaik yang bisa kamu gunakan
00:00:05sekarang. Tapi model ini tidak berperilaku sama seperti model-model sebelumnya, dan ada beberapa hal kecil
00:00:09yang perlu kamu ubah dalam cara kerjamu dengannya. Karena jika kamu menggunakannya seperti saat kamu memakai
00:00:13model-model sebelumnya, kamu tidak memanfaatkannya secara maksimal, dan kamu bahkan bisa mendapatkan hasil yang lebih buruk
00:00:18darinya. Sebagai contoh, Anthropic mengatakan model ini paling cocok untuk tugas jangka panjang, tetapi ia hanya dapat melakukannya
00:00:23dengan baik jika kamu memberikan perintah dengan cara tertentu. Dan ada satu pengaturan yang disarankan Anthropic untuk
00:00:28dinaikkan, tetapi justru membuat hasilnya menjadi lebih buruk. Jika ini pertama kalinya bagi kalian, kami adalah perusahaan
00:00:32perangkat lunak, dan ini adalah saluran kami, AI Labs. Dan dalam video ini, kita akan membahas 7 tips untuk mendapatkan
00:00:37hasil maksimal dari Fable 5.1. Namun sebelum kita masuk ke tips tersebut, ada beberapa hal yang perlu kita sampaikan
00:00:42tentang model baru ini terlebih dahulu. Dengan dirilisnya Fable 5.1, Anthropic mengklaim model ini jauh
00:00:48lebih baik dalam menyelesaikan tugas. Tapi Fable 5.1 tidak melakukan pekerjaan yang lebih baik. Model ini menyelesaikan lebih banyak pekerjaan
00:00:54dengan biaya yang lebih murah. Kami melihat ini pada proyek-proyek klien kami sendiri. Kami memberikan Fable 5 dan Fable 5.1 tugas yang sama
00:01:00dan menjalankan masing-masing beberapa kali. Kami tidak dapat mengungkapkan detail proyeknya, tetapi Fable 5 melakukan
00:01:05pekerjaan yang lebih baik pada sebagian besar tugas, dan Fable 5.1 hanya lebih baik pada salah satunya. Tugas tersebut adalah
00:01:10tugas yang paling sulit di antara semuanya, dan pada tugas itu Fable 5.1 melakukan pekerjaan yang lebih baik, selesai sekitar 40% lebih cepat, dan biayanya jauh
00:01:16di bawah setengahnya. Jadi Fable 5.1 lebih tangguh saat pekerjaannya semakin sulit. Dan bahkan pada tugas-tugas yang hasilnya
00:01:22tidak lebih baik, model ini terus berjalan. Fable 5 berhenti sebelum selesai pada beberapa percobaan, sementara Fable
00:01:275.1 menyelesaikan setiap tugas hingga tuntas. Model ini juga lebih murah pada setiap tugas. Sekarang kamu mungkin sudah tahu bahwa Claude
00:01:33Code memiliki perintah penggunaan yang pada dasarnya memperkirakan berapa biaya yang harus kamu keluarkan untuk sebuah sesi jika kamu membayar
00:01:38per penggunaan alih-alih berlangganan. Dan berdasarkan perkiraan tersebut, Fable 5.1 sekitar 47% lebih murah daripada
00:01:45Fable 5. Tapi model ini menjadi lebih murah bukan karena tiba-tiba menggunakan lebih sedikit token. Melainkan karena harga
00:01:50dari Anthropic berubah. Namun sebelum kita membahas perubahan harga tersebut, kamu perlu mengetahui satu hal. Semakin lama
00:01:55tugas berjalan, semakin panjang percakapan yang berkembang. Dan karena itu, model harus membaca lebih banyak
00:02:00sebelum ia menjawab perintah baru. Model tidak mengingat percakapan dari satu pesan ke pesan
00:02:05berikutnya. Jadi setiap kali model harus memberikan respons lain, seluruh percakapan harus
00:02:10dikirimkan kembali kepadanya. Namun alih-alih memproses percakapan yang sama dari awal setiap saat,
00:02:16Claude menyimpan salinan dari bagian-bagian yang sudah diproses dan menggunakan kembali salinan tersebut saat kamu memberikan
00:02:21perintah berikutnya. Ini pada dasarnya disebut pembacaan ter-cache (cached read). Pembacaan ter-cache ini juga berbiaya, tetapi harganya lebih rendah
00:02:27dibandingkan dengan input dan output biasa. Dan pada Fable 5.1, Anthropic memotong harga tersebut
00:02:33sebesar 75%. Jadi percakapan yang dikirim ulang sebelum setiap respons kini menjadi jauh lebih murah. Penghematan itu
00:02:39mungkin terlihat kecil pada satu perintah tunggal karena tidak banyak percakapan yang dikirim ulang. Namun pada tugas yang panjang,
00:02:44percakapan berkembang yang sama dikirim berulang-ulang, sehingga penghematannya semakin besar setiap kali model
00:02:50memberikan respons. Nah, itu hanya mencakup apa yang dibaca oleh model. Apa yang ditulis oleh model dihargai secara terpisah dan harga tersebut
00:02:55tidak berubah. Artificial Analysis, yang menguji model dan memberi skor secara independen, menemukan bahwa
00:03:01Fable 5.1 menulis jauh lebih banyak daripada Fable 5. Jadi tagihannya naik meskipun pembacaannya lebih murah. Dalam
00:03:07pengujian mereka, model ini menghasilkan output sekitar 1,7 kali lebih banyak daripada Fable 5 dan berbiaya sekitar 20% lebih mahal per tugas.
00:03:14Model Fable dari Anthropic memiliki pengaman keselamatan, yaitu aturan yang menghentikannya dari melakukan jenis tugas tertentu.
00:03:19Dan dengan Fable 5.1, Anthropic mengatakan pengaman tersebut mengganggu sesi Claude Code
00:03:25sekitar 60% lebih jarang. Namun ketika model tersebut mengenai salah satu pengaman tersebut sekarang, Claude Code beralih ke
00:03:31model yang lebih lemah tanpa memberi tahu kamu dan terus berjalan. Dan model yang lebih lemah itu menangani sisa sesi
00:03:36bahkan ketika permintaan berikutnya tidak ada hubungannya dengan apa yang memicunya. Jadi alih-alih penolakan, kamu mendapatkan
00:03:41pekerjaan yang lebih lemah dan mengira Fable 5.1 yang menghasilkan itu. Dan ini sudah terjadi pada seseorang yang membuat game
00:03:46yang memiliki file lelucon dengan kata biologis di dalamnya. Proyek tersebut sama sekali tidak ada hubungannya dengan biologi,
00:03:51tetapi satu kata itu sudah cukup untuk mengalihkan model yang menangani pekerjaan tersebut. Dan jika proyekmu benar-benar
00:03:55membahas salah satu subjek yang dicakup oleh pengaman tersebut, seperti keamanan atau biologi, tidak ada pengaturan dan tidak ada
00:04:00cara phrasing yang dapat menghindari hal ini. Itu memang risiko yang harus ditanggung dari Fable 5.1. Sekarang dalam pengujian Artificial Analysis,
00:04:06Fable 5.1 mencetak skor yang lebih tinggi daripada Fable 5 dalam hal akurasi, tetapi model ini juga lebih sering berhalusinasi, yaitu ketika
00:04:13model tidak mengetahui jawabannya. Jadi model tersebut menciptakan jawabannya sendiri dan menyajikannya sebagai kebenaran. Ketika Fable 5.1 tidak tahu
00:04:18jawaban, ia berhalusinasi sebesar 72,6% dari waktu. Fable 5 melakukan itu sebesar 63,6% dari waktu. Dan model yang mengatakan
00:04:26ia tidak tahu sebenarnya lebih baik daripada model yang pura-pura tahu segalanya karena dengan begitu kamu
00:04:31bisa pergi dan memeriksa semuanya sendiri. Tetapi ketika model mengarang sesuatu dan kamu memercayainya karena model tersebut berkata demikian,
00:04:35jawaban karangan itu langsung masuk ke dalam pekerjaanmu. Dan itu bahkan lebih penting ketika kamu menggunakannya
00:04:40untuk penelitian atau penulisan karena memverifikasinya menjadi pekerjaan tersendiri di kemudian hari. Namun sebelum kita beralih
00:04:45ke tips-tips berikutnya, alangkah baiknya jika kamu berlangganan saluran ini dan menekan tombol suka. Gestur dukungan kecil ini
00:04:50sangat berarti bagi kami. Sekarang setelah mendengar hal-hal ini, kamu mungkin akan mengatakan bahwa model yang lebih lama
00:04:56jelas lebih baik dalam beberapa aspek. Itu memang benar, tetapi pada saat yang sama model ini akan menjadi
00:05:01model bawaan di aplikasi yang kamu gunakan. Inilah mengapa kamu perlu mengikuti tips yang akan kita
00:05:06bahas. Jika tidak, kamu tidak akan mendapatkan potensi penuhnya. Cara pertama untuk benar-benar menggunakan
00:05:11Fable 5.1 dengan lebih baik adalah menurunkan tingkat upaya (effort). Bagi yang belum tahu, effort adalah pengaturan yang
00:05:16menentukan seberapa banyak pekerjaan yang dilakukan model sebelum memberikan jawaban kepada kamu. Dan pengaturan tunggal itu memengaruhi
00:05:21baik kualitas pekerjaan maupun biayanya. Code Rabbit, yang membuat alat untuk meninjau kode,
00:05:26menguji Fable 5.1 pada pekerjaan peninjauan nyata mereka dan menemukan bahwa model ini berhasil menemukan 61% masalah pada tingkat upaya rendah
00:05:33dibandingkan dengan 57,1% pada tingkat tinggi, dan model ini juga selesai sekitar 3 menit lebih cepat. Dan kami melihat hal yang sama
00:05:39ketika kami menggunakan Fable 5.1 untuk menambahkan fitur ke situs web komunitas kami. Pada tingkat upaya tinggi, model menghabiskan waktu lama
00:05:44bolak-balik mengurus satu bagian fitur tersebut, sementara pada tingkat upaya rendah, model menyelesaikan semuanya dan
00:05:49memberikan hasil yang lebih baik kepada kami. Kami merekomendasikan tingkat upaya rendah pada video Fable kami sebelumnya juga, dan setelah menggunakan
00:05:54Fable 5.1, itulah yang masih kami rekomendasikan. Jadi kamu harus mulai dengan tingkat upaya rendah dan hanya menaikkannya jika
00:06:00hasilnya memberikan alasan untuk melakukannya. Jika tidak, kamu membuang-buang waktu dan token dengan hasil yang sangat sedikit.
00:06:05Hal berikutnya yang perlu kamu lakukan adalah menghapus instruksi yang kamu tulis untuk model-model lama. Instruksi tersebut
00:06:10tetap berada di pengaturan awalmu saat beralih ke Fable 5.1, meskipun perilaku yang diperbaikinya
00:06:15sudah tidak ada. Jadi Fable 5.1 tetap harus mengikuti daftar perbaikan yang terus bertambah untuk masalah yang sebenarnya tidak dimilikinya.
00:06:21Instruksi itu hanya membuang-buang batas penggunaanmu, dan beberapa di antaranya kini justru menimbulkan masalah baru. Kami menyebutkan hal ini di
00:06:25video sebelumnya juga. Sekarang kamu mungkin berpikir, bagaimana kamu tahu instruksi mana yang penting dan
00:06:30mana yang tidak? Kamu dapat mengujinya dengan menghapus satu instruksi dari file Claude.md milikmu dan memberikan jenis pekerjaan yang sama
00:06:36kepada Claude. Jika hasilnya tetap sama tanpa instruksi tersebut, instruksi itu tidak perlu ada di sana. Tetapi kamu
00:06:41tidak perlu melakukan semuanya sendiri. Claude Code memiliki perintah bernama Claude API Prompt Audit yang menemukan
00:06:46instruksi-instruksi tersebut untukmu. Kamu perlu menjalankan perintah itu di terminal, dan perintah tersebut akan memeriksa semua yang telah kamu
00:06:51simpan untuk Claude. Kemudian perintah itu menunjukkan instruksi mana yang ditulis untuk model lama dan memberikan perubahan persis
00:06:56yang direkomendasikannya. Perintah ini tidak mengubah apa pun dengan sendirinya, jadi kamu dapat meninjau daftarnya terlebih dahulu dan hanya
00:07:01menyetujui perubahan yang kamu setujui. Namun sebelum kita beralih ke tips berikutnya, mari kita dengarkan pesan dari sponsor kita,
00:07:06Porkbun. Jadi kamu akhirnya merilis aplikasimu, tetapi aplikasi itu terjebak pada URL bawaan acak, dan apa yang
00:07:12sebenarnya dibutuhkannya adalah domain yang layak milik sendiri. Di sinilah Porkbun hadir, dengan domain .app dan .dev yang dibuat
00:07:18khusus untuk proyek teknologi. Domain .app sangat sempurna untuk aplikasimu atau halaman landing SaaS,
00:07:23dan .dev dibuat untuk portofolio coding atau dokumentasimu, sehingga begitu seseorang melihatnya,
00:07:28mereka tahu itu adalah proyek nyata. Dan ini bukan sekadar nama yang bagus. Setiap domain .app dan .dev berada
00:07:33di daftar preload HSTS, yang berarti HTTPS otomatis aktif pada setiap koneksi tanpa pengaturan,
00:07:39dan sertifikat SSL gratis sudah termasuk, sehingga situsmu aman sejak awal. Bagian terbaiknya,
00:07:45kamu bisa mendapatkan tahun pertama hanya dengan $5,99 dengan privasi WHOIS gratis dan tanpa upsell atau biaya tersembunyi.
00:07:52Dan setelah tahun pertama, harga perpanjangan tetap sesuai harga dasar, sehingga tetap murah untuk jangka panjang. Dapatkan domainmu seharga $5,99
00:07:58di [porkbun.com/ailabs26](https://www.google.com/search?q=https%3A%2F%2Fporkbun.com%2Failabs26). Tautan ada di deskripsi di bawah.
00:08:03Sekarang, Anthropic menjual Fable 5.1 untuk tugas-tugas panjang yang dapat kamu tinggalkan berjalan tanpa harus sering diawasi, tetapi model ini tetap
00:08:09berhenti untuk meminta izin sebelum melakukan langkah yang sebenarnya sudah dicakup oleh permintaan aslimu.
00:08:14Model ini hanya mengajukan pertanyaan dan menunggu, dan ketika tidak ada orang yang menjawab, menunggu sama artinya dengan berhenti.
00:08:19Hal ini terjadi karena perilaku aslinya mengasumsikan kamu bekerja berdampingan dengannya. Jadi panduan pemberian perintah
00:08:24dari Anthropic untuk Fable 5.1 mengatakan bahwa kamu harus memberi tahunya di dalam perintah bahwa tidak ada orang yang mengawasi,
00:08:29dan bahwa ia harus melanjutkan apa pun yang sudah dicakup oleh permintaanmu selama hal itu dapat dibatalkan.
00:08:34Itu memberikan izin kepada model untuk menyelesaikan pekerjaan panjang tanpa berhenti untuk mengajukan pertanyaan yang tidak perlu ditanyakan.
00:08:39Fable 5.1 juga memiliki kebiasaan melakukan pekerjaan lebih banyak daripada yang kamu minta.
00:08:43Sebagai contoh, jika kamu memintanya menambahkan satu fitur, ia mungkin menyadari ada masalah lain di dekatnya dan memperbaiki itu juga,
00:08:48atau memperluas fitur tersebut melampaui apa yang kamu jelaskan. Kami melihat ini pada salah satu proyek klien kami,
00:08:53di mana kami meminta satu fitur dan ia juga mengedit file pengujian yang sama sekali tidak diminta untuk disentuh.
00:08:58Masalahnya adalah suntingan ekstra tersebut dapat mengubah bagian dari produkmu yang ingin kamu biarkan persis seperti
00:09:03semula. Jadi ketika kamu memberikan tugas kepada Fable 5.1, kamu juga harus memberitahunya bagian mana yang harus dibiarkan,
00:09:08yang berarti ia hanya mengubah apa yang diperlukan oleh permintaan. Dan jika ia melihat masalah lain,
00:09:13ia menyebutkannya di akhir. Dan ketika kami melakukan itu pada proyek kami dan secara khusus menyuruhnya untuk tidak mengedit
00:09:18file pengujian, ia hanya mengerjakan fitur yang kami minta. Fable 5.1 memiliki kebiasaan lain dan ini terjadi
00:09:24kapan pun ia mengubah file. Saat ia sedang mengerjakan tugas dan hanya perlu mengedit sebagian kecil dari file,
00:09:29ia malah menulis ulang seluruh file, meskipun bagian lainnya sama sekali tidak berubah.
00:09:33Ini mungkin terlihat baik-baik saja bagi Anda karena Anda tetap mendapatkan hasil yang benar, tetapi setiap
00:09:38baris tersebut memakan token keluaran dan jika ia bekerja dengan banyak file, batas Anda akan terkuras jauh lebih cepat.
00:09:43Kami melihat ini pada *second brain* kami sendiri, di mana setiap perubahan kecil memakan biaya lebih besar dari seharusnya,
00:09:48karena ia terus menulis ulang file yang sebenarnya bisa diedit begitu saja. Untuk menghentikannya,
00:09:52Anda harus memberi tahu Fable 5.1 bahwa ketika perubahan kecil dapat memberikan hasil yang sama,
00:09:56ia harus mengedit bagian itu saja. Masalah berikutnya bukan tentang seberapa banyak Fable 5.1 menulis,
00:10:01tetapi bagaimana ia menulis. Kita sudah melihat ini pada Opus 5, yang menggunakan banyak hal yang disebut Anthropic sebagai
00:10:06“prosa berlebihan”. Bagi yang belum tahu, “prosa berlebihan” adalah ketika model menggunakan frasa
00:10:11dan metafora mewah alih-alih langsung mengutarakan maksudnya. Sebagai contoh, alih-alih mengatakan suatu pengaturan
00:10:16layak untuk diubah, model tersebut menyebutnya sebagai tombol yang layak diputar. Dan dalam tugas riset yang panjang,
00:10:20bahasa semacam itu membuat kita bahkan kesulitan untuk melihat inti yang coba disampaikan oleh model.
00:10:24Kini, Fable 5.1 menggunakannya lebih sedikit daripada Opus 5 dan Fable 5, serta menggunakan lebih sedikit frasa pasaran dan
00:10:31jargon yang tidak dijelaskan. Namun, masalah itu masih ada dalam tulisannya, dan jika dibandingkan dengan Fable 5,
00:10:36kalimatnya berjalan lebih panjang dengan jeda paragraf yang lebih sedikit, sehingga lebih sulit lagi untuk diikuti.
00:10:41Jadi, Anda hanya perlu menyuruhnya untuk menghapus semua prosa berlebihan, dan itu akan mengatasi keduanya. Itulah yang kami lakukan saat
00:10:46kami menjalankannya pada salah satu tugas riset kami sendiri, di mana kami menggunakannya untuk menulis alih-alih membangun.
00:10:51Hal terakhir adalah jenis pekerjaan apa yang Anda berikan kepada Fable 5.1. Segala sesuatu yang telah kita bahas sejauh ini adalah tentang mendapatkan
00:10:56hasil yang lebih darinya, tetapi jenis pekerjaannya juga sama pentingnya, karena Fable 5.1 berada dalam kondisi terbaiknya pada tugas-tugas besar.
00:11:01Ketika kami menjalankan tugas-tugas pada proyek kami, Fable 5 sebenarnya melakukan pekerjaan yang lebih baik pada tugas yang paling sederhana,
00:11:07tetapi pada tugas yang paling sulit, Fable 5.1 melakukan pekerjaan yang lebih baik, dan selesai sekitar 40% lebih cepat serta 58% lebih murah.
00:11:14Jadi, pekerjaan besarlah tempat Fable 5.1 unggul, karena di situlah menyelesaikan semuanya tanpa
00:11:19berhenti benar-benar penting. Itulah sebabnya Anda tidak boleh memecah fitur menjadi banyak prompt kecil dan memberikannya
00:11:23selangkah demi selangkah. Anda harus memberikan seluruh fitur tersebut dan menjelaskan hasil yang Anda inginkan dengan jelas,
00:11:28lalu Anda akan melihatnya menyelesaikan seluruh fitur itu sendiri. Sekarang jika Anda ingin mengakses semua keterampilan
00:11:33dan alur kerja yang kami tunjukkan dalam video kami, Anda bisa mendapatkannya di AI Labs Pro, yang merupakan komunitas kami.
00:11:38Jadi, jika Anda merasakan manfaat dari apa yang kami lakukan dan ingin mendukung kanal ini, inilah cara terbaik untuk melakukannya.
00:11:43Tautan ada di deskripsi. Itu membawa kita ke akhir video ini. Jika Anda ingin mendukung
00:11:48kanal ini dan membantu kami terus membuat video seperti ini, Anda dapat melakukannya dengan menggunakan tombol *super thanks* di bawah.
00:11:53Seperti biasa, terima kasih telah menonton dan sampai jumpa di video berikutnya.
Community Posts
No posts yet. Be the first to write about this video!
Write about this video