Hatalı Model JSON Dosyasını Onarma
Modeller mükemmel JSON üreticileri değildir. JSON modunda bile çıktıları ```json çitleri içine alırlar, konuşkan bir giriş ("Tabii! İşte veriler:") eklerler, sonda virgül bırakırlar veya tek tırnak kullanırlar. Yalın bir json.loads bunların hepsinde hata verir ve üretim ortamında bu başarısız bir istektir. Küçük bir repair adımı, sen pes edip modeli tekrar istemeden önce çoğunu ucuzca kurtarır.
Dayanıklı bir yolun şekli şuna benzer:
text = call_model(prompt) # may be fenced / prose-wrapped / sloppy
try:
data = json.loads(text)
except ValueError:
data = repair_json(text) # one cheap repair attempt before re-promptingrepair_json(text) inşa ediyorsun. Bu adımları sırasıyla takip et ve json.loads başarılı olduğu anda dur:
- Bir kod çitini temizle. Eğer her şey
```(isteğe bağlı```json) içine alınmışsa, sadece iç kısmı tut.re.DOTALLile^```[a-zA-Z]*\s*(.*?)\s*```$gibi bir regex bunu yapar. - Çevredeki metni kes. İlk
{veya[ve eşleşen son}veya]kısmını bul ve sadece o aralığı dilimle. Bu, önündeki "Sure! Here is..." kısmını ve sonundaki diğer konuşmaları atar. - Old haliyle dene. Birçok string artık geçerli -> erken dön.
- Önce en hafif bozulmaları düzelt:
re.sub(r",(\s*[}\]])", r"\1", s)ile sondaki virgülleri kaldır, sonrajson.loadsile tekrar yap. - Son çare: tek tırnakları çift tırnağa dönüştür ve bir kez daha dene.
- Hala ayrıştırılamıyorsa, bir
ValueErrorfırlat -> asla çöp döndürme. Onarılamaz bir string, tahmin yapmak için değil, tekrar istemek için bir sinyaldir.
Tırnak değişimi neden en son sırada: çünkü string değerleri içindeki kesme işaretlerini de yeniden yazar, bu yüzden önce değiştirirsen {"note": "it's fine",} bozulur, oysa sadece virgülü kaldırmak sorunu çözer. Model çıktısı genellikle kesme işaretleri içerir (O'Brien gibi isimler, it's gibi kelimeler), bu yüzden değerlere zarar verebilecek olandan önce zarar veremeyecek düzeltmeleri dene. Yine de bu ilk savunma hattıdır; gerçek bir yanıt ayrıştırılamadığında, tekrar istemek (veya modeli geçerli JSON ile kısıtlayan yapılandırılmış çıktılar) daha zekice bir onarımdan daha iyidir. Temiz JSON'un dokunulmadan geçtiğinden, true/false'nin Python True/False olarak kaldığından ve kurtarılamayan JSON içeren bir string'in hata verdiğinden emin ol.
repair_json(text) yaz: ```/```json kod çitini temizle, ilk {/[ öncesindeki ve eşleşen son }/] sonrasındaki metinleri kes, sonra json.loads dene; başarısız olursa sondaki virgülleri kaldır ve tekrar dene; eğer yine başarısız olursa tek tırnakları çift tırnağa çevir ve son bir kez daha dene (tırnak değişimi en son yapılır çünkü değerlerin içindeki kesme işaretlerini de yeniden yazar); yine de ayrıştıramazsa bir ValueError fırlat. Temiz JSON değişmeden geçmelidir.
Bu derste bir sorun mu fark ettin? Bildir · Bu ders hakkında soru sor
Bu alıştırma yakında açılacak
Bu dersi bitirince bu ders açılacak. Kursun tamamı ücretsiz, hesap gerekmiyor ve bu dersi hemen şimdi okuyabilirsin.
Bu tarayıcı learn.floati.life için çerezleri engelliyor, bu yüzden burada bitirdiğin dersler sırasıyla açılamıyor. Bu site için çerezlere izin ver ve sayfayı yenile.