Pat Jiang ने आज Harness-1 प्रकाशित किया, gpt-oss-20b पर बना एक 20B-पैरामीटर retrieval subagent जो पेपर state-externalizing search harness कहता है उसके अंदर reinforcement learning के साथ प्रशिक्षित (arxiv 2606.02373, github.com/pat-jj/harness-1 पर कोड)। हेडलाइन बेंचमार्क संख्याएँ: web, finance, patents, और multi-hop QA को span करने वाले आठ retrieval benchmarks पर 0.730 average curated recall, अगले strongest open search subagent को 11.4 पॉइंट्स से हराते हुए, gains विशेष रूप से held-out transfer benchmarks पर मज़बूत। वज़न और harness कोड सार्वजनिक हैं, vLLM, SGLang, या Transformers के माध्यम से servable। फ्रंटियर-मॉडल searchers (बहुत बड़े, बंद) प्रतिस्पर्धी बने हुए हैं, लेकिन एक 20B ओपन मॉडल जो इस रेंज में इस तरह के transfer behavior के साथ उतरता है, वह रुकने योग्य परिणाम है।
आर्किटेक्चरल insight इस रिलीज़ का वह हिस्सा है जो बेंचमार्क deltas से अधिक मायने रखता है। पारंपरिक search-agent ट्रेनिंग policy को बढ़ते transcripts पर एक function के रूप में मानती है: मॉडल को एक साथ निर्णय लेना होता है कि आगे क्या खोजना है, याद रखना है कि उसने पहले से क्या देखा है, ट्रैक करना है कि कौन सा evidence उपयोगी है, रखना है कि कौन से constraints अभी भी खुले हैं, और रिकॉल करना है कि किन claims को वास्तव में चेक किया गया है। यह बहुत routine state management है जो उन्हीं पैरामीटर्स के माध्यम से push करना है जो वास्तविक रीज़निंग करने वाले हैं, और जैसे-जैसे transcript बढ़ता है, bookkeeping रीज़निंग को crowd out करता है। Harness-1 इसके बजाय bookkeeping को environment में externalize करता है। harness स्वयं एक candidate pool, एक importance-tagged curated set, compact evidence links, verification records, संपीड़ित और deduplicated observations, और budget-aware context rendering बनाए रखता है। policy तय करती है कि आगे क्या करना है; environment बाकी owns करता है। RL फिर इस संरचित environment के अंदर चलाया जाता है ताकि policy externalize किए गए state का शोषण करने वाले व्यवहार सीख सके। Memory OS ने पिछले सप्ताह सामान्य एजेंट मेमोरी के लिए समान shape का तर्क दिया (छह लेयर्स, प्रत्येक एक अलग उद्देश्य के साथ)। Harness-1 मापे गए लाभों के साथ एक विशिष्ट डोमेन (retrieval) के अंदर समान विचार को instantiate करता है, जो externalization सिद्धांत को सिर्फ एक डिज़ाइन सबक के बजाय एक मापने योग्य claim बनाता है।
ट्रैक करने योग्य दो इकोसिस्टम थ्रेड्स। पहला, "subagent specialization" पैटर्न consolidate होना शुरू हो रहा है। Memory OS Hermes के लिए memory layer था। Mellum2 ने खुद को मल्टी-मॉडल पाइपलाइनों में focal model के रूप में framed किया। Hermes Desktop पांच sandbox backends ship करता है ताकि प्रत्येक टूल श्रेणी की अपनी execution surface हो। Harness-1 विशेष रूप से retrieval slot को specialize करता है, RL ट्रेनिंग के साथ मॉडल को एक सामान्य searcher का उत्पादन करने के बजाय harness से बांधती है। यह दिशा रणनीतिक रूप से मायने रखती है: अगर production agent stack plural और persistent होने वाला है (जहाँ पिछले दो हफ़्तों की रिलीज़ ने इशारा किया), अंदर के components अपने harness के विरुद्ध प्रशिक्षित specialists होंगे, generalists नहीं। work की unit उसी समय shrink और specialize होती है जब ऑर्केस्ट्रेटर fan-out कर रहा है। दूसरा, ओपन बेस मॉडल का चयन शांत संकेत है। gpt-oss-20b पर निर्माण का अर्थ है कि Harness-1 एक अनुमेय लाइसेंस posture विरासत में लेता है, self-hosted किया जा सकता है, और compute वाले किसी के लिए reproducible है। फ्रंटियर बंद searchers जिनके साथ Harness-1 तुलना करता है उस अर्थ में reproducible नहीं हैं। बंद search APIs पर दांव लगाने या ओपन subagents इकट्ठा करने के बीच निर्णय लेने वाले builders के लिए, अगले ओपन विकल्प पर +11.4 पॉइंट का अंतर फ्रंटियर के अंतर से अधिक मायने रखता है, क्योंकि ओपन विकल्प वह है जिसे आप वास्तव में अपने स्वयं के substrate पर deploy कर सकते हैं।
सोमवार सुबह, अगर आप agent workflows में retrieval बना रहे हैं: web tools के साथ generic LLM पर default करने से पहले अपने पाइपलाइन में search slot के रूप में Harness-1 आज़माएँ। transfer-benchmark स्ट्रेंथ सुझाव देती है कि जब आपका डोमेन ट्रेनिंग सेट से अलग होगा तो यह collapse नहीं होगा, लेकिन अपने स्वयं के मूल्यांकन के साथ सत्यापित करें। अगर आप अपना खुद का agent harness डिज़ाइन कर रहे हैं, state-externalization पैटर्न अध्ययन करने योग्य इंजीनियरिंग सबक है, candidate-pool प्लस importance-tagged-curated प्लस verification-record प्लस compressed-observations संरचना ठोस shape है, और RL setup के लिए पेपर पढ़ना आवश्यक है अगर आप recipe को reproduce करना चाहते हैं। अगर आप production में बंद search APIs चला रहे हैं, फ्रंटियर बंद searchers से अंतर वह तुलना है जो आपके लिए मायने रखती है, लेकिन जिस दर पर ओपन retrieval वह अंतर बंद कर रहा है वह अब इतना दिखाई दे रहा है कि buy-versus-build गणना त्रैमासिक cadence पर shift हो रही है। और अगर आप agent-runtime consolidation thread देख रहे हैं, यह रिलीज़ साफ़ फिट होती है: विशेष subagents, उन harnesses के विरुद्ध प्रशिक्षित जिनमें वे रहते हैं, उस runtime layer के अंदर बैठे जिस पर Microsoft, Nous, और Anthropic वर्तमान में लड़ रहे हैं।
