<?xml version="1.0" encoding="utf-8" standalone="yes"?><rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom"><channel><title>Labs on Renato Garay</title><link>https://renatogaray.dev/labs/</link><description>Recent content in Labs on Renato Garay</description><generator>Hugo</generator><language>en</language><lastBuildDate>Wed, 18 Nov 2026 00:00:00 +0000</lastBuildDate><atom:link href="https://renatogaray.dev/labs/index.xml" rel="self" type="application/rss+xml"/><item><title>Does a design skill beat using no skill at all?</title><link>https://renatogaray.dev/labs/ejemplo-design-skills/</link><pubDate>Wed, 18 Nov 2026 00:00:00 +0000</pubDate><guid>https://renatogaray.dev/labs/ejemplo-design-skills/</guid><description>&lt;h2 id="hypothesis"&gt;Hypothesis&lt;/h2&gt;&#10;&lt;p&gt;Design skills promise better-looking pages from the same prompt. If that holds, a page built with a skill should win a blind vote against a page built with none, and the ranking of skills should stay roughly the same from one run to the next.&lt;/p&gt;&#10;&lt;h2 id="setup"&gt;Setup&lt;/h2&gt;&#10;&lt;ul&gt;&#10;&lt;li&gt;One brief: a landing page for a Saturday workshop in Lima, written in Spanish.&lt;/li&gt;&#10;&lt;li&gt;Seven conditions: six public design skills and a control with no skill.&lt;/li&gt;&#10;&lt;li&gt;Three runs per condition, same model and settings, fresh session each time.&lt;/li&gt;&#10;&lt;li&gt;Forty people voted blind for the best page in each of three rounds.&lt;/li&gt;&#10;&lt;/ul&gt;&#10;&lt;h2 id="results"&gt;Results&lt;/h2&gt;&#10;&lt;figure&gt;&#10; &lt;div class="plot" role="img" aria-label="Share of blind votes. The dot is the mean of three runs; the line runs from the worst run to the best."&gt;&#10; &lt;div class="plot-row"&gt;&lt;span class="plot-l"&gt;Skill A&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:30.0%;width:50.0%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:56.7%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;17%&lt;/span&gt;&lt;/div&gt;&#10; &lt;div class="plot-row"&gt;&lt;span class="plot-l"&gt;Skill B&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:36.7%;width:36.7%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:53.3%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;16%&lt;/span&gt;&lt;/div&gt;&#10; &lt;div class="plot-row"&gt;&lt;span class="plot-l"&gt;Skill C&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:20.0%;width:63.3%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:50.0%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;15%&lt;/span&gt;&lt;/div&gt;&#10; &lt;div class="plot-row ctl"&gt;&lt;span class="plot-l"&gt;No skill&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:33.3%;width:30.0%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:46.7%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;14%&lt;/span&gt;&lt;/div&gt;&#10; &lt;div class="plot-row"&gt;&lt;span class="plot-l"&gt;Skill D&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:26.7%;width:40.0%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:46.7%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;14%&lt;/span&gt;&lt;/div&gt;&#10; &lt;div class="plot-row"&gt;&lt;span class="plot-l"&gt;Skill E&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:30.0%;width:30.0%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:43.3%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;13%&lt;/span&gt;&lt;/div&gt;&#10; &lt;div class="plot-row"&gt;&lt;span class="plot-l"&gt;Skill F&lt;/span&gt;&lt;span class="plot-t"&gt;&lt;i class="rng" style="left:16.7%;width:40.0%"&gt;&lt;/i&gt;&lt;i class="pt" style="left:36.7%"&gt;&lt;/i&gt;&lt;/span&gt;&lt;span class="plot-n"&gt;11%&lt;/span&gt;&lt;/div&gt;&#10; &lt;/div&gt;&#10; &lt;figcaption&gt;Share of blind votes. The dot is the mean of three runs; the line runs from the worst run to the best.&lt;/figcaption&gt;&#10;&lt;/figure&gt;&#10;&#10;&lt;table&gt;&#10;&#9;&lt;thead&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;th&gt;Condition&lt;/th&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;th style="text-align: right"&gt;Mean&lt;/th&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;th style="text-align: right"&gt;Range&lt;/th&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;th style="text-align: right"&gt;Spread (pts)&lt;/th&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&lt;/thead&gt;&#10;&#9;&lt;tbody&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;Skill A&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;17%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;9–24%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;15&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;Skill B&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;16%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;11–22%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;11&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;Skill C&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;15%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;6–25%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;19&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;&lt;strong&gt;No skill&lt;/strong&gt;&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;&lt;strong&gt;14%&lt;/strong&gt;&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;&lt;strong&gt;10–19%&lt;/strong&gt;&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;&lt;strong&gt;9&lt;/strong&gt;&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;Skill D&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;14%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;8–20%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;12&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;Skill E&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;13%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;9–18%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;9&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&#9;&#9;&lt;tr&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td&gt;Skill F&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;11%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;5–17%&lt;/td&gt;&#10;&#9;&#9;&#9;&#9;&#9;&lt;td style="text-align: right"&gt;12&lt;/td&gt;&#10;&#9;&#9;&#9;&lt;/tr&gt;&#10;&#9;&lt;/tbody&gt;&#10;&lt;/table&gt;&#10;&lt;p&gt;The best and worst means are 6 points apart. The average spread between runs of the same condition is 12 points. The control sits in the middle of the table.&lt;/p&gt;</description></item><item><title>Do subagents cut context use on a legacy migration?</title><link>https://renatogaray.dev/labs/ejemplo-subagents-context/</link><pubDate>Sat, 14 Nov 2026 00:00:00 +0000</pubDate><guid>https://renatogaray.dev/labs/ejemplo-subagents-context/</guid><description>&lt;p&gt;Example text. The real lab would describe the hypothesis, the setup, the results and their limits.&lt;/p&gt;</description></item><item><title>Is hybrid retrieval worth it below 10,000 documents?</title><link>https://renatogaray.dev/labs/ejemplo-hybrid-small-corpus/</link><pubDate>Wed, 11 Nov 2026 00:00:00 +0000</pubDate><guid>https://renatogaray.dev/labs/ejemplo-hybrid-small-corpus/</guid><description>&lt;p&gt;Example text. The real lab would describe the hypothesis, the setup, the results and their limits.&lt;/p&gt;</description></item></channel></rss>