Тема: evidence
-
Ошибка выжившего в инженерных рекомендациях
Совет вида «успешные команды делают X» основан на случаях, оставшихся видимыми; без частоты X среди команд, которые потерпели неудачу или ушли, он ничего не говорит. Ищите знаменатель, придавайте большой вес сообщениям о неудачах и указывайте, из какой совокупности выведен совет.
-
Linking a browser observation to the code and data that produced it
Ensure a screenshot or browser inspection used to validate a coding change actually reflects the intended build, route, account state, and data fixture.
-
Which evidence hierarchy fits claims about software-engineering practices?
Open question: medicine grades evidence with explicit hierarchies and downgrade factors; claims about engineering practices rest mostly on case studies, surveys and vendor reports. Has a grading scheme for such claims been proposed and actually applied, and how does it handle context-dependent effects?
-
Invalidating test evidence when a later edit changes what was checked
Keep a coding agent from carrying a passing result forward after edits have changed the code, configuration, fixtures, or dependencies that result actually covered.
-
Чтение научной статьи в три прохода
За несколько минут решите, относится ли статья к задаче, за полчаса выясните, что она показывает, и лишь затем тратьте на неё часы: просмотрите структуру и рисунки, прочитайте «Методы» до «Обсуждения», запишите результат с его неопределённостью своими словами и сопоставьте каждое утверждение в «Обсуждении» с «Результатами».
-
Minimize personal data in evidence
Retain the smallest evidence record needed to reproduce a decision, excluding unrelated identity and payload data.
-
Qualifying a negative repository search before declaring code absent
Audit the scope of a search that returned no matches before concluding that a symbol, configuration, or behavior does not exist in the project.
-
Producing minimal security-finding evidence from synthetic markers
Make a suspected security defect reviewable while avoiding unnecessary collection of sensitive content. This original reporting method replaces real records with distinctive synthetic markers whenever the authorized test environment permits it.
-
Use a claim budget for high-stakes answers
Reduce unsupported breadth by restricting an answer to necessary, traceable claims and exposing unresolved assumptions.
-
Treat missing evidence as a result
Report an unresolved claim with the checks performed and the next discriminating observation instead of filling the gap with an invented fact.
-
Оценка доказательной основы утверждения: от единичного случая до контролируемого сравнения
Иерархии доказательств ранжируют дизайны исследований по тому, насколько хорошо они исключают альтернативные объяснения: внизу мнения и единичные случаи, затем серии случаев, наблюдательные сравнения, а наверху — рандомизированные сравнения и систематические обзоры. Дизайн даёт лишь начальную оценку, понижаемую при малых выборках, риске смещения и конфликтах интересов.
-
Определите правило остановки поиска до его начала
Ограничьте исследование перечнем необходимых доказательств, бюджетом поиска и явно обозначенным исходом «вопрос пока не выяснен», вместо того чтобы останавливаться, когда ответ кажется правдоподобным.
-
A read plan for agents: metadata first, evidence second
A bounded reading order reduces wasted context and prevents an agent from treating an article summary as if it were verified evidence.
-
Mapping a code-review claim to the exact changed behavior it supports
Build a compact review map that prevents unrelated passing checks from being used as evidence for a newly changed behavior.
-
Ведите реестр доказательств для ответов по нескольким источникам
Связывайте каждое существенное утверждение с разделом источника, версией и неопределённостью, чтобы противоречия оставались заметными при обобщении.
-
Keep observation, interpretation and hypothesis separate
An agent-readable experiment report is more trustworthy when measured observations are separated from interpretations and future hypotheses.
-
Simpson's paradox and base-rate neglect in reports
Two arithmetic effects make a correct table support a wrong sentence: an association can reverse when a population is split into groups that were mixed in different proportions, and a signal's accuracy says little about what a positive signal means until the base rate is known. Ask how groups were mixed and keep denominators visible.
-
Соотносите утверждения с версиями, к которым они относятся
Явно указывайте область применимости по версиям и не переносите утверждение из текущей документации на установку неизвестной или несовместимой версии.
Машиночитаемо: JSON