← Whole ranking · mysummit.school AI model benchmark

OpenAI

GPT-5.6 Terra

A newer version of this line was tested: GPT-6.1 Terra →

Strongest in «People management» (8.2), weakest in «Automation» (7.2).

Group
5–14 of 74on one level with Qwen 4 Max, GPT-6 Luna, Inkling 2 Small and 3 more
Overall score
7.7 of 10
API price of a test answer
$0.098
Data
November 2026

Where it helps, where to check

This model’s own answers to two benchmark tasks: the opening, the full answer and what both judges noted. One task per category, the same for every model.

Strongest: People management · 8.2The two strongest developers can't work together

A lead of ten developers at a fintech: for four months two irreplaceable seniors – a slow architect and a fast pragmatist – have been in conflict, and the team is starting to fall apart.

Full task

I lead a development team at a fintech startup. I have 10 direct reports, and I've been in this role for three years. There's a situation I haven't been able to resolve for four months now, and it's starting to break the team apart. I have two of the strongest developers – Sergey Volkov and Diana Karpova. Both are Senior Engineers, both are irreplaceable, and I can't afford to lose either of them. Sergey is an architect at heart. Six years of experience, an incredibly deep understanding of systems, always thinking several steps ahead. His code reads like an essay – clean, documented, polished. The problem: he works slowly, methodically, and doesn't like to rush. During review he might leave 40 comments on a PR and wait until every single one is addressed. When asked a question at standup, he gives a three-minute detailed answer complete with historical context. Sergey is convinced that speed is the enemy of quality, and that "fast means twice." Diana is a next-generation product engineer. Four years of experience, but her iteration speed is phenomenal. She can ship a working feature in two days where Sergey would plan for a week. Diana thinks in terms of the user: "why make it perfect when you can make it good and test it on real data." She readily cuts architectural corners for the sake of speed – and this is a deliberate stance on her part, not laziness. Over the past four months, a quiet war has been going on between them. Sergey regularly sends her PRs back with fundamental architectural revisions – sometimes three days after submission. Diana has stopped waiting for his review and started asking other colleagues to approve her PRs instead. Sergey noticed this and wrote to me: "If we're not upholding review standards, I don't understand why I'm here." Diana said to my face: "Sergey is slowing down the whole team. I spend more time on his comments than on actually writing code." At the last team retro, Diana said: "We need to agree on what 'good enough' means – we can't turn every PR into a term paper." Sergey responded: "If we can't maintain minimal engineering standards, let's be honest with the business and say we're building prototypes, not a product." The other eight people went silent and stared at the floor. The situation is complicated by the fact that both of them are right in their own way. We really have accumulated technical debt from quick fixes made in past years – Sergey warned about this. At the same time, we're in a mode of serious competition, and speed of shipping features to market is critical – here Diana is right. I've talked to each of them separately. Sergey doesn't perceive the problem as an interpersonal conflict – for him it's a matter of professional standards, and he's not willing to lower them. Diana perceives Sergey as someone hiding behind "quality" to control her work, and she's starting to boil over. She's already hinted once that "there are places that value speed." I don't want to forcibly "reconcile" them or pretend this is simply a communication issue. This is a fundamental values divergence in engineering philosophy, and both people are smart – they understand this. Help me work through this situation. I'm interested in the following: 1. How do you see the root problem – is this a conflict of people, a conflict of values, or a managerial failure on my part? What's actually going on? 2. I have several possible courses of action – splitting their areas of responsibility, working out a team agreement on review standards, holding a structured three-way conversation, or picking one philosophy and asking the other person to adapt to it. Which of these is realistic and which is likely not to work? 3. How should I talk to each of them – what should I say to Sergey, what should I say to Diana, so that they both feel heard, but at the same time understand that their current behavior is unacceptable? 4. Is there a scenario where I'll have to choose one of them – and if so, how should I think about that? 5. What should I concretely do in the next two weeks? Don't give me an HR-sanitized answer about "respect and dialogue." Give me an honest assessment of the situation and a concrete action plan.

System line: You are a team management assistant for managers.

Translated from Russian: the models got the Russian text.

Original in Russian

Я руковожу командой разработки в финтех-стартапе, у меня 10 прямых подчинённых, я в этой роли уже три года. Есть ситуация, которую я не могу разрешить уже четыре месяца, и она начинает разрушать команду. У меня два сильнейших разработчика – Сергей Волков и Диана Карпова. Оба Senior Engineer, оба незаменимы, обоих я не могу позволить себе потерять. Сергей – архитектор в душе. Шесть лет опыта, невероятно глубокое понимание систем, всегда думает на несколько шагов вперёд. Его код читается как эссе – чистый, документированный, выверенный. Проблема: он работает медленно, методично, не любит спешить. На ревью он может оставить 40 комментариев к PR и ждать, пока каждый будет разобран. Когда ему задают вопрос на стендапе, он даёт трёхминутный развёрнутый ответ с историческим контекстом. Сергей убеждён, что скорость – это враг качества, и что «быстро – значит дважды». Диана – продуктовый инженер нового поколения. Четыре года опыта, но скорость итерации феноменальная. Она умеет выпустить рабочую фичу за два дня там, где Сергей планировал бы неделю. Диана мыслит через пользователя: «зачем делать идеально, если можно сделать хорошо и проверить на реальных данных». Она легко срезает углы в архитектуре ради скорости – и это её осознанная позиция, не лень. Последние четыре месяца между ними идёт тихая война. Сергей регулярно возвращает её PR с фундаментальными архитектурными правками – иногда через три дня после подачи. Диана перестала ждать его ревью и начала просить других коллег approve'ить её PR. Сергей заметил это и написал мне: «Если мы не поддерживаем стандарты ревью, я не понимаю зачем я здесь». Диана сказала мне в лицо: «Сергей тормозит всю команду. Я трачу больше времени на его комментарии, чем на написание кода». На последнем командном ретро Диана сказала: «Нам нужно договориться, что значит "достаточно хорошо" – нельзя каждый PR превращать в курсовую работу». Сергей ответил: «Если мы не можем поддерживать минимальные инженерные стандарты, давайте честно скажем бизнесу, что мы строим прототипы, а не продукт». Остальные восемь человек замолчали и смотрели в пол. Ситуацию усложняет то, что оба по-своему правы. У нас действительно накопился технический долг из-за быстрых решений прошлых лет – Сергей об этом предупреждал. При этом мы в режиме серьёзной конкуренции, и скорость вывода фич на рынок критична – здесь Диана права. Я разговаривал с каждым по отдельности. Сергей не воспринимает проблему как межличностный конфликт – для него это вопрос профессиональных стандартов, и он не готов их снижать. Диана воспринимает Сергея как человека, который прячется за «качеством», чтобы контролировать её работу, и начинает закипать. Она уже один раз намекнула, что «есть места, где ценят скорость». Я не хочу принудительно «примирять» их или делать вид, что это просто коммуникационный вопрос. Это фундаментальное ценностное расхождение в инженерной философии, и оба человека умные – они это понимают. Помоги мне разобраться с этой ситуацией. Меня интересует следующее: 1. Как ты видишь корневую проблему – это конфликт людей, конфликт ценностей, или управленческий провал с моей стороны? Что на самом деле происходит? 2. У меня есть несколько вариантов действий – разделить их зоны ответственности, выработать командное соглашение по стандартам ревью, провести структурированный разговор втроём, или выбрать одну философию и попросить второго подстроиться. Что из этого реалистично и что скорее всего не сработает? 3. Как мне разговаривать с каждым из них – что говорить Сергею, что говорить Диане, чтобы они оба почувствовали, что их услышали, но при этом поняли, что текущее поведение неприемлемо? 4. Есть ли сценарий, где мне придётся выбрать одного из них – и если да, как я должен об этом думать? 5. Что я должен сделать в следующие две недели конкретно? Не давай мне HR-корректный ответ про «уважение и диалог». Дай мне честную оценку ситуации и конкретный план действий.

GPT-5.6 Terra group 5–14 · VPN needed

Translated from Russian: the model answered in Russian.

Unpleasant truth: this is no longer a conflict between Sergei and Diana. It is a conflict that the team is forced to act out instead of you, because you have not set the rules for when speed matters more than durability, and when the opposite is true, and who has the right to take on that risk.

Right now Sergei has effectively become the informal owner of architectural standards, and Diana the informal owner of delivery speed. Both are trying to manage the system through PR reviews, because there is no other decision-making mechanism. The PR has turned into a place where people argue not about a specific change, but about the company's strategy. This is guaranteed to be destructive.

Original in Russian

Неприятная правда: это уже не конфликт Сергея и Дианы. Это конфликт, который команда вынуждена разыгрывать вместо вас, потому что вы не задали правила, когда скорость важнее долговечности, а когда наоборот, и кто имеет право принимать этот риск.

Сейчас Сергей фактически стал неформальным владельцем архитектурных стандартов, а Диана – неформальным владельцем скорости поставки. Оба пытаются управлять системой через PR-ревью, потому что другого механизма принятия решений нет. PR превратился в место, где спорят не о конкретном изменении, а о стратегии компании. Это гарантированно разрушительно.

Read the full answer · 2,720 words

An unpleasant truth: this is no longer a conflict between Sergey and Diana. It's a conflict the team is forced to act out in your place, because you haven't set the rules for when speed matters more than durability, and when the opposite is true, and who has the right to take on this risk.

Right now, Sergey has effectively become the informal owner of architectural standards, and Diana has become the informal owner of delivery speed. Both are trying to manage the system through PR reviews, because there is no other decision-making mechanism. The PR has turned into a place where people argue not about a specific change, but about company strategy. This is guaranteed to be destructive.

1. What is actually happening

This is simultaneously three problems

1. A conflict of values – yes. Sergey is optimizing for system stability, predictability, and the future cost of changes. Diana is optimizing for market learning, time-to-market, and user value right now.

This isn't a matter of "who is right." In fintech, both logics are necessary:

  • you can't endlessly "quickly test hypotheses" on parts of the system critical to money, security, audit, and data;
  • you can't build architecture three years ahead for a hypothesis the market might reject in two weeks.

2. A conflict of behavior – also yes. It has already gone beyond professional disagreement.

Sergey's unacceptable actions:

  • holding a PR for three days without an explicit SLA;
  • using review to fundamentally rework a solution if the architectural question wasn't raised earlier;
  • writing dozens of comments without distinguishing critical from optional ones;
  • de facto blocking a colleague's work based on his personal quality standard.

Diana's unacceptable actions:

  • bypassing necessary review not through an agreed process, but by seeking a "convenient approve";
  • taking on architectural risk alone when the consequences extend beyond her area;
  • turning a fair complaint about the process into a personal interpretation: "he hides behind quality to maintain control."

3. This is a management failure – in the operational sense. Not a moral one, but a very concrete one: the team lacks:

  • engineering principles with priorities and exceptions;
  • criteria for "good enough";
  • a classification of changes by risk;
  • a review SLA;
  • a mechanism for resolving architectural disputes;
  • explicit owners of technical debt;
  • a transparent decision on how much engineering risk the business is consciously willing to accept.

Until this exists, you will keep getting the same conflict with different people.

The main diagnosis

Sergey and Diana aren't arguing about code. They're arguing about the right to take on risk on behalf of the company.

This right should not belong to:

  • Sergey – because quality cannot be the only criterion;
  • Diana – because speed cannot be the only criterion;
  • a random set of approvals in a PR – because that is not a management mechanism.

It must be formalized through a clear decision-making system, for which you are responsible together with product and technical leadership.


2. Evaluating your options

Option A: divide areas of responsibility

Necessary, but not a solution in itself.

A good division might look like this:

  • Sergey is responsible for platform components, critical domains, security, payment/money flows, data integrity, observability, architectural standards, and the technical debt reduction plan.
  • Diana leads experimental product directions, user flows, fast MVPs, adoption metrics, and rapid iterations.

But the danger is obvious: you might create a "caste of correct engineers" and a "caste of fast hackers." In six months, you'll have two incompatible systems, and people will believe their career path is determined by ideology, not engineering level.

The right approach: divide not people by philosophy, but types of work by level of risk and reversibility of the decision.

For example:

Type of change Mode
Money, access, PII, regulatory requirements, irreversible migrations Quality-first: design before code, mandatory architecture review, tests, strict rollout
Key domain or shared platform Balanced mode: short RFC/ADR, review SLA, explicit debt plan
UI, isolated product experiment, reversible logic Speed-first: lightweight review, feature flag, metrics, quick rollback
Temporary solution Allowed only with an owner, a review date, and a described risk

This gives Diana room for speed, while giving Sergey a legitimate mechanism to protect critical areas.

Option B: team agreement on review

Necessary, but not sufficient.

If you just say "agree to respect each other," nothing will change. What's needed is not a set of wishes, but a working protocol.

Minimum rules:

  1. Review SLA.

    • First response: for example, within one business day.
    • If the reviewer doesn't respond within the SLA, the author can escalate or get a different assigned reviewer.
    • Critical PRs shouldn't depend on one person's availability.
  2. Types of comments.

    • blocker – a violation of security, correctness, regulatory requirements, explicit standards, or incident risk.
    • should – an important improvement, but a conscious risk can be accepted.
    • nit – an optional remark that doesn't block the merge.
    • question – a request for context, doesn't block without an explicit reason.

    A comment without classification does not block the PR.

  3. Architectural disputes are not resolved in a long PR thread. If a comment requires substantial rework, the reviewer must:

    • explain the risk;
    • propose an alternative;
    • take the question to a short decision session: a 20–30 minute sync or an ADR.
  4. Major decisions – before implementation. If a change affects contracts, the data model, shared components, scalability, security, or future extensibility, the author writes a short RFC/ADR before starting the work. Not ten pages – one or two: context, options, decision, risks, consequences.

  5. A temporary solution is not a prohibition, it's a contract. It needs:

    • the reason speed is being chosen now;
    • the risk;
    • the owner;
    • a criterion or date for revisiting the question.
  6. Approve isn't "I like the code." It's confirmation that the change matches the team's agreed risk level and process.

But remember: review rules don't replace your decision about priorities. If the business requires a feature by a specific date, you must explicitly say what risk the team is accepting and what is being postponed.

Option C: a structured conversation with all three of you

Needed, but it should be held after separate conversations and with a clear goal.

The goal is not for them to "understand each other" or reach a philosophical consensus. There probably won't be full consensus.

The goal of the meeting:

  1. name the problem;
  2. establish that both approaches are legitimate in different contexts;
  3. present the new decision-making system;
  4. obtain an explicit commitment to stop the current behavior patterns.

This should be neither therapy nor a debate of "quality versus speed." If you let them argue at the worldview level, Sergey will win on logic, Diana will win on pragmatism, and the team will go quiet again.

Option D: choose one philosophy and force the other to adapt

As a permanent strategy – a bad decision.

If you choose Sergey:

  • product pace will drop;
  • Diana will likely leave;
  • the team will learn that it's safer not to show initiative;
  • architectural quality will grow, but there's no guarantee you'll manage to test the market hypotheses you need.

If you choose Diana:

  • technical debt and risk will accumulate faster in fintech;
  • Sergey will likely leave or become a toxic "quality guardian";
  • you may win a few releases and lose the product's stability, security, or the team's ability to grow.

Choosing one philosophy is acceptable only if it's a conscious company decision about stage and strategy, not a way to end the conflict. Even then, the choice should be contextual: for example, "this quarter we're accelerating validation of a certain hypothesis segment, but the payment flow, access, and data remain in strict mode."


3. How to talk to Sergey and Diana

Start with separate conversations. Don't try to start with a meeting of all three: they'll come there to defend their positions, not to solve the problem.

Conversation with Sergey

Your task: acknowledge his value and his correctness regarding the substance of the risk, while taking away his right to unilaterally set the quality bar.

You could say something like this:

Sergey, I agree with your main thesis: we have real technical debt, and the consequences of past quick decisions are already visible. Your ability to see these consequences in advance is critically important to the team. I'm not asking you to lower your professional bar or stop raising risks.

But right now your expertise is being applied in a way that blocks the team. When fundamental objections appear several days into a PR, and dozens of remarks look like mandatory conditions for merging, review stops being quality control and becomes a mechanism for unilaterally making architectural decisions.

This is not your role alone. You are obligated to raise risks – but you can't unilaterally decide that every PR must meet your maximum standard.

What I expect from you: raise architectural questions in advance, label comments by criticality, meet the SLA, and distinguish a real threat to the system from a preference for a more elegant solution. For fundamental changes – initiate a short design discussion, rather than sending finished work back for a week of rework.

I'm taking on the task of creating rules so that quality is protected by process, not by your personal insistence. But in return I need you to stop using the PR as a battlefield for architectural warfare.

It's important to ask him directly:

  • What 3–5 classes of risk does he consider unacceptable without strict control?
  • Which of his recent comments would he himself classify as blocker, and which as preferences?
  • What decisions can the team make without him?
  • What does he need to trust the process, rather than personally controlling everything?

His fear is probably: "If I loosen control, the team will create a problem again that will take years to clean up." Don't dismiss this fear. But make it clear: control must be systemic, not personal.

Conversation with Diana

Here it's important not to act as if "fast" automatically means "modern and correct." Support her need for pace – and set a boundary on autonomy.

Diana, I agree: right now the review process is slowing down delivery and making the cost of your work unpredictable. You're right that not every feature needs to be designed as a system for five years ahead. Your ability to quickly turn a hypothesis into a working product is one of the team's most important capabilities.

But I won't support bypassing the process by seeking an approve from whoever is least likely to argue. If a change carries architectural, security, or operational risk, it can't be legitimized just because a different reviewer was found.

I will fix the system: there will be a clear SLA, criticality levels for comments, and zones where you can act quickly and independently. But in return I need you not to automatically interpret disagreement as control, not to bypass agreed review requirements, and to explicitly document the debt that a temporary solution creates.

Speed isn't the right to ignore consequences. It's the ability to take reversible steps quickly and consciously.

Ask her:

  • Which specific review patterns create the biggest delays?
  • Which changes does she consider needing a lightweight mode?
  • How is she willing to document technical trade-offs?
  • Where does she agree that "let's do it fast" is unacceptable – for example, money, access rights, PII, irreversible migrations?

Her fear is probably: "Any initiative will be drowned in endless discussion, and I'll be left responsible for undelivered value." Show her through a concrete process that this will change.

Conversation with all three

Format – 45–60 minutes. You lead firmly.

Structure:

  1. Opening from you.

    This is not a meeting to determine which of you is right. You're both right in your diagnosis and both wrong in your current way of acting. We're not changing personalities, we're changing the decision-making system.

  2. Each person states their position in 2–3 minutes without interruption. Not "what the other person is doing wrong," but:

    • what risk to the company they see;
    • what they need from the process.
  3. You establish a shared goal.

    We need a product that learns quickly from the market and doesn't become dangerous, unmanageable, or unmaintainable.

  4. You present the rules, rather than asking them to invent them from scratch. You can discuss details, but don't give them veto power over the principle itself.

  5. Explicit commitments.

    • Sergey: doesn't block non-critical things, meets the SLA, takes architectural disputes out of the PR.
    • Diana: doesn't bypass mandatory reviews, documents trade-offs, brings in the right people in advance for high-risk changes.
    • You: ensure disputed questions are resolved on time and protect the agreed-upon mode from eroding.
  6. Consequence.

    If, after the rules are introduced, there's a repeat of bypassing review or personal blocking without justification, I will treat it as a problem of performing the role, not as a healthy professional dispute.

This is not a threat. This is a normal management boundary.


4. When you really will have to choose one person

Yes, such a scenario is possible. But you need to choose not between "quality" and "speed," but between people who are able or unable to work within the needed system.

You will have to make a personnel decision if, after clear rules are set, one of them:

  • sabotages the agreed-upon process;
  • continues to personalize technical disagreements;
  • refuses to acknowledge that decisions are context-dependent;
  • demands final veto rights outside their explicitly assigned area;
  • deliberately bypasses agreed review / security / architecture gates;
  • destroys psychological safety for the rest of the team;
  • doesn't change observed behavior after specific feedback and a deadline.

It is critically important: don't fire or "choose" a person based on their philosophy. Choose based on two criteria:

  1. Alignment with the company's real needs over a 12–18 month horizon. What is the main risk: failing to find product-market fit, or breaking/being unable to sustain an already critical system?

  2. The ability to scale others, not just to be a strong individual contributor. Of two strong engineers, more valuable to a leader is not the one who is always technically right, but the one who can turn their strength into a working team system.

If Sergey is unable to delegate standards to the process and to other engineers, he may be an outstanding architect but a poor leader of influence.

If Diana is unable to make risk visible and respect boundaries in critical systems, she may be an outstanding product engineer but a dangerous owner of decisions in fintech.

And even more bluntly: being "irreplaceable" is a warning sign. If one person's departure could put the team in a critical position, that is a separate management risk. Regardless of how the conflict is resolved, start reducing the bus factor: documentation, paired ownership, review rotation, architectural decisions shared openly.


5. A concrete plan for the next two weeks

First 2 days: stop the deterioration

1. Hold two separate 45–60 minute conversations. Don't put this off until the next retro.

The outcome of each conversation isn't just "they felt heard" – it's a written record of:

  • the observed behavior;
  • its impact;
  • the expected change;
  • what you're committing to do;
  • a check-in date.

2. Introduce a temporary rule immediately.

Write a short message to the team:

  • A PR cannot be blocked for more than one business day without a response.
  • All blocking comments must be labeled and include an explanation of the risk.
  • If a dispute requires substantial redesign, it goes to a separate design discussion; the PR doesn't become an endless debate.
  • Until the permanent process is approved, disputed decisions are escalated to you within one business day.

This isn't the final policy. This is an emergency brake.

3. Review the last 5–10 conflicted PRs. Not to find someone to blame. Identify patterns:

  • how long the review took;
  • which comments were genuinely critical;
  • how many changes were matters of taste;
  • which disputes could have been moved to before development started;
  • what technical debt was actually created or prevented.

This will give you concrete examples rather than a conversation based on impressions.

Days 3–5: create a working system

4. Formulate a one-page Engineering Decision Framework.

It should contain:

  • categories of changes by risk;
  • who is needed in review for each category;
  • the SLA;
  • definitions of blocker / should / nit;
  • criteria for when an RFC/ADR is required;
  • rules for temporary solutions;
  • the escalation path;
  • the principle: "we make reversible decisions quickly, irreversible ones more slowly and consciously."

For fintech, list the non-negotiables separately:

  • security;
  • access and authorization;
  • personal data;
  • financial correctness;
  • audit and compliance;
  • migrations and irreversible changes;
  • reliability of critical user and payment flows.

There should be no "let's speed up, and we'll sort it out later" here.

5. Create a registry of consciously accepted technical debt. Not a huge backlog of 500 cards, but a living list with:

  • a description of the debt;
  • the risk;
  • the owner;
  • the condition under which it needs to be paid off;
  • priority.

The phrase "we'll create a ticket" is not debt management. A ticket must have an owner and a reason it will ever be worked on.

6. Reserve explicit capacity for technical debt. For example, 15–20% of team capacity or one specific engineering slot each sprint – depending on your working mode.

If you don't allocate resources, Sergey will be right about the main thing: "the debt was acknowledged, but nothing changed." And he'll start trying to collect on that debt through PRs again.

Second week: agree and test in practice

7. Hold the meeting with all three of you. No more than an hour, following the structure above. Send the new rules in advance so the meeting doesn't become a session for composing them from scratch together.

8. Hold a 60–90 minute team session on the rules. Don't ask: "What would be most comfortable for everyone?" Ask:

  • Where do the rules create risk?
  • What examples of changes belong to each level?
  • What SLA is realistic?
  • What does a good one-page ADR look like?
  • What are we willing to consider a temporary solution?

Let the team influence the details, but not the necessity of the process.

9. Assign owners, but don't create two camps.

  • Sergey could become the owner of engineering guardrails / architectural practice – with measurable expectations: ADR templates, a standards catalog, documentation of critical zones, a reduction in the number of late architectural surprises.
  • Diana could become the owner of experimentation / delivery practice – feature flags, metrics, reversibility of decisions, a "quick experiment" template, reduced cycle time.

But each must participate in reviewing the other's area. Otherwise you'll cement the split.

10. Measure the first signals after two weeks. Look at facts, not feelings:

  • median time to first review;
  • median PR cycle time;
  • number of blocking comments;
  • share of architectural disputes identified before coding started;
  • number of emergency fixes / rollbacks / incidents;
  • number of consciously registered temporary solutions;
  • a short anonymous team pulse: "Can I safely express disagreement?", "Do I understand what is considered sufficient quality?", "Is the review process predictable for me?"

What's important for you personally not to do

  1. Don't become the judge of every PR. This will be temporarily necessary for escalations, but if you permanently resolve architectural disputes by hand, the team won't grow, and you'll become a bottleneck.

  2. Don't tell both of them "you're both right" and stop there. This sounds diplomatic, but is perceived as the absence of a decision. You need to add: "You're both right in your diagnosis of the risks, but I am establishing rules in which no risk gets automatic priority."

  3. Don't use retro as an arena for their conflict. Until the system is stabilized, public discussions will become the team silently watching the two most influential people fight.

  4. Don't promise speed without a price, or quality without a price. Every decision must have an explicit trade-off. Your job is to make the price visible and accept it consciously together with the business.

  5. Don't allow "irreplaceability" to become a permanent state. Irreplaceability isn't a compliment, it's operational debt. Start creating redundancy in knowledge and responsibility.

Your decision should sound roughly like this: "We are not choosing between quality and speed as if they were religions. We are choosing an approach based on risk, reversibility, and business value. And neither Sergey nor Diana will any longer determine this choice alone through a PR."

Original in Russian

Неприятная правда: это уже не конфликт Сергея и Дианы. Это конфликт, который команда вынуждена разыгрывать вместо вас, потому что вы не задали правила, когда скорость важнее долговечности, а когда наоборот, и кто имеет право принимать этот риск.

Сейчас Сергей фактически стал неформальным владельцем архитектурных стандартов, а Диана – неформальным владельцем скорости поставки. Оба пытаются управлять системой через PR-ревью, потому что другого механизма принятия решений нет. PR превратился в место, где спорят не о конкретном изменении, а о стратегии компании. Это гарантированно разрушительно.

1. Что на самом деле происходит

Это одновременно три проблемы

1. Конфликт ценностей – да.
Сергей оптимизирует под устойчивость системы, предсказуемость и стоимость изменений в будущем. Диана – под обучение рынком, time-to-market и ценность для пользователя сейчас.

Это не вопрос «кто прав». В финтехе обе логики необходимы:

  • нельзя бесконечно «быстро проверять гипотезы» на критичных для денег, безопасности, аудита и данных частях системы;
  • нельзя строить архитектуру на три года вперёд для гипотезы, которую рынок может отвергнуть через две недели.

2. Конфликт поведения – тоже да.
Он уже вышел за пределы профессионального несогласия.

Неприемлемые действия Сергея:

  • держать PR по три дня без явного SLA;
  • использовать ревью для фундаментальной переработки решения, если архитектурный вопрос не был поднят раньше;
  • писать десятки комментариев без разделения на критичные и факультативные;
  • де-факто блокировать работу коллеги за счёт личного стандарта качества.

Неприемлемые действия Дианы:

  • обходить нужное ревью не через согласованный процесс, а через поиск «удобного approve»;
  • принимать архитектурный риск в одиночку, если последствия выходят за пределы её зоны;
  • превращать справедливую претензию к процессу в персональную интерпретацию: «он прячется за качеством, чтобы контролировать».

3. Это управленческий провал – в операционном смысле.
Не моральный, а вполне конкретный: у команды нет:

  • инженерных принципов с приоритетами и исключениями;
  • критериев «достаточно хорошо»;
  • классификации изменений по риску;
  • SLA на ревью;
  • механизма решения архитектурных споров;
  • явных владельцев технического долга;
  • прозрачного решения, какой объём инженерного риска бизнес сознательно готов принять.

Пока этого нет, вы будете получать один и тот же конфликт с разными людьми.

Главный диагноз

Сергей и Диана спорят не о коде. Они спорят о праве принимать риск от имени компании.

Это право не должно принадлежать:

  • Сергею – потому что качество не может быть единственным критерием;
  • Диане – потому что скорость не может быть единственным критерием;
  • случайному набору approve в PR – потому что это не управленческий механизм.

Оно должно быть оформлено через понятную систему решений, за которую отвечаете вы вместе с продуктом и техническим руководством.


2. Оценка ваших вариантов

Вариант A: разделить зоны ответственности

Нужно сделать, но это не решение само по себе.

Хорошее разделение может выглядеть так:

  • Сергей отвечает за платформенные компоненты, критические домены, безопасность, платежные/денежные контуры, data integrity, observability, архитектурные стандарты и план снижения техдолга.
  • Диана ведёт экспериментальные продуктовые направления, пользовательские потоки, быстрые MVP, метрики внедрения и быстрые итерации.

Но опасность очевидна: вы можете создать «касту правильных инженеров» и «касту быстрых хакеров». Через полгода у вас будет две несовместимые системы, а люди будут считать, что их карьерный путь определяется идеологией, а не уровнем инженерности.

Правильный вариант: разделять не людей по философиям, а типы работы по уровню риска и обратимости решения.

Например:

Тип изменения Режим
Деньги, доступы, PII, регуляторные требования, необратимые миграции Quality-first: дизайн до кода, обязательное архитектурное ревью, тесты, строгий rollout
Ключевой домен или shared platform Сбалансированный режим: короткий RFC/ADR, review SLA, явный план долга
UI, изолированный продуктовый эксперимент, обратимая логика Speed-first: облегчённый review, feature flag, метрики, быстрый откат
Временное решение Допустимо только с owner, датой пересмотра и описанным риском

Это даёт Диане пространство для скорости, а Сергею – законный механизм защиты критических зон.

Вариант B: командное соглашение по ревью

Обязательно, но недостаточно.

Если сделать «договоритесь уважать друг друга», ничего не изменится. Нужен не набор пожеланий, а рабочий протокол.

Минимальные правила:

  1. SLA ревью.

    • Первый ответ: например, в течение одного рабочего дня.
    • Если ревьюер не отвечает в SLA, автор может эскалировать или взять другого назначенного ревьюера.
    • Критичные PR не должны зависеть от доступности одного человека.
  2. Типы комментариев.

    • blocker – нарушение безопасности, корректности, регуляторных требований, явных стандартов, риска инцидента.
    • should – важное улучшение, но можно принять осознанный риск.
    • nit – необязательное замечание, не блокирует merge.
    • question – запрос контекста, не блокирует без явной причины.

    Комментарий без классификации не блокирует PR.

  3. Архитектурный спор не решается в длинной ветке PR. Если комментарий требует существенной переработки, ревьюер обязан:

    • объяснить риск;
    • предложить альтернативу;
    • вынести вопрос в короткое решение: 20–30 минут синка или ADR.
  4. Крупное решение – до реализации. Если изменение затрагивает контракты, модель данных, shared components, масштабирование, безопасность или будущую расширяемость, автор пишет короткий RFC/ADR до начала работы. Не десять страниц – одна-две страницы: контекст, варианты, решение, риски, последствия.

  5. Временное решение – это не запрет, а контракт. Для него нужны:

    • причина, почему сейчас выбираем скорость;
    • риск;
    • владелец;
    • критерий или дата возврата к вопросу.
  6. Approve – не «мне нравится код». Это подтверждение, что изменение соответствует уровню риска и процессу команды.

Но помните: правила ревью не заменяют вашего решения о приоритетах. Если бизнес требует фичу к конкретной дате, вы должны явно сказать, какой риск команда принимает и что откладывает.

Вариант C: структурированный разговор втроём

Нужен, но проводить его надо после отдельных разговоров и с чёткой целью.

Цель не в том, чтобы они «поняли друг друга» или пришли к философскому консенсусу. Вероятно, полного консенсуса не будет.

Цель встречи:

  1. назвать проблему;
  2. зафиксировать, что оба подхода легитимны в разных контекстах;
  3. предъявить новую систему принятия решений;
  4. получить явное обязательство прекратить текущие паттерны поведения.

Это должна быть не терапия и не дебаты «качество против скорости». Если дать им спорить на мировоззренческом уровне, Сергей победит в логике, Диана – в прагматике, а команда снова замолчит.

Вариант D: выбрать одну философию и заставить другого подстроиться

Как постоянная стратегия – плохое решение.

Если вы выберете Сергея:

  • темп продукта упадёт;
  • Диана, вероятно, уйдёт;
  • команда усвоит, что инициативу безопаснее не проявлять;
  • архитектурное качество вырастет, но не факт, что вы успеете проверить нужные рыночные гипотезы.

Если выберете Диану:

  • техдолг и риск в финтехе будут накапливаться быстрее;
  • Сергей, вероятно, уйдёт либо станет токсичным «охранником качества»;
  • вы можете выиграть несколько релизов и проиграть устойчивость продукта, безопасность или способность команды развиваться.

Выбирать одну философию допустимо только если это осознанное решение компании о стадии и стратегии, а не способ закончить конфликт. Даже тогда выбор должен быть контекстным: например, «в этом квартале мы ускоряем проверку определённого сегмента гипотез, но платежный контур, доступы и данные остаются в строгом режиме».


3. Как поговорить с Сергеем и Дианой

Сначала – отдельные разговоры. Не пытайтесь начинать со встречи втроём: они придут туда защищать свои позиции, а не решать проблему.

Разговор с Сергеем

Ваша задача: признать его ценность и правоту по сути риска, но лишить его права единолично устанавливать порог качества.

Можно сказать примерно так:

Сергей, я согласен с твоим главным тезисом: у нас есть реальный технический долг, и последствия быстрых решений прошлых лет уже видны. Твоя способность видеть эти последствия заранее критически важна для команды. Я не собираюсь просить тебя снизить профессиональную планку или перестать поднимать риски.

Но сейчас твоя экспертиза применяется способом, который блокирует команду. Когда фундаментальные возражения появляются через несколько дней в PR, а десятки замечаний выглядят как обязательные условия merge, ревью становится не контролем качества, а механизмом одностороннего принятия архитектурных решений.

Это не твоя роль в одиночку. Ты обязан поднимать риски – но ты не можешь единолично определять, что каждый PR должен соответствовать твоему максимальному стандарту.

От тебя я ожидаю: заранее поднимать архитектурные вопросы, маркировать замечания по критичности, соблюдать SLA и отличать реальную угрозу системе от предпочтения более красивого решения. Для фундаментальных изменений – инициировать короткий дизайн-разбор, а не возвращать готовую работу на неделю переделки.

Я беру на себя создание правил, при которых качество будет защищено не твоей личной настойчивостью, а процессом. Но в ответ мне нужно, чтобы ты перестал использовать PR как поле для архитектурной войны.

Важно спросить его прямо:

  • Какие 3–5 классов рисков он считает неприемлемыми без строгого контроля?
  • Какие его последние комментарии он сам отнёс бы к blocker, а какие – к предпочтениям?
  • Какие решения команда может принимать без него?
  • Что ему нужно, чтобы доверять процессу, а не контролировать всё лично?

Его страх, вероятно: «Если я ослаблю контроль, команда снова создаст проблему, которую потом будут разгребать годы». Не обесценивайте этот страх. Но сделайте ясным: контроль должен быть системным, не персональным.

Разговор с Дианой

Здесь важно не делать вид, что «быстро» автоматически означает «современно и правильно». Поддержите её потребность в темпе – и обозначьте границу самостоятельности.

Диана, я согласен: сейчас процесс ревью тормозит поставку и делает стоимость твоей работы непредсказуемой. Ты права, что не каждую фичу нужно проектировать как систему на пять лет. Твоя способность быстро превращать гипотезу в работающий продукт – одна из самых важных компетенций команды.

Но я не поддержу обход процесса через поиск approve у тех, кто с меньшей вероятностью будет спорить. Если изменение несёт архитектурный, безопасностный или операционный риск, его нельзя легитимировать тем, что нашёлся другой ревьюер.

Я исправлю систему: будет понятный SLA, уровни критичности замечаний и зоны, где ты можешь действовать быстро и самостоятельно. Но в ответ мне нужно, чтобы ты не интерпретировала несогласие автоматически как контроль, не обходила согласованные review requirements и явно фиксировала долг, который создаёт временное решение.

Скорость – не право игнорировать последствия. Это способность быстро и осознанно делать обратимые шаги.

Спросите её:

  • Какие именно паттерны ревью создают наибольшую задержку?
  • Какие изменения она считает нуждающимися в облегчённом режиме?
  • Как она готова фиксировать технические компромиссы?
  • Где она согласна, что «сделаем быстро» недопустимо – например, деньги, права доступа, PII, необратимые миграции?

Её страх, вероятно: «Любая инициатива будет утоплена в бесконечной дискуссии, а на мне останется ответственность за недоставленную ценность». Покажите конкретным процессом, что это изменится.

Разговор втроём

Формат – 45–60 минут. Вы ведёте жёстко.

Структура:

  1. Открытие от вас.

    Это не встреча, где мы определим, кто из вас прав. Вы оба правы в части диагностики и оба неправы в текущем способе действия. Мы меняем не личности, а систему принятия решений.

  2. Каждый формулирует позицию в 2–3 минуты без перебиваний. Не «что другой делает не так», а:

    • какой риск для компании он видит;
    • что ему нужно от процесса.
  3. Вы фиксируете общую цель.

    Нам нужен продукт, который быстро учится на рынке и не становится опасным, неуправляемым или неподдерживаемым.

  4. Вы презентуете правила, а не просите их придумать с нуля. Вы можете обсуждать детали, но не отдавайте им право ветировать сам принцип.

  5. Явные обязательства.

    • Сергей: не блокирует не-критичные вещи, укладывается в SLA, выносит архитектурные споры из PR.
    • Диана: не обходит обязательные ревью, фиксирует компромиссы, подключает нужных людей заранее для high-risk изменений.
    • Вы: обеспечиваете решение спорных вопросов в срок и защищаете договорённый режим от размывания.
  6. Последствие.

    Если после введения правил повторяется обход ревью или персональное блокирование без обоснования, я буду рассматривать это как проблему исполнения роли, а не как здоровый профессиональный спор.

Это не угроза. Это нормальная управленческая граница.


4. Когда действительно придётся выбирать одного

Да, такой сценарий возможен. Но выбирать нужно не между «качеством» и «скоростью», а между людьми, которые способны или не способны работать в нужной системе.

Вам придётся принимать кадровое решение, если после ясных правил один из них:

  • саботирует договорённый процесс;
  • продолжает персонализировать технические разногласия;
  • отказывается признавать контекстность решений;
  • требует права финального вето вне своей явно назначенной зоны;
  • сознательно обходит agreed review / security / architecture gates;
  • разрушает психологическую безопасность остальной команды;
  • не меняет наблюдаемое поведение после конкретной обратной связи и срока.

Критически важно: не увольняйте или не «выбирайте» человека за его философию. Выбирайте по двум критериям:

  1. Соответствие реальным потребностям компании на горизонте 12–18 месяцев.
    Что является главным риском: не успеть найти product-market fit или сломать/не вытянуть уже критичную систему?

  2. Способность масштабировать других, а не только быть сильным индивидуальным исполнителем.
    Из двух сильных инженеров ценнее для руководителя не тот, кто всегда технически прав, а тот, кто может превращать свою сильную сторону в работающую командную систему.

Если Сергей не способен делегировать стандарты процессу и другим инженерам, он может быть выдающимся архитектором, но плохим лидером влияния.

Если Диана не способна делать риск видимым и соблюдать границы в критичных системах, она может быть выдающимся product engineer, но опасным владельцем решений в финтехе.

И ещё жёстче: «незаменимы» – тревожный сигнал. Если уход одного человека может поставить команду в критическое положение, это отдельный управленческий риск. Вне зависимости от исхода конфликта начните снижать bus factor: документация, парное владение, ротация ревью, архитектурные решения в общем доступе.


5. Конкретный план на следующие две недели

Первые 2 дня: остановить деградацию

1. Проведите два отдельных разговора по 45–60 минут.
Не откладывайте до следующего ретро.

Результат каждого разговора – не «они почувствовали себя услышанными», а письменная фиксация:

  • наблюдаемого поведения;
  • его влияния;
  • ожидаемого изменения;
  • того, что вы обязуетесь сделать;
  • даты проверки.

2. Введите временное правило немедленно.

Напишите команде коротко:

  • PR не может быть заблокирован более одного рабочего дня без ответа.
  • Все blocking-комментарии должны быть помечены и содержать объяснение риска.
  • Если спор требует существенного перепроектирования, он уходит в отдельный дизайн-разбор; PR не становится бесконечной дискуссией.
  • До утверждения постоянного процесса спорные решения эскалируются вам в течение одного рабочего дня.

Это не окончательная политика. Это аварийный тормоз.

3. Просмотрите последние 5–10 конфликтных PR.
Не для поиска виноватого. Выявите паттерны:

  • сколько времени заняло ревью;
  • какие комментарии были действительно критичны;
  • сколько правок были вкусовыми;
  • какие споры можно было перенести до начала разработки;
  • какой техдолг реально был создан или предотвращён.

Это даст вам конкретные примеры, а не разговор на уровне впечатлений.

Дни 3–5: создать рабочую систему

4. Сформулируйте одностраничный Engineering Decision Framework.

Он должен содержать:

  • категории изменений по риску;
  • кто нужен в ревью для каждой категории;
  • SLA;
  • определения blocker / should / nit;
  • критерии, когда нужен RFC/ADR;
  • правила временных решений;
  • путь эскалации;
  • принцип: «обратимые решения принимаем быстро, необратимые – медленнее и осознаннее».

Для финтеха отдельно перечислите non-negotiables:

  • безопасность;
  • доступы и авторизация;
  • персональные данные;
  • финансовая корректность;
  • аудит и compliance;
  • миграции и необратимые изменения;
  • надёжность критичных пользовательских и платёжных потоков.

Здесь не должно быть «ускоримся, а там разберёмся».

5. Создайте реестр техдолга, возникшего осознанно.
Не огромный backlog на 500 карточек, а живой список с:

  • описанием долга;
  • риском;
  • владельцем;
  • условием, когда его нужно погасить;
  • приоритетом.

Фраза «заведём тикет» не является управлением долгом. У тикета должен быть владелец и причина, почему он когда-либо будет взят в работу.

6. Забронируйте явную capacity на техдолг.
Например, 15–20% capacity команды или один конкретный инженерный слот в каждом спринте – в зависимости от вашего режима работы.

Если вы не выделите ресурс, Сергей будет прав в главном: «долг признали, но ничего не изменили». А он снова начнёт пытаться взыскивать этот долг через PR.

Вторая неделя: договориться и проверить в работе

7. Проведите встречу втроём.
Не более часа, по структуре выше. Вышлите новые правила заранее, чтобы встреча не стала их совместным сочинением с нуля.

8. Проведите 60–90-минутную командную сессию по правилам.
Не спрашивайте: «Как нам всем комфортнее?»
Спросите:

  • Где правила создают риск?
  • Какие примеры изменений отнести к каждому уровню?
  • Какой SLA реалистичен?
  • Как выглядит хороший ADR на одну страницу?
  • Какие решения мы готовы считать временными?

Дайте команде влиять на детали, но не на необходимость процесса.

9. Назначьте владельцев, но не создавайте два лагеря.

  • Сергей может стать владельцем engineering guardrails / архитектурной практики – с измеримыми ожиданиями: шаблоны ADR, каталог стандартов, документация критических зон, снижение числа поздних архитектурных сюрпризов.
  • Диана может стать владельцем практики экспериментов / delivery – feature flags, метрики, обратимость решений, шаблон «быстрого эксперимента», сокращение cycle time.

Но каждый должен участвовать в ревью зоны другого. Иначе вы закрепите раскол.

10. Через две недели измерьте первые сигналы. Смотрите не на ощущения, а на факты:

  • median time to first review;
  • median PR cycle time;
  • число блокирующих комментариев;
  • доля архитектурных споров, выявленных до начала кодинга;
  • число emergency fixes / откатов / инцидентов;
  • количество осознанно зарегистрированных временных решений;
  • короткий анонимный pulse команды: «Могу ли я безопасно выражать несогласие?», «Понимаю ли я, что считается достаточным качеством?», «Предсказуем ли для меня процесс ревью?»

Что вам лично важно не делать

  1. Не становиться судьёй каждого PR.
    Это временно понадобится для эскалаций, но если вы навсегда будете решать архитектурные споры вручную, команда не вырастет, а вы станете bottleneck.

  2. Не говорить обоим “вы оба правы” и на этом заканчивать.
    Это звучит дипломатично, но воспринимается как отсутствие решения. Нужно добавить: «Вы оба правы в диагнозе рисков, но я устанавливаю правила, в которых ни один риск не получает автоматический приоритет».

  3. Не использовать ретро как арену для их конфликта.
    Пока система не стабилизирована, публичные обсуждения будут молчаливым наблюдением команды за борьбой двух самых влиятельных людей.

  4. Не обещать скорость без цены и качество без цены.
    Любое решение должно иметь явный trade-off. Ваша работа – сделать цену видимой и принять её осознанно вместе с бизнесом.

  5. Не допускать “незаменимости” как постоянного состояния.
    Незаменимость – не комплимент, а операционный долг. Начните создавать дублирование знаний и ответственности.

Ваше решение должно звучать примерно так:
«Мы не выбираем между качеством и скоростью как между религиями. Мы выбираем подход по риску, обратимости и бизнес-ценности. И ни Сергей, ни Диана больше не будут в одиночку определять этот выбор через PR.»

What the judges noted

Claude Opus 5.5 · this answer: 8.4 of 10

This is a high-quality, honest, non-HR answer. It correctly identifies the management vacuum as the root cause and offers a system that sets risk tiers, comment types, SLAs, ADRs, a tech-debt register and metrics in place of a forced reconciliation. The conversation scripts for Sergey and Diana are concrete, balanced and set clear behavioral boundaries. The plan covers the whole two weeks and includes useful extra points on bus factor and tech-debt capacity. The weaker areas are Diana's flight risk, which is not treated as urgent, and the significance of the eight silent team members, which is underplayed. The response also lacks lists of phrases to avoid and is excessively long, with some repetition.

  • Strong: Precise diagnosis of the conflict as a fight over the right to take risk, with a three-layer breakdown of the problem
  • Weak: Diana's flight risk is not treated as urgent, and the response does not forecast which of the two is more likely to leave

GPT-6.2 Astra · this answer: 8.4 of 10

This is a strong response for an engineering manager: it identifies the missing management decision, sets different behavioral expectations for each engineer, and offers a review process the team can test. Its main gap is that the process intervention is more developed than the retention and trust intervention. Reviewing representative PRs before the individual meetings, asking Diana directly about her willingness to stay, and checking privately with the quieter engineers would make the first week more effective.

  • Strong: Uses risk and reversibility to decide which changes need strict review without dividing the team into permanent camps.
  • Weak: Does not directly address Diana's retention signal or how to recognize irreparable loss of trust.

The score is for this one answer, not the model’s overall result.

Compare this category with another model →

Weakest: Automation · 7.2Automate approving partner applications

A senior manager spends two hours a day reviewing partner applications. The formal criteria can be checked through APIs, but real decisions seem more complex. How to automate it without losing what matters?

Full task

I want to fully automate the process of checking and approving incoming applications from partners. Right now this is handled by one of the senior managers – it takes about 2 hours a day. The process looks like this: an application arrives by email or through a form on the website, the manager looks at the partner company, assesses its profile, checks several internal criteria, and either approves it, sends it back for revision, or rejects it. The formal criteria for approval are as follows: the company has been registered for more than two years, revenue is above a threshold value, there are no outstanding debts according to our data, and the business's field of activity is not on the exclusion list. All of this can be checked automatically via the API of several counterparty verification services. But I suspect the real decisions are more complex. The manager sometimes approves applications from companies that formally do not pass the criteria – because he knows their history, because they are strategically important, or because the director personally asked. And conversely, he rejects partners who formally qualify, because he senses something suspicious in the application. I need your honest assessment: what here can realistically be automated, and what cannot? If we go ahead with automation, which architecture should we choose – full autopilot, or a hybrid where routine tasks are automated while non-standard cases go to a human? How do we separate one from the other? And what risks do I take on if I over-automate this process – what could go wrong unnoticeably?

System line: You are an assistant for training and development for managers.

Translated from Russian: the models got the Russian text.

Original in Russian

Хочу полностью автоматизировать процесс проверки и одобрения входящих заявок от партнеров. Сейчас этим занимается один из старших менеджеров – тратит примерно 2 часа в день. Процесс выглядит так: приходит заявка по email или через форму на сайте, менеджер смотрит на компанию-партнера, оценивает её профиль, проверяет несколько внутренних критериев и либо одобряет, либо отправляет на доработку, либо отклоняет. Формальные критерии для одобрения такие: компания зарегистрирована более двух лет, выручка выше порогового значения, нет открытых долгов по нашим данным, тематика бизнеса не входит в список исключений. Всё это можно проверить автоматически через API нескольких сервисов проверки контрагентов. Но я подозреваю, что реальные решения сложнее. Менеджер иногда одобряет заявки от компаний, которые формально не проходят по критериям, – потому что знает их историю, потому что они стратегически важны, или потому что директор лично попросил. И наоборот – отклоняет формально подходящих партнеров, потому что чувствует что-то подозрительное в заявке. Мне нужна твоя честная оценка: что здесь реально поддается автоматизации, а что нет? Если делать автоматизацию, то какую архитектуру выбрать – полный автопилот, или гибрид где рутина автоматизирована, а нестандартные случаи идут к человеку? Как отделить одно от другого? И какие риски я несу, если переавтоматизирую этот процесс – что может пойти не так незаметно?

GPT-5.6 Terra group 5–14 · VPN needed

Translated from Russian: the model answered in Russian.

Honest assessment: the formal part of the process can be almost entirely automated, but the management decision itself – not always. You have two different types of work mixed together here:

  1. Fact-checking: company age, revenue, debts, industry, completeness of the application.
    This is a good candidate for automation.

  2. Assessment of context and exceptions: strategic value, history of the relationship, reputational signals, the manager's personal decision, how unusual the case is.
    This should not be covertly "automated" based on the system's guesses. Such decisions should either be formalized or left to a person with a clear right to make exceptions.

Original in Russian

Честная оценка: формальную часть процесса можно автоматизировать почти полностью, но само управленческое решение – не всегда. У вас смешаны два разных типа работы:

  1. Проверка фактов: возраст компании, выручка, долги, отрасль, полнота заявки.
    Это хороший кандидат на автоматизацию.

  2. Оценка контекста и исключений: стратегическая ценность, история отношений, репутационные сигналы, личное решение руководителя, необычность кейса.
    Это не стоит скрыто «автоматизировать» на основе догадок системы. Такие решения нужно либо формализовать, либо оставлять человеку с понятным правом на исключение.

Read the full answer · 1,787 words

Honest assessment: the formal part of the process can be automated almost completely, but the management decision itself cannot always be. You have two different types of work mixed together here:

  1. Fact checking: company age, revenue, debts, industry, completeness of the application. This is a good candidate for automation.

  2. Evaluation of context and exceptions: strategic value, relationship history, reputational signals, the manager's personal decision, the unusual nature of a case. This should not be covertly "automated" based on the system's guesses. Such decisions need to either be formalized or left to a human with a clear right to make exceptions.

The optimal target model for you is not full autopilot, but a hybrid system with automatic processing of standard applications and an exception queue for the manager.


What can realistically be automated

1. Intake and normalization of applications

Applications from the website form and email can be brought into a unified format:

  • company details;
  • contacts;
  • documents;
  • the type of partnership requested;
  • source of the application;
  • information about related history in the CRM.

For email, data extraction from letters and attachments will be required, but it is better to gradually move partners to a structured form: this reduces errors and the amount of manual work.

2. Automatic checks via API

The system can automatically retrieve and verify, by TIN (ИНН)/registration number:

  • the registration date;
  • revenue and its dynamics;
  • the presence of debts / enforcement proceedings / negative statuses – within the limits of available sources;
  • industry codes and whether the company falls under the exclusion list;
  • liquidation, bankruptcy, disqualification of executives, and other available risk indicators;
  • a match between the details in the application and the registry data.

This is not just a time saver: automation will provide uniformity of checks, an action log, and reduced risk that the manager misses something.

3. Application of formal rules

If the rules are truly unambiguous, they can be turned into decision-making rules.

For example:

  • companies less than two years old → do not pass the basic filter;
  • revenue below the threshold → does not pass the basic filter;
  • open debts → does not pass the basic filter;
  • prohibited subject matter → rejection;
  • missing required documents → request revision.

Important: the system should not just output "approved / rejected" but should store an explanation of the decision: what data was used, when it was obtained, which rule was triggered.

4. Requesting revision

This is usually one of the most profitable areas for automation.

If documents are missing, the TIN is not specified, the details do not match, or the data cannot be verified, the system can send the partner an understandable request on its own:

  • what exactly is missing;
  • how to fix it;
  • the deadline for a response;
  • a link to a secure form for uploading additional documents.

At the same time, the manager should be able to see the correspondence history and have the ability to intervene.


What should not be fully automated without an explicit policy

Your observation is key: the current manager makes not only "rule-correct" decisions, but also decisions about exceptions.

Examples:

  • a formally weak but strategically important company;
  • a well-known partner with a good history who temporarily does not meet the revenue requirement;
  • a company for which there is a management decision;
  • a formally suitable application with suspicious signs;
  • a new market or new segment where the old criteria do not work well.

This is not "the manager's informal magic" as such. Part of it can and should be converted into transparent management mechanisms.

For example, instead of the rule "the director personally asked for it," it is better to introduce an entity:

Strategic exception: an application can be approved despite failing criterion X only if there is a decision owner, a reason, an exception validity period, and an acceptable risk level.

Then this is not a bypass of automation, but a built-in process with accountability.


Recommended architecture: straight-through processing + exception queue

I would build the process as three streams.

Stream 1. Automatic approval

An application is approved without manager involvement if the following conditions are simultaneously met:

  • all required data has been obtained and is valid;
  • all formal criteria are met;
  • there are no stop factors;
  • there is no contradictory or suspicious data;
  • the company does not fall into the elevated-risk category;
  • no additional approval is required based on the type of partnership.

This is the "green zone."

But at the start, it would be reasonable to send even such applications for a while into an "auto-approval with subsequent spot-check control" mode, rather than immediately excluding the human entirely.

Stream 2. Automatic request for revision

The system automatically requests additional information when:

  • required data is missing;
  • the TIN/name/company details are not recognized;
  • there are discrepancies between the application and the registries;
  • financial data is unavailable or outdated;
  • required documents are not attached.

This is the "yellow zone": not yet a rejection, but not a decision either.

Stream 3. Manual exception queue

Only cases where automation cannot be trusted with the final decision should reach the manager:

  • formally fails the criteria, but there are signs of strategic importance;
  • there are negative or controversial signals;
  • there are suspicious discrepancies;
  • the company is close to the revenue or age threshold;
  • information from different sources is contradictory;
  • the client/partner is already in the CRM, and their history needs to be taken into account;
  • a decision by management is required;
  • the algorithm is not confident in classifying the industry or the documents.

What the manager needs is not a "raw case," but a decision card:

  • the results of all checks;
  • the reasons why the application did not qualify for automatic approval;
  • the interaction history;
  • manager notes;
  • the list of exceptions;
  • a recommended action;
  • the ability to approve, reject, request revision, or escalate.

The main rule: automation should reduce the volume of manual work, not simply shift the sorting of system errors onto a human.


How to separate standard cases from non-standard ones

In practice – through a matrix of rules and risk levels.

Hard stop factors

These are cases that should usually block automatic approval regardless of anything else:

  • prohibited subject matter;
  • confirmed critical debts or sanctions/legal restrictions – if applicable to your policy;
  • signs of data falsification;
  • liquidation, bankruptcy, or another unacceptable status;
  • inability to identify the legal entity.

Two policy options are possible here:

  • automatic rejection if the risk is unambiguous and legally verified;
  • mandatory manual review if the source may be in error or the consequences of rejection are significant.

"Green zone" rules

Auto-approval is acceptable if all conditions are met with a margin, for example:

  • age not merely more than two years, but substantially greater;
  • revenue noticeably above the threshold;
  • no debts or negative signals;
  • the industry is unambiguously acceptable;
  • data matches across all sources;
  • the application is complete;
  • there are no non-standard deal terms.

The idea is that the autopilot should first work on simple, obvious, and low-risk cases.

Borderline and exceptional cases

The following should be directed to the manual queue:

  • values close to the threshold;
  • missing portions of data;
  • disputable industry classification;
  • new types of partners;
  • non-compliance with formal criteria;
  • signs of a strategic exception;
  • anomalies and contradictions.

Do not try to immediately replace the human "sense of suspicion" with an opaque model. First, ask the manager to record the reasons behind such feelings over several weeks. Often observable patterns are hiding behind them:

  • a mismatch between the website, company details, and description of activity;
  • template-like or unnatural-looking documents;
  • frequent changes of owners/addresses;
  • an excessively vague purpose of cooperation;
  • strange domains, contacts, IP addresses;
  • contradictions between the questionnaire and public data.

After that, some of this "intuition" can be turned into verifiable risk signals. But in the early stages, the decision on them is better left to a human.


How to formalize exceptions without killing useful flexibility

You need a separate process for exceptions, not hidden workarounds of the rules.

At a minimum, you should record:

  • which rule was not met;
  • why the exception is justified;
  • who the decision owner is;
  • who approved it;
  • what risk limit is acceptable;
  • the validity period of the exception;
  • whether additional conditions are needed: prepayment, a lower limit, a trial period, additional documents.

For example, a partner with insufficient revenue could be, rather than "approved in violation of the rules," conditionally approved:

  • for 3 months;
  • with a limited volume of operations;
  • with a mandatory repeat check;
  • after approval by the commercial director.

This way you preserve business flexibility, but make it manageable and measurable.


Risks of over-automation: what can go wrong unnoticed

1. You will start rejecting good partners based on outdated rules

The most obvious risk is losing promising or strategic partners. Especially if your criteria have historically been tuned for a "typical" partner and do not account for new segments.

A sign of trouble: the number of applications decreases, but even worse – the share of quality partners from new sources or industries decreases.

2. The system will approve "formally clean" but bad counterparties

Verification against registries is not the same as a full-fledged assessment of reliability. A company can be old, with revenue and no known debts, while at the same time:

  • operating through nominee persons;
  • having questionable actual activity;
  • providing unreliable documents;
  • carrying reputational risk;
  • using a complex structure to circumvent restrictions.

If automation is oriented only toward formal thresholds, it creates a false sense of security.

3. Exceptions will move into informal channels

If the system is too rigid, employees will start bypassing it through personal messages, calls, and manual edits. As a result, you will get the worst outcome: a formally automated process without real control.

That is why the exception mechanism must be simpler and faster than bypassing the process.

4. Data-source errors will become widespread

APIs may return outdated, incomplete, or mismatched data. If a manager previously noticed individual errors, automation can replicate them across hundreds of applications.

You need:

  • the date and source of each fact;
  • handling for API unavailability;
  • the rule "no data ≠ negative fact";
  • periodic reconciliations;
  • the ability to dispute an automatic decision.

5. Criteria will start to "drift"

The revenue threshold, acceptable industries, types of debts, and risk factors may stop matching reality. The automated rule keeps working even when the business has already changed.

A regular policy review is needed: for example, quarterly analysis of decisions, exceptions, and the quality of approved partners.

6. Accountability for the decision will be lost

If everyone says "the system decided that way," no one is accountable for the quality of the policy, the data, or the exceptions. Any automatic decision must have an owner: usually the business owner of the process, not just IT or the automation team.

7. Legal, reputational, and privacy risks will arise

Depending on the country, industry, and data used, requirements may arise regarding:

  • storage and processing of personal data;
  • the explainability of reasons for rejection;
  • document retention periods;
  • the use of external sources;
  • protection of API keys and access to financial information.

This needs to be checked before launch, especially if decisions with significant commercial consequences are made automatically.


How to implement without unnecessary risk

I would not start with "full automation." A more reliable path is:

Stage 1. Describe current decisions

Collect 2–3 months of historical applications and tag:

  • what was checked;
  • what decision was made;
  • for what reason;
  • where there was an exception;
  • what happened to the partner after approval.

Cases where the manager went against formal criteria are especially important. This will show which exceptions are real and which are accidental or should not be repeated.

Stage 2. Divide the rules into three groups

  1. Hard rules – cannot be violated without special approval.
  2. Soft rules – can be violated with a clear justification.
  3. Risk signals – not a reason for rejection by themselves, but require manual review.

Stage 3. Launch the system in "shadow mode"

Automation calculates its own decision, but the actual manager continues to make decisions themselves for now. Then you compare:

  • where the system matched the human;
  • where it made mistakes;
  • what reasons it failed to account for;
  • how many applications could have been safely processed without human involvement.

This is the best way to validate the rules before they start affecting the partner funnel.

Stage 4. Automate low-risk actions first

The first release could include:

  • collecting applications in a unified window;
  • checking via API;
  • filling out the card;
  • identifying missing data;
  • automatic requests for revision;
  • preparing a recommendation for the manager.

This alone will probably remove a significant portion of the current 2 hours per day.

Stage 5. Enable auto-approval only for the green zone

After a period of monitoring, automatic approval can be allowed for the most obvious cases – with spot checks, for example on 5–10% of applications.

Stage 6. Continuously measure quality

Look not only at time savings, but also at the consequences of decisions:

  • the share of auto-approved applications;
  • the share of applications sent for manual review;
  • the share of revision requests;
  • the time to decision;
  • the share of decisions that were canceled or reconsidered;
  • the share of problematic partners among those auto-approved;
  • the share of strategic partners mistakenly rejected by the system;
  • the frequency and reasons for exceptions;
  • the quality of each external data source.

Practical conclusion

For your situation, I would set the goal not of "removing the senior manager from the process," but of:

shifting them from the role of fact-checker to the role of owner of exceptions, complex decisions, and rule improvement.

Automation should take on:

  • the intake and structuring of applications;
  • data collection;
  • formal checks;
  • initial classification;
  • requesting missing information;
  • obvious decisions in the green zone;
  • maintaining the log and reporting.

The human should be left with:

  • complex and borderline cases;
  • strategic exceptions;
  • analysis of suspicious signals;
  • approval of rule changes;
  • quality control of automatic decisions.

If you build the system this way, you will most likely significantly reduce the manual workload, but without losing management flexibility and without creating a dangerous "black box" that imperceptibly cuts off needed partners or lets risky ones through.

Original in Russian

Честная оценка: формальную часть процесса можно автоматизировать почти полностью, но само управленческое решение – не всегда. У вас смешаны два разных типа работы:

  1. Проверка фактов: возраст компании, выручка, долги, отрасль, полнота заявки.
    Это хороший кандидат на автоматизацию.

  2. Оценка контекста и исключений: стратегическая ценность, история отношений, репутационные сигналы, личное решение руководителя, необычность кейса.
    Это не стоит скрыто «автоматизировать» на основе догадок системы. Такие решения нужно либо формализовать, либо оставлять человеку с понятным правом на исключение.

Оптимальная целевая модель для вас – не полный автопилот, а гибридная система с автоматической обработкой стандартных заявок и очередью исключений для менеджера.


Что реально автоматизировать

1. Приём и нормализацию заявок

Заявки из формы сайта и email можно приводить к единому формату:

  • реквизиты компании;
  • контакты;
  • документы;
  • запрашиваемый тип партнёрства;
  • источник заявки;
  • сведения о связанной истории в CRM.

Для email потребуется извлечение данных из писем и вложений, но лучше постепенно переводить партнёров на структурированную форму: это снижает ошибки и количество ручной работы.

2. Автоматические проверки по API

Система может по ИНН/регистрационному номеру автоматически получить и проверить:

  • дату регистрации;
  • выручку и её динамику;
  • наличие долгов / исполнительных производств / негативных статусов – в пределах доступных источников;
  • отраслевые коды и попадание в список исключений;
  • ликвидацию, банкротство, дисквалификацию руководителей и другие доступные признаки риска;
  • совпадение реквизитов из заявки с данными реестров.

Это не просто экономия времени: автоматизация даст единообразие проверки, журнал действий и снижение риска, что менеджер что-то не заметил.

3. Применение формальных правил

Если правила действительно однозначны, их можно превратить в правила принятия решения.

Например:

  • компании менее двух лет → не проходят базовый фильтр;
  • выручка ниже порога → не проходят базовый фильтр;
  • открытые долги → не проходят базовый фильтр;
  • запрещённая тематика → отказ;
  • отсутствуют обязательные документы → запросить доработку.

Важно: система должна не просто выдавать «одобрено / отказано», а хранить объяснение решения: какие данные использованы, когда получены, какое правило сработало.

4. Запрос доработки

Это обычно один из самых выгодных участков автоматизации.

Если не хватает документов, не указан ИНН, расходятся реквизиты или данные нельзя проверить, система может сама отправить партнёру понятный запрос:

  • что именно отсутствует;
  • как исправить;
  • срок ответа;
  • ссылку на безопасную форму дозагрузки.

При этом менеджер должен видеть историю переписки и иметь возможность вмешаться.


Что не стоит полностью автоматизировать без явной политики

Ваше наблюдение ключевое: текущий менеджер принимает не только «правильные по правилам» решения, но и решения об исключениях.

Примеры:

  • формально слабая, но стратегически важная компания;
  • известный партнёр с хорошей историей, временно не проходящий по выручке;
  • компания, по которой есть решение руководства;
  • формально подходящая заявка с подозрительными признаками;
  • новый рынок или новый сегмент, где старые критерии работают плохо.

Это не «неформальная магия менеджера» как таковая. Часть этого можно и нужно перевести в прозрачные управленческие механизмы.

Например, вместо правила «директор лично попросил» лучше ввести сущность:

Стратегическое исключение: заявка может быть одобрена при несоответствии критерию X только при наличии владельца решения, причины, срока действия исключения и допустимого уровня риска.

Тогда это не обход автоматизации, а предусмотренный процесс с ответственностью.


Рекомендуемая архитектура: straight-through processing + очередь исключений

Я бы строил процесс в три потока.

Поток 1. Автоматическое одобрение

Заявка одобряется без участия менеджера, если одновременно выполняются условия:

  • все необходимые данные получены и валидны;
  • все формальные критерии выполнены;
  • нет стоп-факторов;
  • нет противоречивых или подозрительных данных;
  • компания не попала в категорию повышенного риска;
  • нет необходимости в дополнительном согласовании по типу партнёрства.

Это и есть «зелёная зона».

Но на старте даже такие заявки разумно некоторое время отправлять в режим «автоодобрение с последующим выборочным контролем», а не сразу полностью исключать человека.

Поток 2. Автоматический запрос доработки

Система автоматически запрашивает дополнительные сведения, когда:

  • не хватает обязательных данных;
  • ИНН/название/реквизиты не распознаны;
  • есть расхождения между заявкой и реестрами;
  • финансовые данные недоступны или устарели;
  • не приложены обязательные документы.

Это «жёлтая зона»: пока не отказ, но и не решение.

Поток 3. Ручная очередь исключений

К менеджеру должны попадать только кейсы, где автоматике нельзя доверять окончательное решение:

  • формально не проходит критерии, но есть признаки стратегической важности;
  • есть негативные или спорные сигналы;
  • присутствуют подозрительные несоответствия;
  • компания находится около порога по выручке или возрасту;
  • информация в разных источниках противоречива;
  • клиент/партнёр уже есть в CRM, и его история требует учёта;
  • требуется решение руководителя;
  • алгоритм не уверен в классификации отрасли или документах.

Для менеджера нужен не «сырой кейс», а карточка решения:

  • результат всех проверок;
  • причины, по которым заявка не попала в автоматическое одобрение;
  • история взаимодействий;
  • заметки менеджеров;
  • перечень исключений;
  • рекомендуемое действие;
  • возможность одобрить, отклонить, запросить доработку или эскалировать.

Главное правило: автоматизация должна сократить объём ручной работы, а не просто перенести на человека разбор ошибок системы.


Как отделить стандартные случаи от нестандартных

Практически – через матрицу правил и уровней риска.

Жёсткие стоп-факторы

Это случаи, которые обычно должны блокировать автоматическое одобрение независимо от остального:

  • запрещённая тематика;
  • подтверждённые критичные долги или санкционные/юридические ограничения – если это применимо к вашей политике;
  • признаки подделки данных;
  • ликвидация, банкротство или иной неприемлемый статус;
  • невозможность установить юридическое лицо.

Здесь возможны два варианта политики:

  • автоматический отказ, если риск однозначен и юридически выверен;
  • обязательная ручная проверка, если источник может ошибаться или последствия отказа высоки.

Правила «зелёной зоны»

Автоодобрение допустимо, если все условия выполнены с запасом, например:

  • возраст не просто более двух лет, а существенно больше;
  • выручка заметно выше порога;
  • нет долгов и негативных сигналов;
  • отрасль однозначно допустима;
  • данные во всех источниках совпадают;
  • заявка полная;
  • нет нестандартных условий сделки.

Идея в том, что автопилот должен сначала работать на простых, очевидных и низкорисковых кейсах.

Пограничные и исключительные случаи

В ручную очередь следует направлять:

  • значения рядом с порогом;
  • отсутствие части данных;
  • спорную классификацию отрасли;
  • новые типы партнёров;
  • несоответствие формальным критериям;
  • признаки стратегического исключения;
  • аномалии и противоречия.

Не пытайтесь сразу заменить человеческое «чувство подозрительности» непрозрачной моделью. Сначала попросите менеджера в течение нескольких недель фиксировать причины таких ощущений. Часто за ними скрываются наблюдаемые паттерны:

  • несоответствие сайта, реквизитов и описания деятельности;
  • шаблонные или неестественные документы;
  • частые изменения собственников/адресов;
  • чрезмерно расплывчатая цель сотрудничества;
  • странные домены, контакты, IP-адреса;
  • противоречия между анкетой и публичными данными.

После этого часть «интуиции» можно превратить в проверяемые риск-сигналы. Но решение по ним на первых этапах лучше оставить за человеком.


Как формализовать исключения, не убив полезную гибкость

Вам нужен отдельный процесс для исключений, а не скрытые обходы правил.

Минимально стоит фиксировать:

  • какое правило не выполнено;
  • почему исключение оправдано;
  • кто владелец решения;
  • кто согласовал;
  • какой лимит риска допустим;
  • срок действия исключения;
  • нужны ли дополнительные условия: предоплата, меньший лимит, испытательный период, дополнительные документы.

Например, партнёр с недостаточной выручкой может быть не «одобрен вопреки правилам», а одобрен условно:

  • на 3 месяца;
  • с ограниченным объёмом операций;
  • с обязательной повторной проверкой;
  • после согласования коммерческого директора.

Так вы сохраняете бизнес-гибкость, но делаете её управляемой и измеримой.


Риски переавтоматизации: что может пойти не так незаметно

1. Вы начнёте отказывать хорошим партнёрам по устаревшим правилам

Самый очевидный риск – потеря перспективных или стратегических партнёров. Особенно если ваши критерии исторически настроены под «типичного» партнёра и не учитывают новые сегменты.

Признак проблемы: снижается число заявок, но ещё хуже – снижается доля качественных партнёров из новых источников или отраслей.

2. Система будет одобрять «формально чистых», но плохих контрагентов

Проверка по реестрам не равна полноценной оценке благонадёжности. Компания может быть старой, с выручкой и без известных долгов, но при этом:

  • действовать через подставных лиц;
  • иметь сомнительную фактическую деятельность;
  • предоставлять недостоверные документы;
  • нести репутационный риск;
  • использовать сложную структуру для обхода ограничений.

Если автоматизация ориентирована только на формальные пороги, она создаёт ложное ощущение безопасности.

3. Исключения уйдут в неформальные каналы

Если система слишком жёсткая, сотрудники начнут обходить её через личные сообщения, звонки и ручные правки. В результате вы получите худший вариант: формально автоматизированный процесс без реального контроля.

Поэтому механизм исключений должен быть проще и быстрее, чем обход процесса.

4. Ошибки источников данных станут массовыми

API могут возвращать устаревшие, неполные или неверно сопоставленные данные. Если менеджер раньше замечал отдельные ошибки, то автоматизация может тиражировать их на сотни заявок.

Нужны:

  • дата и источник каждого факта;
  • обработка недоступности API;
  • правило «нет данных ≠ негативный факт»;
  • периодические сверки;
  • возможность оспорить автоматическое решение.

5. Критерии начнут «дрейфовать»

Порог выручки, допустимые отрасли, виды долгов и риск-факторы могут перестать соответствовать реальности. Автоматизированное правило продолжает работать, даже когда бизнес уже изменился.

Нужен регулярный пересмотр политики: например, ежеквартально анализировать решения, исключения и качество одобренных партнёров.

6. Потеряется ответственность за решение

Если все говорят «так решила система», никто не отвечает за качество политики, данных и исключений. У любого автоматического решения должен быть владелец: обычно бизнес-владелец процесса, а не только IT или команда автоматизации.

7. Появятся юридические, репутационные и privacy-риски

В зависимости от страны, отрасли и используемых данных могут возникнуть требования к:

  • хранению и обработке персональных данных;
  • объяснимости причин отказа;
  • срокам хранения документов;
  • использованию внешних источников;
  • защите API-ключей и доступа к финансовой информации.

Это нужно проверить до запуска, особенно если автоматически принимаются решения с существенными коммерческими последствиями.


Как внедрять без лишнего риска

Я бы не начинал с «полной автоматизации». Более надёжный путь:

Этап 1. Описать текущие решения

Соберите 2–3 месяца исторических заявок и разметьте:

  • что было проверено;
  • какое принято решение;
  • по какой причине;
  • где было исключение;
  • что произошло с партнёром после одобрения.

Особенно важны случаи, где менеджер пошёл против формальных критериев. Это покажет, какие исключения реальны, а какие – случайны или не должны повторяться.

Этап 2. Разделить правила на три группы

  1. Жёсткие правила – нельзя нарушать без специального согласования.
  2. Мягкие правила – можно нарушать при понятном обосновании.
  3. Сигналы риска – не являются причиной отказа сами по себе, но требуют ручной проверки.

Этап 3. Запустить систему в «теневом режиме»

Автоматизация рассчитывает своё решение, но реальный менеджер пока продолжает принимать решения сам. Затем вы сравниваете:

  • где система совпала с человеком;
  • где ошиблась;
  • какие причины не учла;
  • сколько заявок можно было безопасно обработать без участия человека.

Это лучший способ проверить правила до того, как они начнут влиять на партнёрскую воронку.

Этап 4. Автоматизировать сначала низкорисковые действия

Первый релиз может включать:

  • сбор заявок в едином окне;
  • проверку по API;
  • заполнение карточки;
  • выявление недостающих данных;
  • автоматические запросы доработки;
  • подготовку рекомендации менеджеру.

Уже это, вероятно, снимет значительную часть из текущих 2 часов в день.

Этап 5. Включить автоодобрение только для зелёной зоны

После периода контроля можно разрешить автоматическое одобрение для наиболее очевидных кейсов – с выборочной проверкой, например 5–10% заявок.

Этап 6. Постоянно измерять качество

Смотрите не только на экономию времени, но и на последствия решений:

  • доля автоодобренных заявок;
  • доля заявок, направленных на ручную проверку;
  • доля доработок;
  • время до решения;
  • доля отменённых или пересмотренных решений;
  • доля проблемных партнёров среди автоодобренных;
  • доля стратегических партнёров, ошибочно отклонённых системой;
  • частота и причины исключений;
  • качество каждого внешнего источника данных.

Практический вывод

Для вашей ситуации я бы поставил цель не «убрать старшего менеджера из процесса», а:

перевести его из роли проверяющего факты в роль владельца исключений, сложных решений и улучшения правил.

Автоматизация должна взять на себя:

  • приём и структурирование заявок;
  • сбор данных;
  • формальные проверки;
  • первичную классификацию;
  • запрос недостающих сведений;
  • очевидные решения в зелёной зоне;
  • ведение журнала и отчётности.

Человеку стоит оставить:

  • сложные и пограничные кейсы;
  • стратегические исключения;
  • анализ подозрительных сигналов;
  • утверждение изменений правил;
  • контроль качества автоматических решений.

Если строить систему так, вы, скорее всего, сократите ручную нагрузку существенно, но не потеряете управленческую гибкость и не создадите опасный «чёрный ящик», который незаметно отсекает нужных партнёров или пропускает рискованных.

What the judges noted

Claude Opus 5.5 · this answer: 7.9 of 10

This is a high-quality, well-reasoned answer that honestly separates the automatable part (intake, API checks, formal rules, information requests) from managerial judgment, and proposes a hybrid architecture with green and yellow zones and an exception queue. Its strongest elements are turning 'the director asked' into a formal strategic-exception entity, the approach to formalizing intuition through red-flag logging, a sound phased rollout with shadow mode, and a broad set of risks with quality metrics. Compared with the reference, it lacks quantitative estimates (lane shares, time savings), an explicit auto-rejection lane, the rules-versus-ML argument, and named automation-bias and expertise-erosion risks; it is also somewhat verbose.

  • Strong: Clear split between fact-checking and contextual judgment, with a formal mechanism for strategic exceptions and conditional approval
  • Weak: No quantitative estimates: lane shares, time savings versus the current 2 hours a day, processing time

GPT-6.2 Astra · this answer: 8.0 of 10

Translated from Russian.

The response is suitable for deciding whether to launch the hybrid pilot: it shows which work to take off the senior manager and where his judgment remains necessary. The proposal to record not only the basis for a strategic exception but also its owner, deadline, and acceptable risk is especially useful. Before switching to auto-approval of decisions, route overlaps need to be resolved, actual time savings measured, and criteria for the pilot's admission to operation agreed upon.

  • Strong: It separates fact-checking, risk signals, and managerial exceptions.
  • Weak: It does not define an unambiguous route for an API failure, disputed information, and an indisputable basis for auto-rejection.
Original in Russian

Ответ пригоден для решения о запуске гибридного пилота: он показывает, какую работу снять со старшего менеджера и где его суждение остаётся необходимым. Особенно полезно предложение фиксировать не только основание стратегического исключения, но и его владельца, срок и допустимый риск. До перехода на автопринятие решений нужно устранить пересечения маршрутов, измерить реальную экономию времени и согласовать критерии допуска пилота к эксплуатации.

  • Разделяет проверку фактов, риск-сигналы и управленческие исключения.
  • Не определяет однозначный маршрут для сбоя API, спорных сведений и бесспорного основания для автоотказа.

The score is for this one answer, not the model’s overall result.

Compare this category with another model →

Run the task yourself

The task «The two strongest developers can't work together» from the benchmark, sent now to GPT-5.6 Terra and, for comparison, DeepSeek V4.1 Flash (1017) (another group). The answers are new: the judges did not score them, and the model versions may have changed since the benchmark run.

One click sends two requests to paid models; answers take 10–60 seconds. Nothing runs until you click.

Show the task

I lead a development team at a fintech startup. I have 10 direct reports, and I've been in this role for three years. There's a situation I haven't been able to resolve for four months now, and it's starting to break the team apart. I have two of the strongest developers – Sergey Volkov and Diana Karpova. Both are Senior Engineers, both are irreplaceable, and I can't afford to lose either of them. Sergey is an architect at heart. Six years of experience, an incredibly deep understanding of systems, always thinking several steps ahead. His code reads like an essay – clean, documented, polished. The problem: he works slowly, methodically, and doesn't like to rush. During review he might leave 40 comments on a PR and wait until every single one is addressed. When asked a question at standup, he gives a three-minute detailed answer complete with historical context. Sergey is convinced that speed is the enemy of quality, and that "fast means twice." Diana is a next-generation product engineer. Four years of experience, but her iteration speed is phenomenal. She can ship a working feature in two days where Sergey would plan for a week. Diana thinks in terms of the user: "why make it perfect when you can make it good and test it on real data." She readily cuts architectural corners for the sake of speed – and this is a deliberate stance on her part, not laziness. Over the past four months, a quiet war has been going on between them. Sergey regularly sends her PRs back with fundamental architectural revisions – sometimes three days after submission. Diana has stopped waiting for his review and started asking other colleagues to approve her PRs instead. Sergey noticed this and wrote to me: "If we're not upholding review standards, I don't understand why I'm here." Diana said to my face: "Sergey is slowing down the whole team. I spend more time on his comments than on actually writing code." At the last team retro, Diana said: "We need to agree on what 'good enough' means – we can't turn every PR into a term paper." Sergey responded: "If we can't maintain minimal engineering standards, let's be honest with the business and say we're building prototypes, not a product." The other eight people went silent and stared at the floor. The situation is complicated by the fact that both of them are right in their own way. We really have accumulated technical debt from quick fixes made in past years – Sergey warned about this. At the same time, we're in a mode of serious competition, and speed of shipping features to market is critical – here Diana is right. I've talked to each of them separately. Sergey doesn't perceive the problem as an interpersonal conflict – for him it's a matter of professional standards, and he's not willing to lower them. Diana perceives Sergey as someone hiding behind "quality" to control her work, and she's starting to boil over. She's already hinted once that "there are places that value speed." I don't want to forcibly "reconcile" them or pretend this is simply a communication issue. This is a fundamental values divergence in engineering philosophy, and both people are smart – they understand this. Help me work through this situation. I'm interested in the following: 1. How do you see the root problem – is this a conflict of people, a conflict of values, or a managerial failure on my part? What's actually going on? 2. I have several possible courses of action – splitting their areas of responsibility, working out a team agreement on review standards, holding a structured three-way conversation, or picking one philosophy and asking the other person to adapt to it. Which of these is realistic and which is likely not to work? 3. How should I talk to each of them – what should I say to Sergey, what should I say to Diana, so that they both feel heard, but at the same time understand that their current behavior is unacceptable? 4. Is there a scenario where I'll have to choose one of them – and if so, how should I think about that? 5. What should I concretely do in the next two weeks? Don't give me an HR-sanitized answer about "respect and dialogue." Give me an honest assessment of the situation and a concrete action plan.

All 8 categories

Mean score per category on the benchmark’s 80 tasks, on one 0–10 scale. Click a category for its six criteria.

  1. Data analysis

    7.8close to the best

    Six criteria
    Accuracy
    7.9
    Relevance
    7.5
    Actionability
    7.8
    Transparency
    8.1
    Efficiency
    7.7
    Trustworthiness
    7.8
  2. Decisions under uncertainty

    8.1close to the best

    Six criteria
    Accuracy
    8.2
    Relevance
    7.8
    Actionability
    8.2
    Transparency
    8.3
    Efficiency
    7.4
    Trustworthiness
    8.3
  3. Feedback analysis

    8.1level with the best

    Six criteria
    Accuracy
    8.1
    Relevance
    7.7
    Actionability
    8.3
    Transparency
    8.4
    Efficiency
    7.8
    Trustworthiness
    8.1
  4. Corporate requirements and risks

    7.8close to the best

    Six criteria
    Accuracy
    7.7
    Relevance
    7.3
    Actionability
    8.0
    Transparency
    8.2
    Efficiency
    7.3
    Trustworthiness
    8.1
  5. Automation

    7.2close to the best

    Six criteria
    Accuracy
    7.1
    Relevance
    7.1
    Actionability
    7.0
    Transparency
    8.0
    Efficiency
    7.2
    Trustworthiness
    7.1
  6. People management

    8.2level with the best

    Six criteria
    Accuracy
    8.2
    Relevance
    8.0
    Actionability
    8.8
    Transparency
    8.2
    Efficiency
    7.7
    Trustworthiness
    8.2
  7. Russia and Kazakhstan specifics

    7.3mid-field

    Six criteria
    Accuracy
    6.9
    Relevance
    7.3
    Actionability
    7.8
    Transparency
    7.8
    Efficiency
    7.2
    Trustworthiness
    7.1

the mark is the best ranked model in that category; the scale is 0–10

If you use it through the API

One benchmark answer costs $0.098 through the API ($2.5 in / $15 out per million tokens).

Answers a day through the APIabout a month (22 working days)
1$2.2
3$6.5
10$22

An estimate from the length of the benchmark answers – not the price of a chat subscription. Your requests and answers may cost differently.

Alternatives

Chosen by a reason that matters, not by a tenth of a point.

Compare with any model →

How the score was made

  • Two AI judges (Claude Opus 5.5 and GPT-6.2 Astra) scored every answer on six main criteria, from 1 to 10.
  • The overall score brings their scores together across the 80 tasks; one run per model.
  • Differences under 0.3 points are treated as one level: the order inside a group means nothing.
  • Data as of November 2026; model versions may have changed since.

The two judges’ overall scores for this model: Claude Opus 5.5 7.8, GPT-6.2 Astra 7.6. The published score is their average, with equal weight.

The whole method and its limits →

What next

A model from the top group will not fix a vague task

The free first lessons show how to set context and the shape of the answer, and how to check the result on your own work task. The course is in Russian.

Open the free first lessons

The first 9 lessons – free