Merkmale beim Testen von Krediten: Wie sich ein Fehler auf Einnahmen in Höhe von Tausenden von Dollar auswirkt

Hallo. Mein Name ist Olga Mikhalchuk, ich bin QS-Ingenieurin (Qualitätssicherungsingenieurin oder Testerin) bei der Fintech-Firma ID Finance. In diesem Beitrag werde ich Ihnen erklären, was die Qualitätssicherung tut und wie Sie nach Fehlern in Kreditschätzungen suchen und diese beheben können, bis sie zu großen Verlusten in Ihrem Unternehmen führen.

Ein wenig über meine Arbeit: QS oder Tester

ID Finance ist ein Fintech-Unternehmen, dessen Projekte in sieben Ländern vorgestellt werden. Ich arbeite für Brasilien, ein Produkt von MoneyMan (Online- Leihdienst ).

Zunächst möchte ich ein wenig mit den Begriffen „Qualitätssicherungsingenieur“ und „Tester“ definieren, obwohl dies ein Thema für einen separaten Artikel ist. Es gibt keine einzige Idee dieser Konzepte. In den meisten Fällen werden Tester als Experten bezeichnet, die den korrekten Betrieb des Systems nach der Entwicklung und vor der Bereitstellung von Funktionen für Endbenutzer überprüfen. Und Qualitätssicherung bedeutet globalere und tiefere Arbeit, um die Produktqualität sicherzustellen. Dies umfasst die Untersuchung der Ursachen aufgetretener Defekte, deren Vorbeugung, Wartung nach der Freigabe, kontinuierliche Prozessverbesserung und vieles mehr.

Tatsächlich sieht meine Arbeit ungefähr so ​​aus: Wir analysieren und überprüfen die Aufgaben, die andere Abteilungen von Programmierern zusammengestellt und entwickelt haben, geben Fehler ein und analysieren sie, schreiben Testdokumentationen und Berichte, überwachen den Produktionsstatus, führen Demos durch usw. Wir haben auch das Konzept der Produktion QA. Die Mitarbeiter unserer Abteilung sollten auch eine Vorstellung vom Entwicklungsprozess haben: Jeden Tag gehen wir zur Datenbank- und Systemprotokollierungsebene, sehen uns den Code und die Konsole an und verwenden die Systeme zur Überwachung der Auslastung und des Systemzustands. Wir müssen die Besonderheiten des Geschäfts verstehen: Dazu gehören die Analyse von Aufgaben und die Kommunikation mit anderen Abteilungen. Muss die Merkmale der Arbeit anderer Abteilungen kennen. Beispiel: Wie können Sie testen, ob Kreditabgrenzungen korrekt ausgeführt werden, wenn Sie dies nicht verstehen? Deshalb werde ich meine Position weiterhin als Qualitätssicherung bezeichnen, dh als Qualitätssicherungsspezialist, obwohl ich nicht beleidigt sein werde, wenn ich als Tester bezeichnet werde.

Prüfung der Kreditkosten

In unserem Unternehmen werden bei Kreditberechnungen alle Berechnungen von Parametern und Kreditindikatoren aufgerufen. Dies ist der Zahlungsplan, die Höhe des Kapitals und der Zinsen, die Geldbuße bei Verspätung, die Berechnung von Zöllen, Steuern usw. Insgesamt mehr als 100 Indikatoren in verschiedenen Datenbanktabellen. Neben den Grundversorgungsleistungen gibt es weitere: Erweiterung, Umstrukturierung, Renovierung. Es gibt auch ein System von Rabatten, Boni, verschiedenen Kreditprodukten, die dem Benutzer zur Verfügung stehen, und eine Reihe anderer Funktionen.



Kreditberechnungen sind einer der schwierigsten Bereiche, denen ich während meiner Arbeit im Unternehmen begegnet bin. Meiner Meinung nach ist nur eine Kreditrichtlinie auf einer Ebene komplex (eine Reihe von Regeln und Algorithmen, nach denen über die Möglichkeit der Gewährung eines Darlehens entschieden wird und welches Darlehen wir diesem Benutzer gewähren können).

Merkmale zum Testen von Kreditschätzungen

1. Bereiten Sie sich im Idealfall im Voraus auf den Testprozess vor - vor der Entwicklung. Analysieren Sie die Anforderungen und bereiten Sie die Testdokumentation vor.
2. Wir gehen von grundlegenderen Schecks zu komplexeren und kombinierten Schecks über: Zuerst prüfen wir die Ausgabe eines Kredits, die pünktliche Rückzahlung, den Betrag usw. Dann etwas komplexere Schecks wie vorzeitige Rückzahlung, Verzögerung, Überzahlung und dann Kombinationen verschiedener Fälle.
3. Wir überprüfen die Grundeinstellungen und den Vertrag, den der Kreditnehmer unterzeichnet.
4. Vergessen Sie nicht zusätzliche Dienstleistungen (Verlängerung, Rabatte usw.)
5. Produktionsumgebung - ein Lagerhaus für Testfälle. Es ist eine gute Idee, die Referenzfälle zu nehmen und die Kosten mit ihnen zu vergleichen.
6. Die Auswirkungen von Kostenänderungen auf bestehende Kunden können nicht berücksichtigt werden.
7. Sie sollten sich nach Änderungen immer an die Regression erinnern.
8. Wir prüfen, ob andere Aufgaben von Drittanbietern die Kreditschätzung beeinflussen können.

Spezielle Fälle: Wie sich Fehler auf Einnahmen in Höhe von Tausenden von Dollar auswirken können und wie wir mit ihnen gekämpft haben

Ich begann mit Schätzungen zu arbeiten, als sie bereits ungefähr zwei Jahre in der Veröffentlichung waren, daher kannte ich die vielen Reize des Ursprungs dieses Prozesses nicht. Trotzdem musste ich mich ihrer Stabilisierung und Behebung von Fehlern stellen. Ich werde Ihnen von den Fällen erzählen, an die ich mich am meisten erinnere:

Schmetterlingseffekt in der Kalkulation

Wenn Sie die Definition des „Schmetterlingseffekts“ googeln, sehen Sie: „Der Schmetterlingseffekt ist ein Begriff, der die Eigenschaft einiger chaotischer Systeme bezeichnet: Eine geringfügige Auswirkung auf das System kann große und unvorhersehbare Folgen haben, auch an einem völlig anderen Ort.“ Ich denke, diese Definition beschreibt die Situation bei Kreditschätzungen perfekt.
Als Beispiel haben wir einmal einen kleinen Fehler behoben: Es gab eine leichte Ungenauigkeit bei der Rundung einiger Felder. Nach dem Nachzählen aller Kredite (gut in der Testumgebung) stellte sich heraus, dass ungefähr tausend Kredite verspätet waren, obwohl sie es wirklich nicht sollten! Die Behebung dieses unbedeutenden Fehlers war also betroffen, da bei Kreditberechnungen alle Parameter stark miteinander verflochten sind und sich gegenseitig beeinflussen, manchmal an unerwarteten Stellen. Gott sei Dank wurde dies schnell bemerkt, repariert und nicht für Endbenutzer zugelassen. Tatsache ist, dass wir Informationen über die Verzögerung an das Kreditbüro senden. Wir könnten Hunderte von Kundenkrediten und unseren Ruf verderben. Und natürlich würde ein solcher Fehler zu Verlusten in Höhe von Tausenden von Dollar führen.



100% der Fehler können nicht behoben werden

Wie ich im ersten Absatz geschrieben habe, beeinflussen sich alle Parameter in den Berechnungen stark. Aus diesem Grund bricht während der Korrektur an einem Ort sehr oft etwas an einem anderen. Als wir mit der Behebung einer großen Anzahl von akkumulierten Fehlern konfrontiert waren, wollte die Geschäftsabteilung natürlich, dass absolut alle Fehler behoben werden. Es stellte sich jedoch heraus, dass bei dem Versuch, einige unwichtige Fehler zu beheben, immer mehr Fehler auftraten, wie bei einem Schneeball. Wie sie sagen, ist das Ideal der Feind des Guten. Daher bestand unsere Hauptaufgabe zu dieser Zeit darin, das System auf den stabilsten Zustand zu bringen, mit minimalen Auswirkungen von Fehlern auf das Geschäft, und nicht 100% der Fehler zu beheben. Dieser Ansatz erwies sich als viel produktiver als die endlose Korrektur von immer mehr Fehlern, die voneinander ausgehen.



Aufmerksamkeit auf nichttriviale Kombinationen

Die meisten Fehler treten genau bei nicht trivialen Kombinationen von Zahlungsmethoden und der Verwendung eines Kredits auf, wenn die Zweige im Code miteinander verwechselt werden. Zum Beispiel: Der Benutzer zahlt die erste Rate im Voraus zurück, die zweite zahlt in 5 Schritten, nimmt eine Verlängerung in der dritten und verzögert sich dann um einige Wochen ... Leider sind in solchen Fällen häufig bereits Fehler auf dem Produkt. Fazit: Wir achten auf die Kombination der Fälle und erinnern uns an den sechsten Punkt des letzten Abschnitts (Prod. Mittwoch - ein Lagerhaus für Testfälle).

Berühren Sie keine bestehenden Kunden!

Es ist unmöglich zuzulassen, dass Änderungen des Betrags, der Laufzeit oder der Bedingungen des Darlehens bestehende Kunden betreffen, die es unter bestimmten Bedingungen aufgenommen haben. In diesem Fall wird die Supportabteilung und das gesamte Unternehmen große Probleme haben.

Vergleich der Kreditportfolios

Eine sehr effektive Methode, um zu überprüfen, ob Kreditschätzungen korrekt funktionieren, wenn Änderungen vorgenommen wurden, besteht darin, die Kreditportfolios vor und nach den Änderungen zu vergleichen. Dies bedeutet, dass wir eine bedingt korrekte Kreditbasis mit Schätzungen haben, die den Erwartungen des Geschäfts entsprechen. Wir wenden neue Kreditberechnungen auf diese Datenbank an und vergleichen dann mithilfe spezieller Tools und Datenanalysen einige allgemeine Indikatoren für diesen Kreditstapel. Zum Beispiel die Anzahl der überfälligen Kredite vor und nach den Änderungen oder die Höhe der Zinsen für alle Kredite. Diese Methode ist sowohl beim Testen als auch bei der Fehlerbehebung sehr hilfreich.

Schlussfolgerungen

Kreditberechnungen sind ein ernstes und schwieriges Thema, aber sehr interessant und voller Rätsel. Wenn Sie damit arbeiten, müssen Sie ein kleiner Datenanalyst, Finanzier und Mathematiker sein. Aber selbst solch ein gefährliches Tier kann gezähmt werden, wenn Sie eine Annäherung daran finden.

Und einfache Punkte helfen dabei:

• Sorgfältige Vorbereitung: Qualitätsanforderungen, Geschäfts- und QS-Dokumentation, durchdachtes Testdesign;
• Regression (erinnere dich an den "Schmetterlingseffekt");
• Produktionsumgebung als unverzichtbare Quelle für Testfälle und Benchmark.