рдХрд╛рдЧрд▓: рдЕрдВрддрд░рд┐рдХреНрд╖ рд╕реЗ рдЕрдореЗрдЬрд╝реЕрди - рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЗ рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдХреЗ рд▓рд┐рдП рдЪрд╛рд▓ рдФрд░ рд╣реИрдХ



рдкрд┐рдЫрд▓реА рдЧрд░реНрдорд┐рдпреЛрдВ рдореЗрдВ, рдХрд╛рдЧрд▓ рд╕рд╛рдЗрдЯ рдкрд░ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ , рдЬреЛ рдЕрдореЗрдЬрд╝реЕрди рдЬрдВрдЧрд▓реЛрдВ рдХреЗ рдЙрдкрдЧреНрд░рд╣ рдЪрд┐рддреНрд░реЛрдВ рдХреЗ рд╡рд░реНрдЧреАрдХрд░рдг рдХреЗ рд▓рд┐рдП рд╕рдорд░реНрдкрд┐рдд рдереА, рд╕рдорд╛рдкреНрдд рд╣реЛ рдЧрдИред рд╣рдорд╛рд░реА рдЯреАрдо рдиреЗ 900+ рдкреНрд░рддрд┐рднрд╛рдЧрд┐рдпреЛрдВ рдореЗрдВ рд╕реЗ 7 рд╡рд╛рдВ рд╕реНрдерд╛рди рдкреНрд░рд╛рдкреНрдд рдХрд┐рдпрд╛ред рдЗрд╕ рддрдереНрдп рдХреЗ рдмрд╛рд╡рдЬреВрдж рдХрд┐ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рдмрд╣реБрдд рдкрд╣рд▓реЗ рд╕рдорд╛рдкреНрдд рд╣реЛ рдЧрдИ рд╣реИ, рд╣рдорд╛рд░реЗ рд╕рдорд╛рдзрд╛рди рдХреЗ рд▓рдЧрднрдЧ рд╕рднреА рддрд░реАрдХреЗ рдЕрднреА рднреА рд▓рд╛рдЧреВ рд╣реИрдВ, рдФрд░ рди рдХреЗрд╡рд▓ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдХреЗ рд▓рд┐рдП, рдмрд▓реНрдХрд┐ рдмрд┐рдХреНрд░реА рдХреЗ рд▓рд┐рдП рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЗ рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдХреЗ рд▓рд┐рдП рднреАред рдмрд┐рд▓реНрд▓реА рдХреЗ рдиреАрдЪреЗ рд╡рд┐рд╡рд░рдг рдХреЗ рд▓рд┐рдПред

tldr.py

import kaggle from ods import albu, alno, kostia, n01z3, nizhib, romul, ternaus from dataset import x_train, y_train, x_test oof_train, oof_test = [], [] for member in [albu, alno, kostia, n01z3, nizhib, romul, ternaus]: for model in member.models: model.fit_10folds(x_train, y_train, config=member.fit_config) oof_train.append(model.predict_oof_tta(x_train, config=member.tta_config)) oof_test.append(model.predict_oof_tta(x_test, config=member.tta_config)) for model in albu.second_level: model.fit(oof_train) y_test = model.predict_proba(oof_test) y_test = kostia.bayes_f2_opt(y_test) kaggle.submit(y_test) 

рдХрд╛рд░реНрдп рд╡рд┐рд╡рд░рдг

рдЧреНрд░рд╣ рдиреЗ рджреЛ рд╕реНрд╡рд░реВрдкреЛрдВ рдореЗрдВ рдЙрдкрдЧреНрд░рд╣ рдЪрд┐рддреНрд░реЛрдВ рдХрд╛ рдПрдХ рд╕реЗрдЯ рддреИрдпрд╛рд░ рдХрд┐рдпрд╛:

  1. TIF - 16 рдмрд┐рдЯ RGB + N, рдЬрд╣рд╛рдВ N - рдЗрдВрдлреНрд░рд╛ рд░реЗрдб рдХреЗ рдкрд╛рд╕
  2. рдЬреЗрдкреАрдЬреА - 8 рдмрд┐рдЯ рдЖрд░рдЬреАрдмреА, рдЬреЛ рдЯреАрдЖрдИрдПрдл рд╕реЗ рдкреНрд░рд╛рдкреНрдд рд╣реЛрддреЗ рд╣реИрдВ рдФрд░ рдЬреЛ рдХрд╛рд░реНрдп рдореЗрдВ рдкреНрд░рд╡реЗрд╢ рдХреЗ рд▓рд┐рдП рд╕реАрдорд╛ рдХреЛ рдХрдо рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдкреНрд░рджрд╛рди рдХрд┐рдП рдЧрдП рдереЗ, рд╕рд╛рде рд╣реА рджреГрд╢реНрдп рдХреЛ рд╕рд░рд▓ рдмрдирд╛рдиреЗ рдХреЗ рд▓рд┐рдПред рдХрд╛рдЧреНрд▓реЗ рдореЗрдВ рдкрд┐рдЫрд▓реА рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рдореЗрдВ, рдорд▓реНрдЯреАрд╕реНрдкреЗрдХреНрдЯреНрд░рд▓ рдЫрд╡рд┐рдпреЛрдВ рдХреЗ рд╕рд╛рде рдХрд╛рдо рдХрд░рдирд╛ рдЖрд╡рд╢реНрдпрдХ рдерд╛ред рдЧреИрд░-рджреГрд╢реНрдпрддрд╛, рдЕрд░реНрдерд╛рддреН, рдЕрд╡рд░рдХреНрдд, рд╕рд╛рде рд╣реА рд╕рд╛рде рдПрдХ рд▓рдВрдмреА рддрд░рдВрдЧ рджреИрд░реНрдзреНрдп рд╡рд╛рд▓реЗ рдЪреИрдирд▓, рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгреА рдХреА рдЧреБрдгрд╡рддреНрддрд╛ рдореЗрдВ рд╕реБрдзрд╛рд░, рджреЛрдиреЛрдВ рдиреЗрдЯрд╡рд░реНрдХ рдФрд░ рдЕрд╕реБрд░рдХреНрд╖рд┐рдд рддрд░реАрдХреЗред

рднреМрдЧреЛрд▓рд┐рдХ рд░реВрдк рд╕реЗ, рдбреЗрдЯрд╛ рдЕрдореЗрдЬрд╝реЕрди рдмреЗрд╕рд┐рди рдХреЗ рдХреНрд╖реЗрддреНрд░ рд╕реЗ рд▓рд┐рдпрд╛ рдЧрдпрд╛ рдерд╛, рдФрд░ рдмреНрд░рд╛рдЬреАрд▓, рдкреЗрд░реВ, рдЙрд░реБрдЧреНрд╡реЗ, рдХреЛрд▓рдВрдмрд┐рдпрд╛, рд╡реЗрдиреЗрдЬреБрдПрд▓рд╛, рдЧреБрдпрд╛рдирд╛, рдмреЛрд▓реАрд╡рд┐рдпрд╛ рдФрд░ рдЗрдХреНрд╡рд╛рдбреЛрд░ рдХреЗ рджреЗрд╢реЛрдВ рдХреЗ рдХреНрд╖реЗрддреНрд░реЛрдВ рд╕реЗ, рдЬрд┐рд╕рдореЗрдВ рджрд┐рд▓рдЪрд╕реНрдк рд╕рддрд╣ рдХреНрд╖реЗрддреНрд░реЛрдВ рдХрд╛ рдЪрдпрди рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛, рдЬрд┐рд╕рдореЗрдВ рд╕реЗ рдкреНрд░рддрд┐рднрд╛рдЧрд┐рдпреЛрдВ рдХреЛ рдкреЗрд╢рдХрд╢ рдХреА рдЧрдИ рдереАред

Tif рд╕реЗ jpg рдмрдирд╛рдиреЗ рдХреЗ рдмрд╛рдж, рд╕рднреА рджреГрд╢реНрдпреЛрдВ рдХреЛ рдЫреЛрдЯреЗ рдЖрдХрд╛рд░ рдХреЗ 256x256 рдореЗрдВ рдХрд╛рдЯ рджрд┐рдпрд╛ рдЧрдпрд╛ред рдФрд░ рдмрд░реНрд▓рд┐рди рдФрд░ рд╕реИрди рдлреНрд░рд╛рдВрд╕рд┐рд╕реНрдХреЛ рдХрд╛рд░реНрдпрд╛рд▓рдпреЛрдВ рд╕реЗ рдкреНрд▓реЗрдиреЗрдЯ рдХрд░реНрдордЪрд╛рд░рд┐рдпреЛрдВ рджреНрд╡рд╛рд░рд╛ рдкреНрд░рд╛рдкреНрдд рдХрд┐рдП рдЧрдП рдЬреЗрдкреАрдЬреА рдХреЗ рдЕрдиреБрд╕рд╛рд░, рд╕рд╛рде рд╣реА рдХреНрд░рд╛рдЙрдб рдлреНрд▓рд╛рд╡рд░ рдордВрдЪ рдХреЗ рдорд╛рдзреНрдпрдо рд╕реЗ, рдЕрдВрдХрди рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛ред

рдкреНрд░рддрд┐рднрд╛рдЧрд┐рдпреЛрдВ рдХреЛ рдкреНрд░рддреНрдпреЗрдХ 256x256 рдЯрд╛рдЗрд▓ рдХреЗ рд▓рд┐рдП рдкрд╛рд░рд╕реНрдкрд░рд┐рдХ рд░реВрдк рд╕реЗ рдЕрдирдиреНрдп рдореМрд╕рдо рдХреЗ рдирд┐рд╢рд╛рди рдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгреА рдХрд░рдиреЗ рдХрд╛ рдХрд╛рдо рд╕реМрдВрдкрд╛ рдЧрдпрд╛ рдерд╛:

рдЖрдВрд╢рд┐рдХ рд░реВрдк рд╕реЗ рдмрд╛рджрд▓ рдЫрд╛рдП рд░рд╣реЗрдВрдЧреЗ, рдзреБрдВрдз, рд╕рд╛рдлрд╝

рдФрд░ рднреА 0 рдпрд╛ рдЕрдзрд┐рдХ рдЦрд░рд╛рдм рдореМрд╕рдо: рдХреГрд╖рд┐, рдкреНрд░рд╛рдердорд┐рдХ, рдЪрдпрдирд╛рддреНрдордХ рд▓реЙрдЧрд┐рдВрдЧ, рд╡рд╛рд╕, рдЬрд▓, рд╕рдбрд╝рдХреЗрдВ, рд╢рд┐рдлреНрдЯрд┐рдВрдЧ рдХрд▓реНрдЯреАрд╡реЗрд╢рди, рдмреНрд▓реВрдорд┐рдВрдЧ, рдХрдиреНрд╡реЗрдВрд╢рдирд▓ рдорд╛рдЗрдирд┐рдВрдЧ

рдХреБрд▓ 4 рдореМрд╕рдо рдФрд░ 13 рдЧреИрд░-рдореМрд╕рдо, рдореМрд╕рдо рдкрд░рд╕реНрдкрд░ рдЕрдирдиреНрдп, рд▓реЗрдХрд┐рди рдХреЛрдИ рднреА рдореМрд╕рдо рдирд╣реАрдВ рд╣реИ, рд▓реЗрдХрд┐рди рдЕрдЧрд░ рддрд╕реНрд╡реАрд░ рдмрд╛рджрд▓ рд╣реИ, рддреЛ рдХреЛрдИ рдЕрдиреНрдп рдЯреИрдЧ рдирд╣реАрдВ рд╣реЛрдирд╛ рдЪрд╛рд╣рд┐рдПред



рдореЙрдбрд▓ рдХреА рд╕рдЯреАрдХрддрд╛ F2 рдореАрдЯреНрд░рд┐рдХ рджреНрд╡рд╛рд░рд╛ рдЕрдиреБрдорд╛рдирд┐рдд рдХреА рдЧрдИ рдереА:

рд╕реНрдХреЛрд░=(1+ рдмреАрдЯрд╛2) fracpr(рдмреАрдЯрд╛рдмреАрдЯрд╛2p+рдЖрд░)


p= fractptp+fp


r= fractptp+fn


 рдмреАрдЯрд╛=2


рдЗрд╕рдХреЗ рдЕрд▓рд╛рд╡рд╛, рд╕рднреА рд▓реЗрдмрд▓реЛрдВ рдХрд╛ рд╡рдЬрди рд╕рдорд╛рди рдерд╛ рдФрд░ рдкреНрд░рддреНрдпреЗрдХ рддрд╕реНрд╡реАрд░ рдХреЗ рд▓рд┐рдП рдкрд╣рд▓реЗ F2 рдХреА рдЧрдгрдирд╛ рдХреА рдЧрдИ рдереА, рдФрд░ рдлрд┐рд░ рдПрдХ рд╕рд╛рдорд╛рдиреНрдп рдФрд╕рдд рдерд╛ред рдЖрдорддреМрд░ рдкрд░ рд╡реЗ рдЗрд╕реЗ рдереЛрдбрд╝рд╛ рдЕрд▓рдЧ рддрд░реАрдХреЗ рд╕реЗ рдХрд░рддреЗ рд╣реИрдВ, рдЕрд░реНрдерд╛рддреН, рдПрдХ рдирд┐рд╢реНрдЪрд┐рдд рдореАрдЯреНрд░рд┐рдХ рдкреНрд░рддреНрдпреЗрдХ рд╡рд░реНрдЧ рдХреЗ рд▓рд┐рдП рдЧрдгрдирд╛ рдХреА рдЬрд╛рддреА рд╣реИ, рдФрд░ рдлрд┐рд░ рдФрд╕рдд рд╣реЛрддреА рд╣реИред рддрд░реНрдХ рдпрд╣ рд╣реИ рдХрд┐ рдмрд╛рдж рд╡рд╛рд▓рд╛ рд╡рд┐рдХрд▓реНрдк рдЕрдзрд┐рдХ рд╡реНрдпрд╛рдЦреНрдпрд╛рддреНрдордХ рд╣реИ, рдХреНрдпреЛрдВрдХрд┐ рдпрд╣ рдЖрдкрдХреЛ рдЗрд╕ рд╕рд╡рд╛рд▓ рдХрд╛ рдЬрд╡рд╛рдм рджреЗрдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рджреЗрддрд╛ рд╣реИ рдХрд┐ рдореЙрдбрд▓ рдкреНрд░рддреНрдпреЗрдХ рд╡рд┐рд╢реЗрд╖ рд╡рд░реНрдЧ рдкрд░ рдХреИрд╕реЗ рд╡реНрдпрд╡рд╣рд╛рд░ рдХрд░рддрд╛ рд╣реИред рдЗрд╕ рдорд╛рдорд▓реЗ рдореЗрдВ, рдЖрдпреЛрдЬрдХ рдкрд╣рд▓реЗ рд╡рд┐рдХрд▓реНрдк рдХреЗ рдЕрдиреБрд╕рд╛рд░ рдЧрдП, рдЬреЛ, рдЬрд╛рд╣рд┐рд░рд╛ рддреМрд░ рдкрд░, рдЙрдирдХреЗ рд╡реНрдпрд╡рд╕рд╛рдп рдХреА рдмрд╛рд░реАрдХрд┐рдпреЛрдВ рд╕реЗ рд╕рдВрдмрдВрдзрд┐рдд рд╣реИред

рдЯреНрд░реЗрди рдореЗрдВ 40k рдирдореВрдиреЗ рд╣реИрдВред рдЯреЗрд╕реНрдЯ рдореЗрдВ 40 рдХрд┐ред рдбреЗрдЯрд╛рд╕реЗрдЯ рдХреЗ рдЫреЛрдЯреЗ рдЖрдХрд╛рд░ рдХреЗ рдХрд╛рд░рдг, рд▓реЗрдХрд┐рди рдЪрд┐рддреНрд░реЛрдВ рдХреЗ рдмрдбрд╝реЗ рдЖрдХрд╛рд░ рдХреЗ рдХрд╛рд░рдг, рд╣рдо рдХрд╣ рд╕рдХрддреЗ рд╣реИрдВ рдХрд┐ рдпрд╣ "рд╕реНрдЯреЗрд░реЙрдпрдб рдкрд░ MNIST" рд╣реИ

рдЧреАрддрд╛рддреНрдордХ рд╡рд┐рд╖рдпрд╛рдВрддрд░

рдЬреИрд╕рд╛ рдХрд┐ рдЖрдк рд╡рд┐рд╡рд░рдг рд╕реЗ рджреЗрдЦ рд╕рдХрддреЗ рд╣реИрдВ, рдХрд╛рд░реНрдп рдХрд╛рдлреА рд╕рдордЭ рдореЗрдВ рдЖрддрд╛ рд╣реИ рдФрд░ рд╕рдорд╛рдзрд╛рди рдПрдХ рд░реЙрдХреЗрдЯ рдЕрд░реНрде рдирд╣реАрдВ рд╣реИ: рдЖрдкрдХреЛ рдмрд╕ рдЧреНрд░рд┐рдб рджрд░реНрдЬ рдХрд░рдиреЗ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛ рд╣реИред рдФрд░ рдЧреБрд╣рд╛ рдХреА рдмрд╛рд░реАрдХрд┐рдпреЛрдВ рдХреЛ рдзреНрдпрд╛рди рдореЗрдВ рд░рдЦрддреЗ рд╣реБрдП, рдЖрдк рд╢реАрд░реНрд╖ рдкрд░ рдореЙрдбрд▓ рдХрд╛ рдПрдХ рдЧреБрдЪреНрдЫрд╛ рднреА рдвреЗрд░ рдХрд░ рд╕рдХрддреЗ рд╣реИрдВред рд╣рд╛рд▓рд╛рдВрдХрд┐, рдПрдХ рд╕реНрд╡рд░реНрдг рдкрджрдХ рдкреНрд░рд╛рдкреНрдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП, рдЖрдкрдХреЛ рди рдХреЗрд╡рд▓ рдХрд┐рд╕реА рди рдХрд┐рд╕реА рдореЙрдбрд▓ рдХрд╛ рдПрдХ рдЧреБрдЪреНрдЫрд╛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рдиреЗ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛ рд╣реИред рдХрдИ рдмреБрдирд┐рдпрд╛рджреА рд╡рд┐рд╡рд┐рдз рдореЙрдбрд▓ рд╣реЛрдирд╛ рдЕрдирд┐рд╡рд╛рд░реНрдп рд╣реИ, рдЬрд┐рдирдореЗрдВ рд╕реЗ рдкреНрд░рддреНрдпреЗрдХ рдЕрдкрдиреЗ рдЖрдк рдореЗрдВ рдПрдХ рдЙрддреНрдХреГрд╖реНрдЯ рдкрд░рд┐рдгрд╛рдо рджрд┐рдЦрд╛рддрд╛ рд╣реИред рдФрд░ рдкрд╣рд▓реЗ рд╕реЗ рд╣реА рдЗрди рдореЙрдбрд▓реЛрдВ рдХреЗ рд╢реАрд░реНрд╖ рдкрд░ рдЖрдк рд╕реНрдЯреИрдХрд┐рдВрдЧ рдФрд░ рдЕрдиреНрдп рд╣реИрдХ рдХреЛ рд╣рд╡рд╛ рджреЗ рд╕рдХрддреЗ рд╣реИрдВред
рд╕рджрд╕реНрдпрдЬрд╛рд▓1cropTTAdiff,%
ALNOdensenet1210.92780.92940.1736
nizhibdensenet1690.92430.92770.3733
romulvgg160.92660.92670.0186
ternausdensenet1210.92320.92410.0921
albudensenet1210.92940.93120.1933
Kostiaresnet500.92620.92710.0907
n01z3resnext500.92810.92980.1896

рддрд╛рд▓рд┐рдХрд╛ рдПрдХрд▓ рдлрд╕рд▓ рдФрд░ рдЯреАрдЯреАрдП рдХреЗ рд▓рд┐рдП рд╕рднреА рдкреНрд░рддрд┐рднрд╛рдЧрд┐рдпреЛрдВ рдХреЗ F2 рд╕реНрдХреЛрд░ рдореЙрдбрд▓ рджрд┐рдЦрд╛рддреА рд╣реИред рдЬреИрд╕рд╛ рдХрд┐ рдЖрдк рджреЗрдЦ рд╕рдХрддреЗ рд╣реИрдВ, рдЕрдВрддрд░ рд╡рд╛рд╕реНрддрд╡рд┐рдХ рдЙрдкрдпреЛрдЧ рдХреЗ рд▓рд┐рдП рдЫреЛрдЯрд╛ рд╣реИ, рд▓реЗрдХрд┐рди рдпрд╣ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рдореЛрдб рдХреЗ рд▓рд┐рдП рдорд╣рддреНрд╡рдкреВрд░реНрдг рд╣реИред

рдЯреАрдо рдмрд╛рддрдЪреАрдд

рдЕрд▓реЗрдХреНрдЬреЗрдВрдбрд░ рдмреБрд╕реНрд▓рд╛рд╡ рдЕрд▓реНрдмреБ
рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рдореЗрдВ рднрд╛рдЧ рд▓реЗрдиреЗ рдХреЗ рд╕рдордп, рдЙрдиреНрд╣реЛрдВрдиреЗ рдЬрд┐рдпреЛрд╕реНрдХреИрди рдореЗрдВ рдкреВрд░реЗ рдПрдордПрд▓ рджрд┐рд╢рд╛ рдХрд╛ рдиреЗрддреГрддреНрд╡ рдХрд┐рдпрд╛ред рд▓реЗрдХрд┐рди рддрдм рд╕реЗ рдЙрдиреНрд╣реЛрдВрдиреЗ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдХрд╛ рдПрдХ рд╕рдореВрд╣ рдШрд╕реАрдЯрд╛, рд╕рд┐рдореЗрдВрдЯрд┐рдХ рд╕реЗрдЧрдореЗрдВрдЯ рдореЗрдВ рд╕рднреА рдУрдбреАрдПрд╕ рдХреЗ рдкрд┐рддрд╛ рдмрдиреЗ рдФрд░ рдорд┐рдиреНрд╕реНрдХ рдХреЗ рд▓рд┐рдП рд░рд╡рд╛рдирд╛ рд╣реБрдП, рдореИрдкрдмреЙрдХреНрд╕ рдореЗрдВ рд░реЛрдЗрдВрдЧ, рдЬрд┐рд╕рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рд▓реЗрдЦ рдкреНрд░рдХрд╛рд╢рд┐рдд рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛

рдПрд▓реЗрдХреНрд╕реА рдиреЛрд╕рдХреЛрд╡ рдЕрд▓рдиреЛ
рдпреВрдирд┐рд╡рд░реНрд╕рд▓ рдПрдордПрд▓ рд╕реЗрдирд╛рдиреАред рдИрд╡рд┐рд▓ рдорд╛рд░реНрдЯрд┐рдпрдВрд╕ рдореЗрдВ рдХрд╛рдо рдХрд┐рдпрд╛ред рдЕрдм рдпреИрдВрдбреЗрдХреНрд╕ рдкрд░ рд▓реБрдврд╝рдХ рдЧрдпрд╛ред

рдХреЛрдВрд╕реНрдЯреЗрдВрдЯрд┐рди рд▓реЛрдкреБрдХрд┐рди рдХреЛрд╕реНрдЯрд┐рдпрд▓реЛрдкреБрд╣рд┐рди
рдХрд╛рдо рдХрд┐рдпрд╛ рдФрд░ рд╕реНрдХреНрд░реИрдкрд┐рдВрдЧрд╣рдм рдореЗрдВ рдХрд╛рдо рдХрд░рдирд╛ рдЬрд╛рд░реА рд░рдЦрд╛ред рддрдм рд╕реЗ, рдХреЛрд╕реНрддреНрдпрд╛ рдХреБрдЫ рдФрд░ рдкрджрдХ рд╣рд╛рд╕рд┐рд▓ рдХрд░рдиреЗ рдореЗрдВ рдХрд╛рдордпрд╛рдм рд░рд╣реА рдФрд░ 5 рдорд┐рдирдЯ рдХреЗ рд▓рд┐рдП рдХреЗрдЧрд▓ рдЧреНрд░реИрдВрдбрдорд╛рд╕реНрдЯрд░

рдЖрд░реНрдерд░ рдХрдЬрд┐рди n01z3
рдЗрд╕ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рдореЗрдВ рднрд╛рдЧ рд▓реЗрдиреЗ рдХреЗ рд╕рдордп, рдореИрдВрдиреЗ рдПрд╡рд┐рдЯреЛ рдореЗрдВ рдХрд╛рдо рдХрд┐рдпрд╛ред рд▓реЗрдХрд┐рди рдирдП рд╕рд╛рд▓ рдХреЗ рдЖрд╕рдкрд╛рд╕, Dbrain рдХреЗ рд╕реНрдЯрд╛рд░реНрдЯрдЕрдк рд▓реАрдб рдбреЗрдЯрд╛ рд╕рд╛рдЗрдВрдЯрд┐рд╕реНрдЯ рдиреЗ рдмреНрд▓реЙрдХрдЪреЗрди рдкрд░ рд░реЛрд▓ рдХрд┐рдпрд╛ред рдореБрдЭреЗ рдЙрдореНрдореАрдж рд╣реИ рдХрд┐ рд╣рдо рдЬрд▓реНрдж рд╣реА рдбреЙрдХрд░реНрд╕ рдФрд░ рджреАрдкрдХ рдЪрд┐рд╣реНрдиреЛрдВ рдХреЗ рд╕рд╛рде рдЕрдкрдиреА рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдХреЗ рд╕рд╛рде рд╕рдореБрджрд╛рдп рдХреЛ рдЦреБрд╢ рдХрд░реЗрдВрдЧреЗред

рдПрд╡рдЧреЗрдиреА рдирд┐рдЬрд╝реАрдмрд┐рддреНрд╕рдХреА @ рдирдирд┐рдЬрд╝рд┐рдм
рд░рд╛рдордмрд▓реЗрд░ рдПрдВрдб рдХрдВрдкрдиреА рдХреЗ рдкреНрд░рдореБрдЦ рдбреЗрдЯрд╛ рд╡реИрдЬреНрдЮрд╛рдирд┐рдХ рдЗрд╕ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рд╕реЗ рдпреВрдЬреАрди рдиреЗ рдЪрд┐рддреНрд░ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдореЗрдВ рдЪреЗрд╣рд░реЗ рдЦреЛрдЬрдиреЗ рдХреА рдЧреБрдкреНрдд рдХреНрд╖рдорддрд╛ рдХреА рдЦреЛрдЬ рдХреАред рдХреНрдпрд╛ рдЙрд╕реЗ рдЯреЙрдкрдХреЛрдбрд░ рдордВрдЪ рдкрд░ рдХреБрдЫ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдХреЛ рдЦреАрдВрдЪрдиреЗ рдореЗрдВ рдорджрдж рдорд┐рд▓реАред рдореИрдВрдиреЗ рдЙрдирдореЗрдВ рд╕реЗ рдПрдХ рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдмрд╛рдд рдХреАред

рд░реБрд╕реНрд▓рд╛рди рдмреЗрдХреБрд▓реЛрд╡ рд░реЛрдореБрд▓
рдХреЙрдиреНрд╕реНрдЯреЗрдВрдЯрд╛ рдореЗрдВ рдЦреЗрд▓ рдХреА рдШрдЯрдирд╛рдУрдВ рдкрд░ рдирдЬрд╝рд░ рд░рдЦрдиреЗ рдореЗрдВ рд▓рдЧреЗ рд╣реБрдП рд╣реИрдВред

рд╡реНрд▓рд╛рджрд┐рдореАрд░ рдЗрдЧреНрд▓реЛрд╡рд┐рдХреЛрд╡ рдЯреЗрд░рдиреЙрд╕
рдЖрдкрдХреЛ рдмреНрд░рд┐рдЯрд┐рд╢ рдЦреБрдлрд┐рдпрд╛ рджреНрд╡рд╛рд░рд╛ рдЙрддреНрдкреАрдбрд╝рди рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдХрд╛рд░реНрд░рд╡рд╛рдИ-рдкреИрдХ рд▓реЗрдЦ рдХреЗ рд▓рд┐рдП рдпрд╛рдж рдХрд┐рдпрд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИред рдЙрдиреНрд╣реЛрдВрдиреЗ TrueAccord рдореЗрдВ рдХрд╛рдо рдХрд┐рдпрд╛, рд▓реЗрдХрд┐рди рдлрд┐рд░ рдЯреНрд░реЗрдВрдбреА рдпреБрд╡рд╛ Lyft рдореЗрдВ рд░реЛрд▓ рдХрд┐рдпрд╛ред рд╕реЗрд▓реНрдл-рдбреНрд░рд╛рдЗрд╡рд┐рдВрдЧ рдХрд╛рд░ рдХреЗ рд▓рд┐рдП рдХрдВрдкреНрдпреВрдЯрд░ рд╡рд┐рдЬрд╝рди рдХрд╣рд╛рдБ рдХрд╛рдо рдХрд░рддрд╛ рд╣реИред рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдХреЛ рдЦреАрдВрдЪрдиреЗ рдХреЗ рд▓рд┐рдП рдЬрд╛рд░реА рд╣реИ рдФрд░ рд╣рд╛рд▓ рд╣реА рдореЗрдВ рдХрд╛рдЧрд▓ рдЧреНрд░реИрдВрдбрдорд╛рд╕реНрдЯрд░ рдкреНрд░рд╛рдкреНрдд рдХрд┐рдпрд╛ рд╣реИред

рд╣рдорд╛рд░реА рдПрд╕реЛрд╕рд┐рдПрд╢рди рдФрд░ рднрд╛рдЧреАрджрд╛рд░реА рдХреЗ рдкреНрд░рд╛рд░реВрдк рдХреЛ рд╡рд┐рд╢рд┐рд╖реНрдЯ рдХрд╣рд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИред рдПрдХрдЬреБрдЯ рд╣реЛрдиреЗ рдХрд╛ рдирд┐рд░реНрдгрдп рдЗрд╕ рддрдереНрдп рдХреЗ рдХрд╛рд░рдг рдерд╛ рдХрд┐ рд╣рдо рд╕рднреА рдХреЗ рд▓реАрдбрд░рдмреЛрд░реНрдб рдкрд░ рдХрд░реАрдмреА рдкрд░рд┐рдгрд╛рдо рдереЗред рдФрд░ рд╣рдо рдореЗрдВ рд╕реЗ рдкреНрд░рддреНрдпреЗрдХ рдиреЗ рдЕрдкрдиреА рд╕реНрд╡рдпрдВ рдХреА рд╕реНрд╡рддрдВрддреНрд░ рдкрд╛рдЗрдкрд▓рд╛рдЗрди рдХреЛ рджреЗрдЦрд╛, рдЬреЛ рд╢реБрд░реБрдЖрдд рд╕реЗ рдЕрдВрдд рддрдХ рдкреВрд░реА рддрд░рд╣ рд╕реЗ рд╕реНрд╡рд╛рдпрддреНрдд рд╕рдорд╛рдзрд╛рди рдерд╛ред рд╕рд╛рде рд╣реА, рд╡рд┐рд▓рдп рдХреЗ рдмрд╛рдж, рдХрдИ рдкреНрд░рддрд┐рднрд╛рдЧреА рд╕реНрдЯреИрдХрд┐рдВрдЧ рдореЗрдВ рд▓рдЧреЗ рд╣реБрдП рдереЗред

рдкрд╣рд▓реА рдЪреАрдЬрд╝ рдЬреЛ рд╣рдордиреЗ рдХреА рд╡рд╣ рдереА рд╕рд┐рд▓рд╡рдЯреЛрдВ рдХреА рд╣рд┐рд╕реНрд╕реЗрджрд╛рд░реАред рд╣рдордиреЗ рдпрд╣ рд╕реБрдирд┐рд╢реНрдЪрд┐рдд рдХрд┐рдпрд╛ рдХрд┐ рдкреНрд░рддреНрдпреЗрдХ рддрд╣ рдореЗрдВ рдХрдХреНрд╖рд╛рдУрдВ рдХрд╛ рд╡рд┐рддрд░рдг рдкреВрд░реЗ рдбреЗрдЯрд╛рд╕реЗрдЯ рдореЗрдВ рд╕рдорд╛рди рдерд╛ред рдЗрд╕рдХреЗ рд▓рд┐рдП, рд╕рдмрд╕реЗ рджреБрд░реНрд▓рдн рд╡рд░реНрдЧ рдХреЛ рдкрд╣рд▓реЗ рдЪреБрдирд╛ рдЧрдпрд╛, рдЗрд╕рдХреЗ рджреНрд╡рд╛рд░рд╛ рд╕реНрддрд░реАрдХреГрдд рдХрд┐рдпрд╛ рдЧрдпрд╛, рдХреНрдпреЛрдВрдХрд┐ рд╢реЗрд╖ рдЪрд┐рддреНрд░реЛрдВ рдХреЛ рджреВрд╕рд░реЗ рд╕рдмрд╕реЗ рд▓реЛрдХрдкреНрд░рд┐рдп рд╡рд░реНрдЧ рджреНрд╡рд╛рд░рд╛ рд╕реНрддрд░реАрдХреГрдд рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛, рдФрд░ рдЗрд╕ рддрд░рд╣ рдЬрдм рддрдХ рдХреЛрдИ рдЪрд┐рддреНрд░ рдирд╣реАрдВ рдмрдЪрд╛ рдерд╛ред

рдЧреБрдирд╛ рд╡рд░реНрдЧреЛрдВ рдХрд╛ рд╣рд┐рд╕реНрдЯреЛрдЧреНрд░рд╛рдо:



рд╣рдорд╛рд░реЗ рдкрд╛рд╕ рдПрдХ рд╕рд╛рдорд╛рдиреНрдп рд░рд┐рдкреЙрдЬрд┐рдЯрд░реА рднреА рдереА, рдЬрд╣рд╛рдВ рдкреНрд░рддреНрдпреЗрдХ рдЯреАрдо рдХреЗ рд╕рджрд╕реНрдп рдХреЗ рдкрд╛рд╕ рдЕрдкрдирд╛ рд╕реНрд╡рдпрдВ рдХрд╛ рдлрд╝реЛрд▓реНрдбрд░ рдерд╛, рдЬрд┐рд╕рдХреЗ рднреАрддрд░ рдЙрд╕рдиреЗ рдХреЛрдб рдХреЛ рд╡реНрдпрд╡рд╕реНрдерд┐рдд рдХрд┐рдпрд╛ рдерд╛ рдЬреИрд╕рд╛ рд╡рд╣ рдЪрд╛рд╣рддрд╛ рдерд╛ред

рдФрд░ рд╣рдо рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгреА рдХреЗ рдкреНрд░рд╛рд░реВрдк рдкрд░ рднреА рд╕рд╣рдордд рд╣реБрдП, рдХреНрдпреЛрдВрдХрд┐ рдпрд╣ рд╣рдорд╛рд░реЗ рдореЙрдбрд▓ рдХреЗ рд╕рдВрдпреЛрдЬрди рдХреЗ рд▓рд┐рдП рдмрд╛рддрдЪреАрдд рдХрд╛ рдПрдХрдорд╛рддреНрд░ рдмрд┐рдВрджреБ рдерд╛ред

рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдкреНрд░рд╢рд┐рдХреНрд╖рдг

рдЪреВрдВрдХрд┐ рд╣рдордореЗрдВ рд╕реЗ рдкреНрд░рддреНрдпреЗрдХ рдХреЗ рдкрд╛рд╕ рдПрдХ рд╕реНрд╡рддрдВрддреНрд░ рдкрд╛рдЗрдкрд▓рд╛рдЗрди рдереА, рдЗрд╕рд▓рд┐рдП рд╣рдо рд▓реЛрдЧреЛрдВ рджреНрд╡рд╛рд░рд╛ рд╕рдорд╛рдирд╛рдВрддрд░ рдЗрд╖реНрдЯрддрдо рд╕реАрдЦрдиреЗ рдХреА рдкреНрд░рдХреНрд░рд┐рдпрд╛ рдХрд╛ рдПрдХ рдЧреНрд░рд┐рдб рдирдореВрдирд╛ рдереЗред

рд╕рд╛рдорд╛рдиреНрдп рджреГрд╖реНрдЯрд┐рдХреЛрдг


рдЪрд┐рддреНрд░ github.com/tornadomeet/ResNet рд╕реЗ

рдХрд▓реНрдкрдирд╛ рдкрд░ Resnet рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЗ рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдЕрдиреБрд╕реВрдЪреА рдкрд░ рдПрдХ рд╡рд┐рд╢рд┐рд╖реНрдЯ рд╕реАрдЦрдиреЗ рдХреА рдкреНрд░рдХреНрд░рд┐рдпрд╛ рдкреНрд░рд╕реНрддреБрдд рдХреА рдЬрд╛рддреА рд╣реИред рд╡реЗ SGD (lr 0.1 Nesterov Momentum 0.0001 WD 0.9) рдХреЗ рд╕рд╛рде рдпрд╛рджреГрдЪреНрдЫрд┐рдХ рд░реВрдк рд╕реЗ рдЖрд░рдВрднрд┐рдХ рднрд╛рд░ рд╕реЗ рд╢реБрд░реВ рдХрд░рддреЗ рд╣реИрдВ рдФрд░ рдлрд┐рд░ 30 рдХреЗ рдмрд╛рдж рд╕реАрдЦрдиреЗ рдХреА рджрд░ рдХреЛ 10 рдЧреБрдирд╛ рдХрдо рдХрд░ рджреЗрддреЗ рд╣реИрдВред

рд╡реИрдЪрд╛рд░рд┐рдХ рд░реВрдк рд╕реЗ, рд╣рдо рдореЗрдВ рд╕реЗ рдкреНрд░рддреНрдпреЗрдХ рдиреЗ рдПрдХ рд╣реА рджреГрд╖реНрдЯрд┐рдХреЛрдг рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд┐рдпрд╛, рд╣рд╛рд▓рд╛рдВрдХрд┐, рдкреНрд░рддреНрдпреЗрдХ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рд╕реАрдЦрддреЗ рд╕рдордп рдмреВрдврд╝рд╛ рдирд╣реАрдВ рд╣реЛрдиреЗ рдХреЗ рд▓рд┐рдП, рдПрд▓рдЖрд░ рдШрдЯрддрд╛ рд╣реИ рдЕрдЧрд░ рд╕рддреНрдпрд╛рдкрди рдиреЗ рд▓рдЧрд╛рддрд╛рд░ рдкрдВрдХреНрддрд┐ рдореЗрдВ 3-5 рдпреБрдЧреЛрдВ рдХреЗ рд▓рд┐рдП рдиреБрдХрд╕рд╛рди рдирд╣реАрдВ рдЫреЛрдбрд╝рд╛ред рдпрд╛, рдХреБрдЫ рдкреНрд░рддрд┐рднрд╛рдЧрд┐рдпреЛрдВ рдиреЗ рдкреНрд░рддреНрдпреЗрдХ рдПрд▓рдЖрд░ рдХреНрд╖рддрд┐ рдкрд░ рдпреБрдЧреЛрдВ рдХреА рд╕рдВрдЦреНрдпрд╛ рдХреЛ рдХрдо рдХрд░ рджрд┐рдпрд╛ рдФрд░ рдЕрдиреБрд╕реВрдЪреА рдХреЗ рдЕрдиреБрд╕рд╛рд░ рдХрдо рдХрд┐рдпрд╛ред

рд╡реГрджреНрдзрд┐

рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХрд╛ рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдХрд░рддреЗ рд╕рдордп рд╕рд╣реА рд╡реГрджреНрдзрд┐ рдХрд╛ рдЪрдпрди рдХрд░рдирд╛ рдмрд╣реБрдд рдорд╣рддреНрд╡рдкреВрд░реНрдг рд╣реИред рд╕рдВрд╡рд░реНрджреНрдзрди рдбреЗрдЯрд╛ рдХреА рдкреНрд░рдХреГрддрд┐ рдХреА рдкрд░рд┐рд╡рд░реНрддрдирд╢реАрд▓рддрд╛ рдХреЛ рдкреНрд░рддрд┐рдмрд┐рдВрдмрд┐рдд рдХрд░рдирд╛ рдЪрд╛рд╣рд┐рдПред рдкрд░рдВрдкрд░рд╛рдЧрдд рд░реВрдк рд╕реЗ, рд╡реГрджреНрдзрд┐ рдХреЛ рджреЛ рдкреНрд░рдХрд╛рд░реЛрдВ рдореЗрдВ рд╡рд┐рднрд╛рдЬрд┐рдд рдХрд┐рдпрд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИ: рд╡реЗ рдЬреЛ рдбреЗрдЯрд╛ рдореЗрдВ рдкреВрд░реНрд╡рд╛рдЧреНрд░рд╣ рдХрд╛ рдкрд░рд┐рдЪрдп рджреЗрддреЗ рд╣реИрдВ, рдФрд░ рдЬреЛ рдРрд╕рд╛ рдирд╣реАрдВ рдХрд░рддреЗ рд╣реИрдВред рдкреВрд░реНрд╡рд╛рдЧреНрд░рд╣ рд╕реЗ, рдХреЛрдИ рд╡рд┐рднрд┐рдиреНрди рдирд┐рдореНрди-рд╕реНрддрд░реАрдп рдЖрдБрдХрдбрд╝реЛрдВ рдХреЛ рд╕рдордЭ рд╕рдХрддрд╛ рд╣реИ, рдЬреИрд╕реЗ рдХрд┐ рд░рдВрдЧ рд╣рд┐рд╕реНрдЯреЛрдЧреНрд░рд╛рдо рдпрд╛ рд╡рд┐рд╢реЗрд╖рддрд╛ рдЖрдХрд╛рд░ред рдЗрд╕ рд╕рдВрдмрдВрдз рдореЗрдВ, рдПрдЪрдПрд╕рд╡реА рд╡реГрджреНрдзрд┐ рдФрд░ рддрд░рд╛рдЬреВ рдПрдХ рдСрдлрд╕реЗрдЯ рдкреЗрд╢ рдХрд░рддреЗ рд╣реИрдВ, рд▓реЗрдХрд┐рди рдПрдХ рдпрд╛рджреГрдЪреНрдЫрд┐рдХ рдлрд╕рд▓ рдирд╣реАрдВ рд╣реЛрддреА рд╣реИред

рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рдиреЗ рдХреЗ рдкрд╣рд▓реЗ рдЪрд░рдгреЛрдВ рдореЗрдВ, рдЖрдк рд╡реГрджреНрдзрд┐ рдХреЗ рд╕рд╛рде рдмрд╣реБрдд рджреВрд░ рдЬрд╛ рд╕рдХрддреЗ рд╣реИрдВ рдФрд░ рдмрд╣реБрдд рдХрдард┐рди рд╕реЗрдЯ рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░ рд╕рдХрддреЗ рд╣реИрдВред рд╣рд╛рд▓рд╛рдВрдХрд┐, рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдХреЗ рдЕрдВрдд рдХреА рдУрд░, рдЖрдкрдХреЛ рдпрд╛ рддреЛ рд╡реГрджреНрдзрд┐ рдХреЛ рдмрдВрдж рдХрд░рдирд╛ рд╣реЛрдЧрд╛ рдпрд╛ рдХреЗрд╡рд▓ рдЙрди рд▓реЛрдЧреЛрдВ рдХреЛ рдЫреЛрдбрд╝рдирд╛ рд╣реЛрдЧрд╛ рдЬреЛ рдкреВрд░реНрд╡рд╛рдЧреНрд░рд╣ рдХрд╛ рдкрд░рд┐рдЪрдп рдирд╣реАрдВ рджреЗрддреЗ рд╣реИрдВред рдпрд╣ рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдЯреНрд░реЗрди рдХреЗ рдиреАрдЪреЗ рдереЛрдбрд╝рд╛ рдУрд╡рд░рдлрд┐рдЯ рдХрд░рдиреЗ рдФрд░ рд╕рддреНрдпрд╛рдкрди рдкрд░ рдереЛрдбрд╝рд╛ рдмреЗрд╣рддрд░ рдкрд░рд┐рдгрд╛рдо рджрд┐рдЦрд╛рдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рджреЗрддрд╛ рд╣реИред

рдкрд░рдд рдЬрдордирд╛

рдЕрдзрд┐рдХрд╛рдВрд╢ рдХрд╛рд░реНрдпреЛрдВ рдореЗрдВ, рдпрд╣ рдЦрд░реЛрдВрдЪ рд╕реЗ рдПрдХ рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдХреЛрдИ рдорддрд▓рдм рдирд╣реАрдВ рд╣реИ, рдпрд╣ рдкреВрд░реНрд╡-рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдиреЗрдЯрд╡рд░реНрдХ рдХреЗ рд╕рд╛рде рдмреЗрд▓рд╛ рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдмрд╣реБрдд рдЕрдзрд┐рдХ рдХреБрд╢рд▓ рд╣реИ, Imagenet рдХреЗ рд╕рд╛рде рдХрд╣рддреЗ рд╣реИрдВред рд╣рд╛рд▓рд╛рдВрдХрд┐, рдЖрдк рдЖрдЧреЗ рдЬрд╛ рд╕рдХрддреЗ рд╣реИрдВ рдФрд░ рди рдХреЗрд╡рд▓ рд╡рд╛рдВрдЫрд┐рдд рд╡рд░реНрдЧреЛрдВ рдХреА рд╕рдВрдЦреНрдпрд╛ рдХреЗ рд╕рд╛рде рдкрд░рдд рдХреЗ рдиреАрдЪреЗ рдкреВрд░реА рддрд░рд╣ рд╕реЗ рдЬреБрдбрд╝реЗ рдкрд░рдд рдХреЛ рдмрджрд▓ рд╕рдХрддреЗ рд╣реИрдВ, рдмрд▓реНрдХрд┐ рдкрд╣рд▓реЗ рд╕рднреА рд╕рдВрдХрд▓реНрдкреЛрдВ рдХреЛ рдардВрдб рдХреЗ рд╕рд╛рде рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рддреЗ рд╣реИрдВред рдпрджрд┐ рдЖрдк рджреГрдврд╝ рд╕рдВрдХрд▓реНрдкреЛрдВ рдХреЛ рдореБрдХреНрдд рдирд╣реАрдВ рдХрд░рддреЗ рд╣реИрдВ рдФрд░ рддреБрд░рдВрдд рдкреВрд░реЗ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдкреВрд░реА рддрд░рд╣ рд╕реЗ рдХрдиреЗрдХреНрдЯреЗрдб рдкрд░рдд рдХреЗ рдмреЗрддрд░рддреАрдм рдврдВрдЧ рд╕реЗ рдЖрд░рдВрднрд┐рдХ рднрд╛рд░ рдХреЗ рд╕рд╛рде рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рддреЗ рд╣реИрдВ, рддреЛ рд╕рдВрдХрд▓реНрдкреЛрдВ рдХреЗ рднрд╛рд░ рднреНрд░рд╖реНрдЯ рд╣реЛ рдЬрд╛рдПрдВрдЧреЗ рдФрд░ рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХрд╛ рдЕрдВрддрд┐рдо рдкреНрд░рджрд░реНрд╢рди рдХрдо рд╣реЛрдЧрд╛ред рдЗрд╕ рдХрд╛рд░реНрдп рдкрд░, рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдирдореВрдиреЗ рдХреЗ рдЫреЛрдЯреЗ рдЖрдХрд╛рд░ рдХреЗ рдХрд╛рд░рдг рдпрд╣ рд╡рд┐рд╢реЗрд╖ рд░реВрдк рд╕реЗ рдзреНрдпрд╛рди рджреЗрдиреЗ рдпреЛрдЧреНрдп рдерд╛ред рдмрдбрд╝реА рдорд╛рддреНрд░рд╛ рдореЗрдВ рдбреЗрдЯрд╛ рдЬреИрд╕реЗ рдХрд┐ cdiscount рдХреЗ рд╕рд╛рде рдЕрдиреНрдп рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдореЗрдВ, рдкреВрд░реЗ рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдлреНрд░реАрдЬ рдХрд░рдирд╛ рд╕рдВрднрд╡ рдирд╣реАрдВ рдерд╛, рд▓реЗрдХрд┐рди рдЕрдВрдд рд╕реЗ рджреГрдврд╝ рд╕рдВрдХрд▓реНрдк рдХреЗ рд╕рдореВрд╣ред рдЗрд╕ рддрд░рд╣, рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдореЗрдВ рдмрд╣реБрдд рддреЗрдЬреА рдЖ рд╕рдХрддреА рд╣реИ, рдХреНрдпреЛрдВрдХрд┐ рдЧреНрд░реЗрдбрд░ рдХреЛ рдЬрдореА рдкрд░рддреЛрдВ рдХреЗ рд▓рд┐рдП рдирд╣реАрдВ рдорд╛рдирд╛ рдЬрд╛рддрд╛ рдерд╛ред

рдЪрдХреНрд░реАрдп annealing

рдпрд╣ рдкреНрд░рдХреНрд░рд┐рдпрд╛ рдЗрд╕ рддрд░рд╣ рджрд┐рдЦрддреА рд╣реИред рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреА рдмреБрдирд┐рдпрд╛рджреА рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдкреНрд░рдХреНрд░рд┐рдпрд╛ рдХреЗ рдкреВрд░рд╛ рд╣реЛрдиреЗ рдХреЗ рдмрд╛рдж, рд╕рдмрд╕реЗ рдЕрдЪреНрдЫрд╛ рд╡рдЬрди рд▓рд┐рдпрд╛ рдЬрд╛рддрд╛ рд╣реИ рдФрд░ рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдкреНрд░рдХреНрд░рд┐рдпрд╛ рдХреЛ рджреЛрд╣рд░рд╛рдпрд╛ рдЬрд╛рддрд╛ рд╣реИред рд▓реЗрдХрд┐рди рдпрд╣ рдХрдо рд╕реАрдЦрдиреЗ рдХреА рджрд░ рд╕реЗ рд╢реБрд░реВ рд╣реЛрддрд╛ рд╣реИ рдФрд░ рдереЛрдбрд╝реЗ рд╕рдордп рдореЗрдВ рд╣реЛрддрд╛ рд╣реИ, 3-5 рдпреБрдЧ рдХрд╣рддреЗ рд╣реИрдВред рдпрд╣ рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдХрдо рд╕реНрдерд╛рдиреАрдп рдиреНрдпреВрдирддрдо рдкрд░ рдЬрд╛рдиреЗ рдФрд░ рдмреЗрд╣рддрд░ рдкреНрд░рджрд░реНрд╢рди рджрд┐рдЦрд╛рдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рджреЗрддрд╛ рд╣реИред рдЗрд╕ рд╕реНрдерд┐рд░ рдЕрднрд┐рдпрд╛рди рдХреЗ рдкрд░рд┐рдгрд╛рдорд╕реНрд╡рд░реВрдк рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рдореЗрдВ рдХрд╛рдлреА рд╕рдВрдЦреНрдпрд╛ рдореЗрдВ рд╕реБрдзрд╛рд░ рд╣реЛрддрд╛ рд╣реИред

рдпрд╣рд╛рдВ рджреЛ рд░рд┐рд╕реЗрдкреНрд╢рди рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдЕрдзрд┐рдХ рд╡рд┐рд╕реНрддрд╛рд░ рд╕реЗ

рдкрд░реАрдХреНрд╖рдг рд╕рдордп рд╡реГрджреНрдзрд┐

рдЪреВрдВрдХрд┐ рдпрд╣ рдПрдХ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛ рд╣реИ рдФрд░ рд╣рдореЗрдВ рдЕрдиреБрдорд╛рди рдХреЗ рд╕рдордп рдкрд░ рдФрдкрдЪрд╛рд░рд┐рдХ рдкреНрд░рддрд┐рдмрдВрдз рдирд╣реАрдВ рд╣реИ, рдЖрдк рдкрд░реАрдХреНрд╖рдг рдХреЗ рджреМрд░рд╛рди рд╡реГрджреНрдзрд┐ рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░ рд╕рдХрддреЗ рд╣реИрдВред рдРрд╕рд╛ рд▓рдЧ рд░рд╣рд╛ рд╣реИ рдХрд┐ рдЪрд┐рддреНрд░ рдЙрд╕реА рддрд░рд╣ рд╡рд┐рдХреГрдд рд╣реИ рдЬреИрд╕реЗ рдкреНрд░рд╢рд┐рдХреНрд╖рдг рдХреЗ рджреМрд░рд╛рди рд╣реБрдЖ рдерд╛ред рдХрд╣рддреЗ рд╣реИрдВ, рдпрд╣ рд▓рдВрдмрд╡рдд, рдХреНрд╖реИрддрд┐рдЬ рд░реВрдк рд╕реЗ рдкрд░рд┐рд▓рдХреНрд╖рд┐рдд рд╣реЛрддрд╛ рд╣реИ, рдХреЛрдг рд╕реЗ рдШреБрдорд╛рдпрд╛ рдЬрд╛рддрд╛ рд╣реИ, рдЖрджрд┐ред рдкреНрд░рддреНрдпреЗрдХ рд╡реГрджреНрдзрд┐ рдПрдХ рдирдИ рддрд╕реНрд╡реАрд░ рджреЗрддреА рд╣реИ рдЬрд┐рд╕рд╕реЗ рд╣рдореЗрдВ рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпрд╛рдВ рдорд┐рд▓рддреА рд╣реИрдВред рддрдм рдПрдХ рддрд╕реНрд╡реАрд░ рдХреЗ рдРрд╕реЗ рд╡рд┐рдХреГрддрд┐рдпреЛрдВ рдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпрд╛рдВ рдФрд╕рддрди рд╣реЛрддреА рд╣реИрдВ (рдЬреНрдпрд╛рдорд┐рддреАрдп рд╕рд╛рдзрдиреЛрдВ рджреНрд╡рд╛рд░рд╛ рдПрдХ рдирд┐рдпрдо рдХреЗ рд░реВрдк рдореЗрдВ)ред рдпрд╣ рдПрдХ рд▓рд╛рдн рднреА рджреЗрддрд╛ рд╣реИред рдЕрдиреНрдп рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдореЗрдВ, рдореИрдВрдиреЗ рдпрд╛рджреГрдЪреНрдЫрд┐рдХ рд╕рдВрд╡рд░реНрджреНрдзрди рдХреЗ рд╕рд╛рде рднреА рдкреНрд░рдпреЛрдЧ рдХрд┐рдпрд╛ред рдХрд╣рддреЗ рд╣реИрдВ, рдЖрдк рдПрдХ рдмрд╛рд░ рдореЗрдВ рдПрдХ рдЖрд╡реЗрджрди рдирд╣реАрдВ рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ, рд▓реЗрдХрд┐рди рдмрд╕ рдпрд╛рджреГрдЪреНрдЫрд┐рдХ рдореЛрдбрд╝, рд╡рд┐рд░реЛрдзрд╛рднрд╛рд╕реЛрдВ рдФрд░ рд░рдВрдЧ рд╡реГрджреНрдзрд┐ рдХреЗ рд▓рд┐рдП рдЖрдпрд╛рдо рдХреЛ рдЖрдзрд╛ рд╕реЗ рдХрдо рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ, рдмреАрдЬ рдХреЛ рдареАрдХ рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ рдФрд░ рдРрд╕реЗ рдХрдИ рдмреЗрддрд░рддреАрдм рдврдВрдЧ рд╕реЗ рд╡рд┐рдХреГрдд рдЪрд┐рддреНрд░ рдмрдирд╛ рд╕рдХрддреЗ рд╣реИрдВред рдЗрд╕рд╕реЗ рднреА рдмрдврд╝рдд рдорд┐рд▓реАред

рд╕реНрдиреИрдкрд╢реЙрдЯ рдЕрд╕реЗрдореНрдмрд▓рд┐рдВрдЧ (рдорд▓реНрдЯреАрдЪреЗрдХрдкреНрд╡рд╛рдЗрдВрдЯ рдЯреАрдЯреАрдП)

рдПрдиреАрд▓рд┐рдВрдЧ рдХреЗ рд╡рд┐рдЪрд╛рд░ рдХреЛ рдФрд░ рд╡рд┐рдХрд╕рд┐рдд рдХрд┐рдпрд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИред рдПрдиреАрд▓рд┐рдВрдЧ рдХреЗ рдкреНрд░рддреНрдпреЗрдХ рдЪрд░рдг рдореЗрдВ, рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдереЛрдбрд╝реА рдЕрд▓рдЧ рд╕реНрдерд╛рдиреАрдп рдорд┐рдиреАрдорд╛ рдореЗрдВ рдЙрдбрд╝рддрд╛ рд╣реИред рдФрд░ рдЗрд╕рдХрд╛ рдорддрд▓рдм рдпрд╣ рд╣реИ рдХрд┐ рдпреЗ рдЕрдирд┐рд╡рд╛рд░реНрдп рд░реВрдк рд╕реЗ рдереЛрдбрд╝реЗ рдЕрд▓рдЧ рдореЙрдбрд▓ рд╣реИрдВ рдЬрд┐рдиреНрд╣реЗрдВ рдФрд╕рдд рдХрд┐рдпрд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИред рдЗрд╕ рдкреНрд░рдХрд╛рд░, рдкрд░реАрдХреНрд╖рдг рдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпреЛрдВ рдХреЗ рджреМрд░рд╛рди, рдЖрдк рддреАрди рд╕рд░реНрд╡рд╢реНрд░реЗрд╖реНрда рдЪреМрдХрд┐рдпреЛрдВ рдХреЛ рд▓реЗ рд╕рдХрддреЗ рд╣реИрдВ рдФрд░ рдЙрдирдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпреЛрдВ рдХреЛ рдФрд╕рдд рдХрд░ рд╕рдХрддреЗ рд╣реИрдВред рдореИрдВрдиреЗ рддреАрди рд╕рд░реНрд╡рд╢реНрд░реЗрд╖реНрда рдирд╣реАрдВ рд▓реЗрдиреЗ рдХреА рдХреЛрд╢рд┐рд╢ рдХреА, рд▓реЗрдХрд┐рди рд╢реАрд░реНрд╖ 10 рдЪреМрдХрд┐рдпреЛрдВ рдореЗрдВ рд╕реЗ рддреАрди рд╕рдмрд╕реЗ рд╡рд┐рд╡рд┐рдз - рдпрд╣ рдмрджрддрд░ рдерд╛ред рдЦреИрд░, рдЙрддреНрдкрд╛рджрди рдХреЗ рд▓рд┐рдП рдЗрд╕ рддрд░рд╣ рдХреА рдЪрд╛рд▓ рд▓рд╛рдЧреВ рдирд╣реАрдВ рд╣реИ рдФрд░ рдореИрдВрдиреЗ рдореЙрдбрд▓реЛрдВ рдХреЗ рд╡рдЬрди рдХреЛ рдФрд╕рдд рдХрд░рдиреЗ рдХреА рдХреЛрд╢рд┐рд╢ рдХреАред рдЗрд╕рдиреЗ рдмрд╣реБрдд рд╣реА рддреБрдЪреНрдЫ рд▓реЗрдХрд┐рди рд╕реНрдерд┐рд░ рд╡реГрджреНрдзрд┐ рджреАред



рдкреНрд░рддреНрдпреЗрдХ рдЯреАрдо рдХреЗ рд╕рджрд╕реНрдп рдХреЗ рджреГрд╖реНрдЯрд┐рдХреЛрдг

рддрджрдиреБрд╕рд╛рд░, рдПрдХ рдбрд┐рдЧреНрд░реА рдпрд╛ рдХрд┐рд╕реА рдЕрдиреНрдп рдХреЗ рд▓рд┐рдП, рд╣рдорд╛рд░реА рдЯреАрдо рдХреЗ рдкреНрд░рддреНрдпреЗрдХ рд╕рджрд╕реНрдп рдиреЗ рдЙрдкрд░реЛрдХреНрдд рддрдХрдиреАрдХреЛрдВ рдХреЗ рдПрдХ рдЕрд▓рдЧ рд╕рдВрдпреЛрдЬрди рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд┐рдпрд╛ред
рдЫреЗрджрд░реВрдкрд╛рдВрддрд░рдг рдлреНрд░реАрдЬ,
рдпреБрдЧ
рдЕрдиреБрдХреВрд▓рдХрд░рдгрдиреАрддрд┐AugsTTA
albu3SGD15 рдпреБрдЧ рдПрд▓рдЖрд░ рдХреНрд╖рдп,
рд╡реГрддреНрдд резрей рдпреБрдЧ
D4,
рд╕реНрдХреЗрд▓,
рдСрдлрд╕реЗрдЯ,
рд╡рд┐рд░реВрдкрдг,
рдЗрд╕рдХреЗ рд╡рд┐рдкрд░реАрдд,
рдХрд▓рдВрдХ
D4
ALNO3SGDLr рдХреНрд╖рдпD4,
рд╕реНрдХреЗрд▓,
рдСрдлрд╕реЗрдЯ,
рд╡рд┐рд░реВрдкрдг,
рдЗрд╕рдХреЗ рд╡рд┐рдкрд░реАрдд,
рдзреБрдВрдзрд▓рд╛,
рдХрддрд░рдиреА,
рдЪреИрдирд▓ рдЧреБрдгрдХ
D4
n01z32SGDрдбреНрд░реЙрдк рдПрд▓рдЖрд░, рд░реЛрдЧреА 10D4,
рд╕реНрдХреЗрд▓,
рд╡рд┐рд░реВрдкрдг,
рдЗрд╕рдХреЗ рд╡рд┐рдкрд░реАрдд,
рдХрд▓рдВрдХ
рдбреА 4, 3 рдЪреМрдХреА
ternaus-рдПрдбрдордЪрдХреНрд░реАрдп LR (1e-3: 1e-6)D4,
рд╕реНрдХреЗрд▓,
рдЪреИрдирд▓ рдЬреЛрдбрд╝реЗрдВ
рдХрдВрдЯреНрд░рд╛рд╕реНрдЯ
D4,
рдмреЗрддрд░рддреАрдм рдлрд╕рд▓
nizhib-рдПрдбрдоStepLR, 60 рдпреБрдЧ, 20 рдкреНрд░рддрд┐ рдХреНрд╖рдпD4,
RandomSizedCrop
D4,
4 рдХреЛрдиреЗ,
рдХреЗрдВрджреНрд░,
рд╕реНрдХреЗрд▓
Kostia1рдПрдбрдоD4,
рд╕реНрдХреЗрд▓,
рд╡рд┐рд░реВрдкрдг,
рдЗрд╕рдХреЗ рд╡рд┐рдкрд░реАрдд,
рдХрд▓рдВрдХ
D4
romul-SGDbase_lr: 0.01 - 0.02
lr = base_lr * (0.33 ** (рдпреБрдЧ / 30))
рдпреБрдЧ: релреж
рдбреА 4, рд╕реНрдХреЗрд▓D4, рдХреЗрдВрджреНрд░ рдХреА рдлрд╕рд▓,
рдХреЛрдиреЗ рдХреА рдлрд╕рд▓

рд╕реНрдЯреИрдХрд┐рдВрдЧ рдФрд░ рд╣реИрдХ

рд╣рдордиреЗ 10 рдЧреБрдирд╛ рдкрд░ рдорд╛рдкрджрдВрдбреЛрдВ рдХреЗ рдкреНрд░рддреНрдпреЗрдХ рд╕реЗрдЯ рдХреЗ рд╕рд╛рде рдкреНрд░рддреНрдпреЗрдХ рдореЙрдбрд▓ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд┐рдпрд╛ред рдФрд░ рдлрд┐рд░ рдлреЛрд▓реНрдб (OOF) рдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпреЛрдВ рдХреЗ рдЖрдзрд╛рд░ рдкрд░ рд╣рдордиреЗ рджреВрд╕рд░реЗ рд╕реНрддрд░ рдХреЗ рдореЙрдбрд▓ рд╕рд┐рдЦрд╛рдП: рдПрдХреНрд╕реНрдЯреНрд░рд╛ рдЯреНрд░реАрдЬрд╝, рд▓реАрдирд┐рдпрд░ рд░рд┐рдЧреНрд░реЗрд╢рди, рдиреНрдпреВрд░рд▓ рдиреЗрдЯрд╡рд░реНрдХ рдФрд░ рдмрд╕ рдФрд╕рдд рдореЙрдбрд▓ред

рдФрд░ рдкрд╣рд▓реЗ рд╕реЗ рд╣реА рдУрдУрдПрдл рдореЗрдВ, рджреВрд╕рд░реЗ рд╕реНрддрд░ рдХреЗ рдореЙрдбрд▓ рдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпреЛрдВ рдиреЗ рдорд┐рд╢реНрд░рдг рдХреЗ рд▓рд┐рдП рд╡рдЬрди рдЙрдард╛рдпрд╛ред рдЖрдк рдпрд╣рд╛рдВ рдФрд░ рдпрд╣рд╛рдВ рд╕реНрдЯреИрдХрд┐рдВрдЧ рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдЕрдзрд┐рдХ рдкрдврд╝ рд╕рдХрддреЗ рд╣реИрдВред

рд╡рд╛рд╕реНрддрд╡рд┐рдХ рдЙрддреНрдкрд╛рджрди рдореЗрдВ, рдЕрдЬреАрдм рддрд░рд╣ рд╕реЗ рдкрд░реНрдпрд╛рдкреНрдд рд╣реИ, рдпрд╣ рджреГрд╖реНрдЯрд┐рдХреЛрдг рднреА рд╣реЛрддрд╛ рд╣реИред рдЙрджрд╛рд╣рд░рдг рдХреЗ рд▓рд┐рдП, рдЬрдм рдорд▓реНрдЯреАрдореЙрдбрд▓ рдбреЗрдЯрд╛ (рдЪрд┐рддреНрд░, рдкрд╛рда, рд╢реНрд░реЗрдгрд┐рдпрд╛рдВ, рдЖрджрд┐) рд╣реЛрддрд╛ рд╣реИ рдФрд░ рдЖрдк рдореЙрдбрд▓ рдХреА рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпреЛрдВ рдХреЛ рд╕рдВрдпреЛрдЬрд┐рдд рдХрд░рдирд╛ рдЪрд╛рд╣рддреЗ рд╣реИрдВред рдЖрдк рдмрд╕ рд╕рдВрднрд╛рд╡рдирд╛рдУрдВ рдХреЛ рдФрд╕рдд рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ, рд▓реЗрдХрд┐рди рджреВрд╕рд░реЗ рд╕реНрддрд░ рдХреЗ рдореЙрдбрд▓ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рдирд╛ рд╕рдмрд╕реЗ рдЕрдЪреНрдЫрд╛ рдкрд░рд┐рдгрд╛рдо рджреЗрддрд╛ рд╣реИред

рдмреИрд╕ рдСрдкреНрдЯрд┐рдорд╛рдЗрдЬрд╝реЗрд╢рди F2

рдЗрд╕рдХреЗ рдЕрд▓рд╛рд╡рд╛, рдЕрдВрддрд┐рдо рднрд╡рд┐рд╖реНрдпрд╡рд╛рдгрд┐рдпреЛрдВ рдиреЗ рдмрд╛рдпреЗрд╕рд┐рдпрди рдЕрдиреБрдХреВрд▓рди рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ рдереЛрдбрд╝рд╛ рд╕рд╛ рдЯреНрдпреВрди рдХрд┐рдпрд╛ред рдорд╛рди рд▓реЗрдВ рдХрд┐ рд╣рдорд╛рд░реЗ рдкрд╛рд╕ рдЖрджрд░реНрд╢ рд╕рдВрднрд╛рд╡рдирд╛рдПрдВ рд╣реИрдВ, рддреЛ F2 рд╕рдмрд╕реЗ рдЕрдЪреНрдЫреА рдЙрдореНрдореАрдж рдХреА рдЪрдЯрд╛рдИ (рдпрд╛рдиреА рдЗрд╖реНрдЯрддрдо рдкреНрд░рдХрд╛рд░ рдХрд╛) рдХреЗ рд╕рд╛рде рдирд┐рдореНрдирд▓рд┐рдЦрд┐рдд рд╕реВрддреНрд░ рджреНрд╡рд╛рд░рд╛ рдкреНрд░рд╛рдкреНрдд рдХреА рдЬрд╛рддреА рд╣реИ:



рдЗрд╕рдХрд╛ рдХреНрдпрд╛ рдорддрд▓рдм рд╣реИ? рд╣рдореЗрдВ рд╕рднреА рд╕рдВрдпреЛрдЬрдиреЛрдВ рдХреЗ рдорд╛рдзреНрдпрдо рд╕реЗ рдХреНрд░рдордмрджреНрдз рдХрд░рдиреЗ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛ рд╣реИ (рдпрд╛рдиреА, рдкреНрд░рддреНрдпреЗрдХ рд▓реЗрдмрд▓ 0 рдФрд░ 1 рдХреЗ рд▓рд┐рдП), рдкреНрд░рддреНрдпреЗрдХ рд╕рдВрдпреЛрдЬрди рдХреА рд╕рдВрднрд╛рд╡рдирд╛ рдХреА рдЧрдгрдирд╛ рдХрд░реЗрдВ, рдФрд░ F2 рджреНрд╡рд╛рд░рд╛ рдЧреБрдгрд╛ рдХрд░реЗрдВ - рд╣рдореЗрдВ рдЕрдкреЗрдХреНрд╖рд┐рдд F2 рдорд┐рд▓рддрд╛ рд╣реИред рдЬрд┐рд╕рдХреЗ рд▓рд┐рдП рд╕рдВрдпреЛрдЬрди рдмреЗрд╣рддрд░ рд╣реИ, рдФрд░ рдЗрд╖реНрдЯрддрдо F2 рджреЗрдЧрд╛ред рд╕рдВрднрд╛рд╡рдирд╛рдУрдВ рдХреЛ рдХреЗрд╡рд▓ рд╡реНрдпрдХреНрддрд┐рдЧрдд рд▓реЗрдмрд▓ рдХреА рд╕рдВрднрд╛рд╡рдирд╛рдУрдВ рдХрд╛ рдЧреБрдгрди рдорд╛рдирд╛ рдЬрд╛рддрд╛ рдерд╛ (рдпрджрд┐ рд▓реЗрдмрд▓ 0 рд╣реИ, рддреЛ рд╣рдо 1 - p рд▓реЗрддреЗ рд╣реИрдВ), рдФрд░ рдХреНрд░рдо рдореЗрдВ 2 рдХреЛ 17 рд╡рд┐рдХрд▓реНрдкреЛрдВ рдореЗрдВ рдирд╣реАрдВ рдЫрд╛рдВрдЯрдиреЗ рдХреЗ рд▓рд┐рдП, рдХреЗрд╡рд▓ 0.05 рд╕реЗ 0.5 рдХреА рд╕рдВрднрд╛рд╡рдирд╛ рд╡рд╛рд▓реЗ рд▓реЗрдмрд▓ рдХреЛ рдХрдВрдкрд┐рдд рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛ - рдПрдХ рдкрдВрдХреНрддрд┐ рдореЗрдВ рдЙрдирдореЗрдВ рд╕реЗ 3-7 рдереЗ, рдЗрд╕рд▓рд┐рдП рд╡рд┐рдХрд▓реНрдк рдПрдХ рдмрд┐рдЯ (рдорд┐рдирдЯ рдХреЗ рдПрдХ рдЬреЛрдбрд╝реЗ рдореЗрдВ рдкреНрд░рд╕реНрддреБрдд рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛)ред рд╕рд┐рджреНрдзрд╛рдВрдд рд░реВрдк рдореЗрдВ, рдпрд╣ рд▓реЗрдмрд▓ рдХреА рд╕рдВрдпреЛрдЬрди рдХреА рд╕рдВрднрд╛рд╡рдирд╛ рдХреЛ рдкреНрд░рд╛рдкреНрдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдЕрдЪреНрдЫрд╛ рд╣реЛрдЧрд╛, рди рдХреЗрд╡рд▓ рд╡реНрдпрдХреНрддрд┐рдЧрдд рд╕рдВрднрд╛рд╡рдирд╛рдУрдВ рдХреЛ рдЧреБрдгрд╛ рдХрд░рдирд╛ (рдХреНрдпреЛрдВрдХрд┐ рд▓реЗрдмрд▓ рд╕реНрд╡рддрдВрддреНрд░ рдирд╣реАрдВ рд╣реИрдВ), рд▓реЗрдХрд┐рди рдпрд╣ рдХрд╛рдо рдирд╣реАрдВ рдХрд┐рдпрд╛ред

рдЗрд╕рдиреЗ рдХреНрдпрд╛ рджрд┐рдпрд╛? рдЬрдм рдореЙрдбрд▓ рдЕрдЪреНрдЫреЗ рд╣реЛ рдЬрд╛рддреЗ рд╣реИрдВ, рддреЛ рдкрд╣рдирд╛рд╡реЗ рдХреЗ рдмрд╛рдж рдереНрд░реЗрд╕рд╣реЛрд▓реНрдб рдХрд╛ рдЪрдпрди рдХрд╛рдо рдХрд░рдирд╛ рдмрдВрдж рдХрд░ рджреЗрддрд╛ рд╣реИ, рдФрд░ рдЗрд╕ рдЪреАрдЬрд╝ рдиреЗ рд╕рддреНрдпрд╛рдкрди рдФрд░ рд╕рд╛рд░реНрд╡рдЬрдирд┐рдХ / рдирд┐рдЬреА рджреЛрдиреЛрдВ рдореЗрдВ рдПрдХ рдЫреЛрдЯреА рд▓реЗрдХрд┐рди рд╕реНрдерд┐рд░ рд╡реГрджреНрдзрд┐ рджреАред

рдЕрдВрддрднрд╛рд╖рдг

рдирддреАрдЬрддрди, рд╣рдордиреЗ 48 рдЕрд▓рдЧ-рдЕрд▓рдЧ рдореЙрдбрд▓реЛрдВ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд┐рдпрд╛, рдкреНрд░рддреНрдпреЗрдХ рдореЗрдВ 10 рдЧреБрдирд╛, рдЕрд░реНрдерд╛рддреНред рдкрд╣рд▓реЗ рд╕реНрддрд░ рдХреЗ 480 рдореЙрдбрд▓ред рдЗрд╕ рддрд░рд╣ рдХреЗ рдПрдХ рдорд╛рдирд╡ рдЧреНрд░рд┐рдбрдЪрд░реНрдЪ рдиреЗ рдореБрдЭреЗ рдЧрд╣рд░реА рд╕рдЬрд╛рддреАрдп рддрдВрддреНрд░рд┐рдХрд╛ рдиреЗрдЯрд╡рд░реНрдХ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рддреЗ рд╕рдордп рд╡рд┐рднрд┐рдиреНрди рддрдХрдиреАрдХреЛрдВ рдХреА рдХреЛрд╢рд┐рд╢ рдХрд░рдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рджреА, рдЬрд┐рд╕рдХрд╛ рдЙрдкрдпреЛрдЧ рдореИрдВ рдЕрднреА рднреА рдХрд╛рдо рдФрд░ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдУрдВ рдореЗрдВ рдХрд░рддрд╛ рд╣реВрдВред

рдХреНрдпрд╛ рдХрдо рдореЙрдбрд▓ рдХреЛ рдкреНрд░рд╢рд┐рдХреНрд╖рд┐рдд рдХрд░рдирд╛ рдФрд░ рд╕рдорд╛рди рдпрд╛ рдмреЗрд╣рддрд░ рдкрд░рд┐рдгрд╛рдо рдкреНрд░рд╛рдкреНрдд рдХрд░рдирд╛ рд╕рдВрднрд╡ рдерд╛? рд╣рд╛рдВ, рдХрд╛рдлреАред рддреАрд╕рд░реЗ рд╕реНрдерд╛рди рд╕реЗ рд╣рдорд╛рд░реЗ рд╣рдорд╡рддрди, рд╕реНрдЯреИрдирд┐рд╕реНрд▓рд╛рд╡ stasg7 Semenov рдФрд░ рд░реЛрдорди ZFTurbo Soloviev, рдкреНрд░рдердо рд╕реНрддрд░ рдХреЗ рдореЙрдбрд▓ рдХреА рдПрдХ рдЫреЛрдЯреА рд╕рдВрдЦреНрдпрд╛ рдХреА рд▓рд╛рдЧрдд рдФрд░ 250+ рджреВрд╕рд░реЗ рд╕реНрддрд░ рдХреЗ рдореЙрдбрд▓ рдХреЛ рдСрдлрд╕реЗрдЯ рдХрд░рддреЗ рд╣реИрдВред рд╕рдорд╛рдзрд╛рди рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ, рдЖрдк рд╡рд┐рд╢реНрд▓реЗрд╖рдг рджреЗрдЦ рд╕рдХрддреЗ рд╣реИрдВ рдФрд░ рдкреЛрд╕реНрдЯ рдкрдврд╝ рд╕рдХрддреЗ рд╣реИрдВ ред

рдкрд╣рд▓рд╛ рд╕реНрдерд╛рди рд░рд╣рд╕реНрдпрдордп рд╕рд░реНрд╡рд╢реНрд░реЗрд╖реНрдардлрд┐рдЯрд┐рдВрдЧ рдореЗрдВ рдЪрд▓рд╛ рдЧрдпрд╛ред рд╕рд╛рдорд╛рдиреНрдп рддреМрд░ рдкрд░, рдпрд╣ рд▓рдбрд╝рдХрд╛ рдмрд╣реБрдд рдЕрдЪреНрдЫрд╛ рд╣реЛрддрд╛ рд╣реИ, рдФрд░ рдЕрдм рд╡рд╣ рд╢реАрд░реНрд╖ 1 рдХреЗрдЧрд▓ рд░реЗрдЯрд┐рдВрдЧ рдмрди рдЧрдпрд╛ рд╣реИ, рдЬрд┐рд╕рдореЗрдВ рдмрд╣реБрдд рд╕рд╛рд░реА рдЪрд┐рддреНрд░ рдкреНрд░рддрд┐рдпреЛрдЧрд┐рддрд╛рдПрдВ рд╣реИрдВред рд╡рд╣ рд▓рдВрдмреЗ рд╕рдордп рддрдХ рдЧреБрдордирд╛рдо рд░рд╣реЗ, рдЬрдм рддрдХ рдХрд┐ рдПрдирд╡реАрдбрд┐рдпрд╛ рдиреЗ рдЙрдирдХрд╛ рд╕рд╛рдХреНрд╖рд╛рддреНрдХрд╛рд░ рдХрд░рдХреЗ рдХрд╡рд░ рдирд╣реАрдВ рддреЛрдбрд╝ рджрд┐рдпрд╛ред рдЬрд┐рд╕рдореЗрдВ рдЙрдиреНрд╣реЛрдВрдиреЗ рд╕реНрд╡реАрдХрд╛рд░ рдХрд┐рдпрд╛ рдХрд┐ 200 рдЕрдзреАрдирд╕реНрде рдЙрдиреНрд╣реЗрдВ рд░рд┐рдкреЛрд░реНрдЯ рдХрд░реЗрдВрдЧреЗ ... рдирд┐рд░реНрдгрдп рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рдПрдХ рдкреЛрд╕реНрдЯ рднреА рд╣реИред

рджрд┐рд▓рдЪрд╕реНрдк рдореЗрдВ рд╕реЗ рдПрдХ: рд╡реНрдпрд╛рдкрдХ рд░реВрдк рд╕реЗ рд╕рдВрдХреАрд░реНрдг рд╣рд▓рдХреЛрдВ рдЬреЗрд░реЗрдореА рд╣рд╛рд╡рд░реНрдб рдореЗрдВ рдЬрд╛рдирд╛ рдЬрд╛рддрд╛ рд╣реИ, рдкрд┐рддрд╛ рдлрд╛рд╕реНрдЯреИ 22 рдореА рд╕рдорд╛рдкреНрдд рд╣реЛ рдЧрдпрд╛ред рдФрд░ рдЕрдЧрд░ рдЖрдкрдХреЛ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ рдЙрд╕рдиреЗ рд╕рд┐рд░реНрдл рдЕрдкрдиреЗ рдкреНрд░рд╢рдВрд╕рдХ рдХреЗ рд▓рд┐рдП рдХреБрдЫ рдкреНрд░рд╕реНрддреБрддрд┐рдпрд╛рдБ рднреЗрдЬреА рд╣реИрдВ, рддреЛ рдЖрдкрдХреЛ рдЕрдиреБрдорд╛рди рдирд╣реАрдВ рдерд╛ред рдЙрдиреНрд╣реЛрдВрдиреЗ рдЯреАрдо рдореЗрдВ рднрд╛рдЧ рд▓рд┐рдпрд╛ рдФрд░ 111 рдкрд╛рд░реНрд╕рд▓ рднреЗрдЬреЗред

рдЗрд╕рдХреЗ рдЕрд▓рд╛рд╡рд╛, рд╕реНрдЯреИрдирдлреЛрд░реНрдб рдХреЗ рд╕реНрдирд╛рддрдХ рдЫрд╛рддреНрд░ рдЬреЛ рдЙрд╕ рд╕рдордп рдореЗрдВ рдкреМрд░рд╛рдгрд┐рдХ CS231n рдкрд╛рдареНрдпрдХреНрд░рдо рд▓реЗ рд░рд╣реЗ рдереЗ, рдФрд░ рдЬрд┐рдиреНрд╣реЗрдВ рдЗрд╕ рдХрд╛рд░реНрдп рдХреЛ рдкрд╛рдареНрдпрдХреНрд░рдо рдкрд░рд┐рдпреЛрдЬрдирд╛ рдХреЗ рд░реВрдк рдореЗрдВ рдЙрдкрдпреЛрдЧ рдХрд░рдиреЗ рдХреА рдЕрдиреБрдорддрд┐ рдереА, рдиреЗ рд▓реАрдбрд░рдмреЛрд░реНрдб рдХреЗ рдмреАрдЪ рдореЗрдВ рдкреВрд░реА рдЯреАрдо рдХреЛ рд╕рдорд╛рдкреНрдд рдХрд░ рджрд┐рдпрд╛ред

рдПрдХ рдмреЛрдирд╕ рдХреЗ рд░реВрдк рдореЗрдВ, рдореИрдВрдиреЗ рдЗрд╕ рдкреЛрд╕реНрдЯ рдХреА рд╕рд╛рдордЧреНрд░реА рдХреЗ рд╕рд╛рде Mail.ru рдкрд░ рдмрд╛рдд рдХреА рдФрд░ рдпрд╣рд╛рдВ рд╡реНрд▓рд╛рджрд┐рдореАрд░ рдЗрдЧреНрд▓реЛрд╡рд┐рдХреЛрд╡ рдХреА рдШрд╛рдЯреА рдореЗрдВ рдПрдХ рдмреИрдардХ рд╕реЗ рдПрдХ рдФрд░ рдкреНрд░рд╕реНрддреБрддрд┐ рд╣реИ ред

Source: https://habr.com/ru/post/hi413667/


All Articles