<p>kubeadm рдкреБрд▓-рдПрдирдПрдл-рдХреЙрд▓ рдФрд░ ip_forward рдХреЗ рдмрд╛рд░реЗ рдореЗрдВ рд╢рд┐рдХрд╛рдпрдд рдХрд░рддрд╛ рд╣реИ рдпрджрд┐ рдбреЙрдХ рд░рдирдЯрд╛рдЗрдо рдХрд╛ рдЙрдкрдпреЛрдЧ рдирд╣реАрдВ рдХрд░рддрд╛ рд╣реИ</p>

рдХреЛ рдирд┐рд░реНрдорд┐рдд 16 рдЕрдЧре░ 2018  ┬╖  10рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ  ┬╖  рд╕реНрд░реЛрдд: kubernetes/kubeadm

рдХреНрдпрд╛ рдпрд╣ рдмрдЧ рд░рд┐рдкреЛрд░реНрдЯ рдпрд╛ рдкреНрд░рддрд┐рдХреНрд░рд┐рдпрд╛ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛ рд╣реИ? :

/ рддрд░рд╣ рдмрдЧ

рдХреНрдпрд╛ рд╣реБрдЖ :

рдПрдХ рд╕рд╛рдл рд╕рд┐рд╕реНрдЯрдо рдХреЛ рдмреВрдЯ рдХрд░рдиреЗ рдХреЗ рдмрд╛рдж, рдбреЙрдХ рдХреЙрдиреНрдлрд╝рд┐рдЧрд░ рдХрд┐рдП рдЧрдП рдХреЗ рдЕрд▓рд╛рд╡рд╛ рдЕрдиреНрдп CRI рд░рдирдЯрд╛рдЗрдо рдХреЗ рд╕рд╛рде kubeadm init рдЪрд▓рдирд╛ рдирд┐рдореНрди рддреНрд░реБрдЯрд┐ рд╕рдВрджреЗрд╢реЛрдВ рдХреА рдЬреЛрдбрд╝реА рдЙрддреНрдкрдиреНрди рдХрд░рддрд╛ рд╣реИ:

[ERROR FileContent--proc-sys-net-bridge-bridge-nf-call-iptables]: /proc/sys/net/bridge/bridge-nf-call-iptables does not exist [ERROR FileContent--proc-sys-net-ipv4-ip_forward]: /proc/sys/net/ipv4/ip_forward contents are not set to 1

рдХреНрдпрд╛ рд╣реЛрдиреЗ рдХреА рдЙрдореНрдореАрдж рд╣реИ :

рд╡реЗ рджреЛ рдкреНрд░реА-рдлрд╝реНрд▓рд╛рдЗрдЯ рдЪреЗрдХ рдкрд╛рд╕ рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдХреНрдпреЛрдВрдХрд┐ рд╡реЗ рдЕрдкрдиреЗ рдЖрдк рд╕рдВрддреБрд╖реНрдЯ рд╣реЛ рд╕рдХрддреЗ рд╣реИрдВред

рдЬрд╛рд╣рд┐рд░ рд╣реИ, рдпреЗ рд╕рд╛рдорд╛рдиреНрдп рд░реВрдк рд╕реЗ docker рдбреЗрдореЙрди рдХреА рд╢реБрд░реБрдЖрдд рдХреЗ рджреНрд╡рд╛рд░рд╛ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рд░реВрдк рд╕реЗ рдирд┐рдпрдВрддреНрд░рд┐рдд рдХрд┐рдП рдЬрд╛рддреЗ рд╣реИрдВ, рд▓реЗрдХрд┐рди рдЦреБрд▓реЗ рддреМрд░ рдкрд░ рдХреБрдмрд┐рдХ рдХреЗ рд▓рд┐рдП рд╣рдо рдбрд┐рдлрд╝реЙрд▓реНрдЯ рд░реВрдк рд╕реЗ CRI-O рдХрд╛ рдЙрдкрдпреЛрдЧ рдХрд░рдХреЗ рдЬрд╛рдВрдЪ рдХрд░ рд░рд╣реЗ рд╣реИрдВ, рдЬрд╣рд╛рдВ рд╣рдорд╛рд░реЗ рдкрд╛рд╕ рдРрд╕реА рдЪреАрдЬреЛрдВ рд╕реЗ рдзреНрдпрд╛рди рд╣рдЯрд╛рдиреЗ рдХреЗ рд▓рд┐рдП рдПрдХ рдЕрддрд┐ рдЙрддреНрд╕рд╛рд╣реА рдбреЗрдореЙрди рдХреА рд╡рд┐рд▓рд╛рд╕рд┐рддрд╛ рдирд╣реАрдВ рд╣реИ ред

рдЗрд╕рд▓рд┐рдП рдпрд╣ рдмрдЧ рд░рд┐рдкреЛрд░реНрдЯ рдпрд╛ рддреЛ рдХреБрдмреНрдЬрд╛рдо рдХреЗ рд▓рд┐рдП рдПрдХ рдореМрдХрд╛ рд╣реИ рдХрд┐ рд╡рд╣ рдЦреБрдж рдЪреАрдЬреЛрдВ рдХреЛ рд╕рдВрднрд╛рд▓ рд╕рдХреЗред рдореБрдЭреЗ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ рдРрд╕рд╛ рдорд╛рдорд▓рд╛ рд╣реИ рдХреНрдпреЛрдВрдХрд┐ рдХреНрдпреВрдмреАрдбрдо рдЬрд╛рдирддрд╛ рд╣реИ рдХрд┐ рдЙрд╕реЗ рдХреНрдпрд╛ рдЪрд╛рд╣рд┐рдП, рдХреБрдмреЗрджрдо рдХреЛ рдореБрджреНрджреЛрдВ рдХреА рд╢рд┐рдХрд╛рдпрдд рдХрд░рдиреЗ рдХреЗ рдмрдЬрд╛рдп modprobe br_netfilter рдФрд░ echo '1' > /proc/sys/net/ipv4/ip_forward рд╣реЛрдиреЗ рдЪрд╛рд╣рд┐рдПред

рд╡реИрдХрд▓реНрдкрд┐рдХ рд░реВрдк рд╕реЗ, рдпрджрд┐ рдпрд╣ рд╕реБрдЭрд╛рд╡ рд╕реНрд╡реАрдХрд╛рд░реНрдп рдирд╣реАрдВ рд╣реИ, рддреЛ рдореИрдВ рдПрдХ рд╕реБрдЭрд╛рд╡ рдХреА рд╕рд░рд╛рд╣рдирд╛ рдХрд░реВрдБрдЧрд╛ рдХрд┐ рдХреИрд╕реЗ рдЦреБрд▓реЗ рддреМрд░ рдкрд░ рдХреБрдмрд┐рдХ рдХреЛ рдЗрди рдореБрджреНрджреЛрдВ рдХреЛ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рд░реВрдк рд╕реЗ рд╕рдВрдмреЛрдзрд┐рдд рдХрд░рдирд╛ рдЪрд╛рд╣рд┐рдП, рдЬреЛ рдХреБрдмреЗрджрдо рдХреА рд╕рд╛рдорд╛рдиреНрдп рдЕрдкреЗрдХреНрд╖рд╛рдУрдВ рдХреЗ рд╕рд╛рде рд╕рдВрд░реЗрдЦрд┐рдд рд░рд╣реЗрдВрдЧреЗред

рдЗрд╕реЗ рдХреИрд╕реЗ рдкреБрди: рдкреЗрд╢ рдХрд░реЗрдВ (рдЬрд┐рддрдирд╛ рд╕рдВрднрд╡ рд╣реЛ рдиреНрдпреВрдирддрдо рдФрд░ рдареАрдХ рд╣реИ) :

  • рдХреБрдмреЗрджрдо рдФрд░ рдХреНрд░рд┐-рдУ рд╕реНрдерд╛рдкрд┐рдд рдХрд░реЗрдВ
  • systemctl рд╕рдХреНрд╖рдо рдХрд░реЗрдВ - crio
  • рдЕрддрд┐рд░рд┐рдХреНрдд args --container-runtime=remote --container-runtime-endpoint=unix:///var/run/crio/crio.sock --runtime-request-timeout=15m рд╕рд╛рде k рдЪрд▓рд╛рдиреЗ рдХреЗ рд▓рд┐рдП kubeadm рдХреЙрдиреНрдлрд╝рд┐рдЧрд░ рдХрд░реЗрдВ
  • kubeadm init --cri-socket /var/run/crio/crio.sock рдЪрд▓рд╛рдПрдБ

рд╣рдореЗрдВ рдХреБрдЫ рдФрд░ рдЬрд╛рдирдирд╛ рдЪрд╛рд╣рд┐рдП? :

рдкрд░реНрдпрд╛рд╡рд░рдг :

  • рдХреБрдмреЗрд░рдиреЗрдЯреНрд╕ рд╕рдВрд╕реНрдХрд░рдг ( kubectl version ): v1.11.2
  • рдХреНрд▓рд╛рдЙрдб рдкреНрд░рджрд╛рддрд╛ рдпрд╛ рд╣рд╛рд░реНрдбрд╡реЗрдпрд░ рдХреЙрдиреНрдлрд╝рд┐рдЧрд░реЗрд╢рди: qemu-kvm x86_64 16GB RAM 2 рдХреЛрд░
  • OS (рдЙрджрд╛ред / Etc / os-release): рдЦреБрд▓рдиреЗ рдХрд╛ рд╕рдордп
  • рдХрд░реНрдиреЗрд▓ (рдЬреИрд╕реЗ uname -a ): 4.17.13
  • рдЙрдкрдХрд░рдг рд╕реНрдерд╛рдкрд┐рдд рдХрд░реЗрдВ: kubeadm

рд╕рдмрд╕реЗ рдЙрдкрдпреЛрдЧреА рдЯрд┐рдкреНрдкрдгреА

рдбреЙрдХрдЯрд░ рдХреА рдмрд╣рд╛рд▓реА рдиреЗ рдЪрд╛рд▓ рдЪрд▓реА ... рдзрдиреНрдпрд╡рд╛рдж

рд╕рднреА 10 рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ

рдПрдХ рдЙрддреНрдкрд╛рдж рдмрдЧ рдХреА рддрд░рд╣ рдорд╣рд╕реВрд╕ рдирд╣реАрдВ рдХрд░рддрд╛ рд╣реИ, рд▓реЗрдХрд┐рди рдкреНрд░рд▓реЗрдЦрди рдмрдЧ (рдмрд╕ рдПрдХ рд▓рд╛рдкрддрд╛ рдореИрдиреБрдЕрд▓)ред рд╡рд░реНрддрдорд╛рди рдореЗрдВ рд╣рдорд╛рд░реЗ рдкрд╛рд╕ рдХреЗрд╡рд▓ рдкреГрд╖реНрда рд╣реИрдВ рдХрд┐ рдХреБрдмреЗрд░рдореЗрдЯ рдХреЛ рдХреБрдмреЗрджрдо рдХреЗ рд╕рд╛рде рдХрдВрдЯреЗрдирд░ рд░рдирдЯрд╛рдЗрдо рдХреЗ рд░реВрдк рдореЗрдВ рдХреИрд╕реЗ рд╕реНрдерд╛рдкрд┐рдд рдХрд┐рдпрд╛ рдЬрд╛рдП, рд╣рдорд╛рд░реЗ рдкрд╛рд╕ cri-o рдХреЗ рд▓рд┐рдП рдПрдХ рдФрд░ рдПрдХ рд╣реЛрдирд╛ рдЪрд╛рд╣рд┐рдПред

IMO kubeadm рдХреЛ рдХрдо рд╕реЗ рдХрдо modprobe рд╣реА рдХрд░рдирд╛ рдЪрд╛рд╣рд┐рдПред рдХреНрдпрд╛ рдпрд╣ ip_forward рдХреЗ рд▓рд┐рдП рдорд╛рдорд▓рд╛ рд╣реИ рдФрд░ рд╕рд╛рде рд╣реА рдпрд╣ рд╕рд┐рд╕реНрдЯрдо рдХреЙрдиреНрдлрд╝рд┐рдЧрд░реЗрд╢рди рдФрд░ рд╡реНрдпрд╡рд╕реНрдерд╛рдкрдХ рддрдХ рдмрд╣рд╕ рдпреЛрдЧреНрдп рд╣реИред

@vrothberg - рдЖрдкрдХреЛ рдХреНрдпрд╛ рд▓рдЧрддрд╛ рд╣реИ? рдЙрдкрд░реЛрдХреНрдд 2 рд╢рд░реНрддреЛрдВ (modprobe рдФрд░ sysctl) рдХреЛ kubeadm рджреНрд╡рд╛рд░рд╛ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рд░реВрдк рд╕реЗ рдареАрдХ рдХрд┐рдпрд╛ рдЬрд╛рдирд╛ рдЪрд╛рд╣рд┐рдП, рдпрд╛ рдХреНрдпрд╛ рдЖрдкрдХреЛ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ рдпрд╣ CRI-O рдореЗрдВ рдХреБрдЫ рдмреЗрд╣рддрд░ рд╣реИ?

рдбреЙрдХрд░ рдСрдЯреЛрдореИрдЯрд┐рдХ рд░реВрдк рд╕реЗ рджреЛрдиреЛрдВ рдХрд░рддрд╛ рд╣реИ

рдФрд░ рдЕрдЧрд░ рдЖрдкрдХреЛ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ CRI-O рдЙрдЪрд┐рдд рджреЗрдЦрднрд╛рд▓ рдирд╣реАрдВ рдХрд░рдиреА рдЪрд╛рд╣рд┐рдП, рддреЛ рдЖрдкрдХреЛ рдХрд╣рд╛рдВ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ рдЧрдВрджреЗ рд╣реИрдХ рдХреЛ рдЦреБрд▓реЗ рдореЗрдВ рдХрд┐рдпрд╛ рдЬрд╛рдирд╛ рдЪрд╛рд╣рд┐рдП? cri-o рдкреИрдХреЗрдЬ рдореЗрдВ рдпрд╛ kubeadm рдкреИрдХреЗрдЬ рдореЗрдВ? ;)

рдореБрдЭреЗ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ рдХреБрдЫ kubeadm рдкреИрдХреЗрдЬ рдХрд░рдирд╛ рдЪрд╛рд╣рд┐рдПред рдЙрд╕рдХреЗ рдмрд╛рдж, рд╣рдо рдХрд░ рд╕рдХрддреЗ рд╣реИрдВ
рдЬрд╛рдВрдЪреЗрдВ рдХрд┐ рдХреНрдпрд╛ рдпрд╣ рд╡рд╛рд╕реНрддрд╡ рдореЗрдВ рдПрдХ рддреНрд░реБрдЯрд┐ рд╣реИ рдпрд╛ рдпрджрд┐ рдЗрд╕реЗ рдХрд┐рд╕реА рд╕реВрдЪрдирд╛ рд▓реЙрдЧ рдореЗрдВ рдбрд┐рдореЛрдЯ рдХрд┐рдпрд╛ рдЬрд╛ рд╕рдХрддрд╛ рд╣реИред
K8s рдореЗрдВ рдХрдИ рдЪреАрдЬреЗрдВ рдЕрднреА рднреА рдмрдирд╛рдИ рдЧрдИ рд╣реИрдВ рдХрд┐ рдбреЙрдХрдЯрд░ рдЪреАрдЬреЛрдВ рдХреЛ рдХреИрд╕реЗ рдХрд░рддрд╛ рд╣реИ рд▓реЗрдХрд┐рди
рд╡реЗ рд╣рдореЗрд╢рд╛ рдЖрд╡рд╢реНрдпрдХ рдирд╣реАрдВ рд╣реИрдВред

рдореИрдВ рдЗрд╕ рд╕рдордп рдЫреБрдЯреНрдЯреА рдкрд░ рд╣реВрдВ рд▓реЗрдХрд┐рди рдпрд╣рд╛рдВ рдФрд░ рдлрд┐рд░ рдореЗрд▓ рдХреА рдЬрд╛рдВрдЪ рдХрд░реВрдВрдЧрд╛ред рдзрдиреНрдпрд╡рд╛рдж
рдкрд┐рдВрдЧ рдХреЗ рд▓рд┐рдПред

рдмреБрдз 12. рд╕рд┐рддрдВрдмрд░ 2018 рдХреЛ 10:30 рдмрдЬреЗ, рд░рд┐рдЪрд░реНрдб рдмреНрд░рд╛рдЙрди рд╕реВрдЪрдирд╛рдПрдВ @github.com
рд▓рд┐рдЦрд╛ рдерд╛:

@vrothberg https://github.com/vrothberg - рдЖрдкрдХреЛ рдХреНрдпрд╛ рд▓рдЧрддрд╛ рд╣реИ? рдЪрд╛рд╣рд┐рдП
2 рд╢рд░реНрддреЛрдВ (modprobe рдФрд░ sysctl) рд╕реЗ рд╕реНрд╡рдЪрд╛рд▓рд┐рдд рд░реВрдк рд╕реЗ рдареАрдХ рдХрд┐рдпрд╛ рдЬрд╛рдПрдЧрд╛
kubeadm, рдпрд╛ рдЖрдкрдХреЛ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ рдпрд╣ рдХреБрдЫ рдмреЗрд╣рддрд░ рд╣реИ CRI-O рдореЗрдВ рд╕рдВрднрд╛рд▓рд╛?

рдбреЙрдХрд░ рдСрдЯреЛрдореИрдЯрд┐рдХ рд░реВрдк рд╕реЗ рджреЛрдиреЛрдВ рдХрд░рддрд╛ рд╣реИ

рдФрд░ рдЕрдЧрд░ рдЖрдкрдХреЛ рд▓рдЧрддрд╛ рд╣реИ рдХрд┐ CRI-O рдЙрдЪрд┐рдд рджреЗрдЦрднрд╛рд▓ рдирд╣реАрдВ рдХрд░рдиреА рдЪрд╛рд╣рд┐рдП, рддреЛ рдЖрдкрдХреЛ рдХрд╣рд╛рдВ рд▓рдЧрддрд╛ рд╣реИ
рдЧрдВрджрд╛ рд╣реИрдХ рдЦреБрд▓реЗ рдореЗрдВ рдХрд┐рдпрд╛ рдЬрд╛рдирд╛ рдЪрд╛рд╣рд┐рдП? рдХреНрд░рд┐-рдУ рдкреИрдХреЗрдЬ рдореЗрдВ рдпрд╛ рдореЗрдВ
рдХреБрдмреЗрджрдо рдкреИрдХреЗрдЬ? ;)

-
рдЖрдк рдЗрд╕рдХрд╛ рдЙрд▓реНрд▓реЗрдЦ рдХрд░ рд░рд╣реЗ рд╣реИрдВ рдХреНрдпреЛрдВрдХрд┐ рдЖрдкрдХрд╛ рдЙрд▓реНрд▓реЗрдЦ рдХрд┐рдпрд╛ рдЧрдпрд╛ рдерд╛ред
рдЗрд╕ рдИрдореЗрд▓ рдХрд╛ рдЙрддреНрддрд░ рд╕реАрдзреЗ рджреЗрдВ, рдЗрд╕реЗ GitHub рдкрд░ рджреЗрдЦреЗрдВ
https://github.com/kubernetes/kubeadm/issues/1062#issuecomment-420559942 ,
рдпрд╛ рдзрд╛рдЧрд╛ рдореНрдпреВрдЯ рдХрд░реЗрдВ
https://github.com/notifications/unsubscribe-auth/ALI4g1dRKf5vWXz_7H27VktuD8nP5tAsks5uaMYogaJpZM4V4W-W70
ред

рдЗрд╕ рдореБрджреНрджреЗ рдХреЛ рдирд┐рдореНрдирд▓рд┐рдЦрд┐рдд рдкрд░рд┐рд╡рд░реНрддрдиреЛрдВ рдХреЗ рд╕рд╛рде рдЦреБрд▓реЗ рддреМрд░ рдкрд░ рдирд┐рдпрдВрддреНрд░рд┐рдд рдХрд┐рдпрд╛ рдЬрд╛рдПрдЧрд╛: https://build.opensuse.org/package/rdiff/devel : kubic / kubernetes? Linkrev = base & rev = 9

рдореИрдВ рддреБрд░рдВрдд рдЖрд░рдкреАрдПрдо рдкреИрдХреЗрдЬрд┐рдВрдЧ рдореЗрдВ рд╕рдорд╛рди рд░реВрдк рд╕реЗ рдХреБрдЫ рдкреНрд░рд╕реНрддреБрдд рдХрд░рдиреЗ рдХреА рдпреЛрдЬрдирд╛ рдмрдирд╛ рд░рд╣рд╛ рд╣реВрдВ

рдбреЙрдХрдЯрд░ рдХреА рдмрд╣рд╛рд▓реА рдиреЗ рдЪрд╛рд▓ рдЪрд▓реА ... рдзрдиреНрдпрд╡рд╛рдж

рдореИрдВ рд╕реЗрдЯрдЕрдк рдкреГрд╖реНрда рдкрд░ рдпрд╣ рдЬрд╛рдирдХрд╛рд░реА рдЬреЛрдбрд╝ рд░рд╣рд╛ рд╣реВрдВред рдореИрдВ рдЗрд╕ рддреНрд░реБрдЯрд┐ рдХреЛ рджреЗрдЦ рд░рд╣рд╛ рдерд╛ рдФрд░ рдЗрд╕рдиреЗ рдореБрдЭреЗ рдЗрд╕ рдзрд╛рдЧреЗ рдХреЗ рд╕рд╛рдордиреЗ рдЖрдиреЗ рддрдХ рдХрдо рд╕реЗ рдХрдо 20 рдорд┐рдирдЯ рддрдХ рджрд░реНрдж рд╣реЛрдиреЗ рджрд┐рдпрд╛ред рд╕рдорд╛рдзрд╛рди рд╕рд╛рдЭрд╛ рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдзрдиреНрдпрд╡рд╛рджред

рд╕реБрдирд┐рд╢реНрдЪрд┐рдд рдХрд░реЗрдВ рдХрд┐ рдЖрдк рдкреНрд░рдХреНрд░рд┐рдпрд╛ рдХрд╛ рдкрд╛рд▓рди рдХрд░рддреЗ рд╣реИрдВ рддреЛ рддреНрд░реБрдЯрд┐ рдирд╣реАрдВ рдЖрддреА рд╣реИ
https://kubernetes.io/docs/setup/production-environment/container-runtimes/#o -o

рдмрд╕ modprobe'ng рдЪреАрдЬреЛрдВ рдХреЛ рд╕реБрдирд┐рд╢реНрдЪрд┐рдд рдирд╣реАрдВ рдХрд░рддрд╛ рд╣реИ рдХрд┐ рд╡реЗ рдЪрд▓ рд░рд╣реЗ рд╣реИрдВред рдЕрдЧрд░ рдЖрдк рд░рд┐рдмреВрдЯ рдХрд░рддреЗ рд╣реИрдВ рддреЛ рд╕рдм рдХреБрдЫ рдЯреВрдЯ рдЬрд╛рддрд╛ рд╣реИред рдпрд╣ рдЖрдкрдХреЛ рдпрд╣ рд╕реБрдирд┐рд╢реНрдЪрд┐рдд рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдХрд╣рдирд╛ рдЪрд╛рд╣рд┐рдП рдХрд┐ рдпреЗ рдЪреАрдЬреЗрдВ рд▓рдЧрд╛рддрд╛рд░ рд╕рдХреНрд╖рдо рд╣реИрдВред рдЬреЛ sysctl рдХреЗ рдирд┐рдпрдореЛрдВ рдХреЗ рд▓рд┐рдП рд╣реИ, рд▓реЗрдХрд┐рди рдореЙрдбреНрдпреВрд▓ рдХреЗ рд▓рд┐рдП рдирд╣реАрдВред

рдЗрд╕ рддрд░рд╣ рд╕реЗ рд╕рд╛рдорд╛рди рдкрд░ рдирд┐рд░реНрджреЗрд╢реЛрдВ рдХрд╛ рдкрд╛рд▓рди рдХрд░рддреЗ рд╕рдордп рдореИрдВ рдЪреАрдЬреЛрдВ рдореЗрдВ рдкрдврд╝рдирд╛ рдкрд╕рдВрдж рдирд╣реАрдВ рдХрд░рддрд╛ рдФрд░ рдХреВрдмрдбрд╝ рдХреЗ рдЖрдзрд╛рд░ рдкрд░ рдЕрддрд┐рд░рд┐рдХреНрдд рдХрджрдо рдЙрдард╛рдиреЗ рдХреА рдХреЛрд╢рд┐рд╢ рдХрд░рддрд╛ рд╣реВрдВред рдЕрдЧрд░ рдпрд╣ рдореБрдЭреЗ рдХреБрдЫ рдХрд░рдиреЗ рдХреЗ рд▓рд┐рдП рдХрд╣рддрд╛ рд╣реИ, рддреЛ рдореИрдВ рдХрд░рддрд╛ рд╣реВрдВред рдЕрдЧрд░ рдРрд╕рд╛ рдирд╣реАрдВ рд╣реЛрддрд╛ рддреЛ рдореИрдВ рдирд╣реАрдВ рдХрд░рддрд╛ред рдореИрдВ рдЪреАрдЬреЛрдВ рдХреЗ рдЯреВрдЯрдиреЗ рдФрд░ рд╡рд╛рдкрд╕ рдЬрд╛рдиреЗ рдФрд░ рдЙрдиреНрд╣реЗрдВ рдареАрдХ рдХрд░рдиреЗ рдХрд╛ рдЗрдВрддрдЬрд╛рд░ рдХрд░рддрд╛ рд╣реВрдВред рдЗрд╕ рддрд░рд╣ рдореЗрд░реЗ рдкрд╛рд╕ рдПрдХ рдмреЗрд╣рддрд░ рд╡рд┐рдЪрд╛рд░ рд╣реИ рдпрджрд┐ рдпрд╣ рдЦрд░рд╛рдм рдкреНрд░рд▓реЗрдЦрди рд╣реИ рдЬреЛ рдХрд┐ рдХреБрдЫ рдпрд╛рджреГрдЪреНрдЫрд┐рдХ рдЪреАрдЬрд╝реЛрдВ рдХреЗ рдмрдЬрд╛рдп рд╕рдорд╕реНрдпрд╛ рд╣реИ рдЬрдм рдореИрдВрдиреЗ рдЪреАрдЬреЗрдВ рддреЛрдбрд╝ рджреАрдВред

рдореБрдЭреЗ рд╢рд╛рдпрдж рдЕрдкрдиреА рд╕реНрдерд╛рдиреАрдп рд╣рд╛рдЗрдкрд░-рд╡реА рдиреЛрдб рдЫрд╡рд┐рдпреЛрдВ рдХреЛ рдлрд┐рд░ рд╕реЗ рдмрдирд╛рдиреЗ рдХреА рдЖрд╡рд╢реНрдпрдХрддрд╛ рд╣реИред

рдХреНрдпрд╛ рдпрд╣ рдкреГрд╖реНрда рдЙрдкрдпреЛрдЧреА рдерд╛?
0 / 5 - 0 рд░реЗрдЯрд┐рдВрдЧреНрд╕

рд╕рдВрдмрдВрдзрд┐рдд рдореБрджреНрджреЛрдВ

bruceauyeung picture bruceauyeung  ┬╖  4рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ

jessfraz picture jessfraz  ┬╖  3рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ

ep4eg picture ep4eg  ┬╖  3рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ

mattmoyer picture mattmoyer  ┬╖  4рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ

jbrandes picture jbrandes  ┬╖  4рдЯрд┐рдкреНрдкрдгрд┐рдпрд╛рдБ