<\/span><\/h2>\n\n\n\u062a\u0627\u0628\u0639 \u0645\u0647\u0645 \u062f\u06cc\u06af\u0631\u06cc \u06a9\u0647 \u0628\u0627\u06cc\u062f \u06cc\u0627\u062f \u0628\u06af\u06cc\u0631\u06cc\u0645 \u062a\u0627\u0628\u0639 \u0645\u0642\u062f\u0627\u0631 \u0639\u0645\u0644 q(s,a) \u0627\u0633\u062a (\u0645\u0639\u0627\u062f\u0644\u0647 \u06f1\u06f3)\u060c \u06cc\u0627 \u0628\u0627\u0632\u062f\u0647 \u0645\u0648\u0631\u062f \u0627\u0646\u062a\u0638\u0627\u0631\u06cc \u06a9\u0647 \u0628\u0627 \u0634\u0631\u0648\u0639 \u062f\u0631 \u062d\u0627\u0644\u062a s\u060c \u0627\u0646\u062c\u0627\u0645 \u0639\u0645\u0644 a \u0648 \u0633\u067e\u0633 \u067e\u06cc\u0631\u0648\u06cc \u0627\u0632 \u06cc\u06a9 \u062e\u0637 \u0645\u0634\u06cc \u03c0 \u0628\u062f\u0633\u062a \u0645\u06cc \u0622\u0648\u0631\u06cc\u0645. \u062a\u0648\u062c\u0647 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u06a9\u0647 \u06cc\u06a9 \u062d\u0627\u0644\u062a s, q(s,a) \u0645\u06cc \u062a\u0648\u0627\u0646\u062f \u0686\u0646\u062f\u06cc\u0646 \u0645\u0642\u062f\u0627\u0631 \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u062f \u0632\u06cc\u0631\u0627 \u0686\u0646\u062f\u06cc\u0646 \u0639\u0645\u0644 \u0648\u062c\u0648\u062f \u062f\u0627\u0631\u062f \u06a9\u0647 \u0639\u0627\u0645\u0644 \u0645\u06cc \u062a\u0648\u0627\u0646\u062f \u062f\u0631 \u062d\u0627\u0644\u062a s \u0627\u0646\u062c\u0627\u0645 \u062f\u0647\u062f.<\/p>\n
\u0634\u0628\u06a9\u0647 \u0639\u0635\u0628\u06cc Q(s,a) \u0631\u0627 \u0645\u062d\u0627\u0633\u0628\u0647 \u0645\u06cc \u06a9\u0646\u062f. \u0628\u0627 \u062f\u0631 \u0646\u0638\u0631 \u06af\u0631\u0641\u062a\u0646 \u062d\u0627\u0644\u062a s \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u0648\u0631\u0648\u062f\u06cc\u060c \u0634\u0628\u06a9\u0647 \u06a9\u06cc\u0641\u06cc\u062a \u0647\u0631 \u0627\u0642\u062f\u0627\u0645 \u0645\u0645\u06a9\u0646 \u062f\u0631 \u0627\u06cc\u0646 \u062d\u0627\u0644\u062a \u0631\u0627 \u0628\u0647 \u0635\u0648\u0631\u062a \u0627\u0633\u06a9\u0627\u0644\u0631 \u0645\u062d\u0627\u0633\u0628\u0647 \u0645\u06cc \u06a9\u0646\u062f (\u0634\u06a9\u0644 \u06f7). \u06a9\u06cc\u0641\u06cc\u062a \u0628\u0627\u0644\u0627\u062a\u0631 \u0628\u0647 \u0645\u0639\u0646\u0627\u06cc \u0627\u0642\u062f\u0627\u0645 \u0628\u0647\u062a\u0631 \u0628\u0627 \u062a\u0648\u062c\u0647 \u0628\u0647 \u0647\u062f\u0641 \u062f\u0627\u062f\u0647 \u0634\u062f\u0647 \u0627\u0633\u062a.<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064219.jpg\" "\\"\\"")
\u062a\u0648\u0635\u06cc\u0641 \u062a\u0627\u0628\u0639 action-value<\/figcaption><\/figure><\/div>\n\n\n\u0628\u0647 \u06cc\u0627\u062f \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f: \u062a\u0627\u0628\u0639 Action-value \u0628\u0647 \u0645\u0627 \u0645\u06cc \u06af\u0648\u06cc\u062f \u06a9\u0647 \u0627\u0646\u062c\u0627\u0645 \u06cc\u06a9 \u0639\u0645\u0644 \u062e\u0627\u0635 \u062f\u0631 \u06cc\u06a9 \u062d\u0627\u0644\u062a \u062e\u0627\u0635 \u0686\u0642\u062f\u0631 \u062e\u0648\u0628 \u0627\u0633\u062a.<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/dhndvd-uldr20-1.jpg\" "\\"\\"")
\u0645\u0639\u0627\u062f\u0644\u0647\u200c\u06cc\u06f1\u06f3<\/figcaption><\/figure><\/div>\n\n\n\u0642\u0628\u0644\u0627\u064b\u060c \u062a\u0627\u0628\u0639 state-value v(s) \u0631\u0627 \u0645\u06cc\u200c\u0634\u062f \u0628\u0647 \u0634\u06a9\u0644 \u0632\u06cc\u0631 \u062a\u062c\u0632\u06cc\u0647 \u06a9\u0631\u062f:<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064221.jpg\" "\\"\\"")
\u0645\u0639\u0627\u062f\u0644\u0647 \u06cc \u06f1\u06f4<\/figcaption><\/figure><\/div>\n\n\n\u0627\u06a9\u0646\u0648\u0646 \u0645\u06cc \u062a\u0648\u0627\u0646\u06cc\u0645 \u0647\u0645\u0627\u0646 \u062a\u062c\u0632\u06cc\u0647 \u0631\u0627 \u0628\u0631\u0627\u06cc \u062a\u0627\u0628\u0639 action-value \u0627\u0639\u0645\u0627\u0644 \u06a9\u0646\u06cc\u0645:<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064222.jpg\" "\\"\\"")
\u0645\u0639\u0627\u062f\u0644\u0647\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c<\/figcaption><\/figure><\/div>\n\n\n\n\u0645\u0639\u0627\u062f\u0644\u0647\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u200c\u06cc\u06f1\u06f5<\/figcaption><\/figure><\/div>\n\n\n\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0631\u062d\u0644\u0647\u060c \u0628\u06cc\u0627\u06cc\u06cc\u062f \u062f\u0631 \u0645\u0648\u0631\u062f \u0686\u06af\u0648\u0646\u06af\u06cc \u0627\u0631\u062a\u0628\u0627\u0637 v(s) \u0648 q(s,a) \u0628\u0627 \u06cc\u06a9\u062f\u06cc\u06af\u0631 \u0628\u062d\u062b \u06a9\u0646\u06cc\u0645. \u0628\u0627\u0632 \u0647\u0645 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u0645 \u0631\u0627\u0628\u0637\u0647 \u0628\u06cc\u0646 \u0627\u06cc\u0646 \u062a\u0648\u0627\u0628\u0639 \u0631\u0627 \u0628\u0647 \u0635\u0648\u0631\u062a \u0632\u06cc\u0631 \u062a\u062c\u0633\u0645 \u06a9\u0646\u06cc\u0645:<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064223.jpg\" "\\"\\"")
<\/figure><\/div>\n\n\n\u062f\u0631 \u0627\u06cc\u0646 \u0645\u062b\u0627\u0644\u060c \u0642\u0631\u0627\u0631 \u06af\u0631\u0641\u062a\u0646 \u062f\u0631 \u062d\u0627\u0644\u062a s \u0628\u0647 \u0645\u0627 \u0627\u0645\u06a9\u0627\u0646 \u0645\u06cc \u062f\u0647\u062f \u062f\u0648 \u0639\u0645\u0644 \u0645\u0645\u06a9\u0646 \u0631\u0627 \u0627\u0646\u062c\u0627\u0645 \u062f\u0647\u06cc\u0645.a \u0637\u0628\u0642 \u062a\u0639\u0631\u06cc\u0641\u060c \u0627\u0646\u062c\u0627\u0645 \u06cc\u06a9 \u0639\u0645\u0644 \u062e\u0627\u0635 \u062f\u0631 \u06cc\u06a9 \u062d\u0627\u0644\u062a \u062e\u0627\u0635\u060c \u0645\u0642\u062f\u0627\u0631 \u0639\u0645\u0644 q(s,a) \u0631\u0627 \u0628\u0647 \u0645\u0627 \u0645\u06cc \u062f\u0647\u062f. \u062a\u0627\u0628\u0639 \u0645\u0642\u062f\u0627\u0631 v(s) \u0645\u062c\u0645\u0648\u0639 q(s,a) \u0645\u0645\u06a9\u0646 \u0648\u0632\u0646 \u0634\u062f\u0647 \u0628\u0627 \u0627\u062d\u062a\u0645\u0627\u0644 (\u06a9\u0647 \u0686\u06cc\u0632\u06cc \u062c\u0632 \u062e\u0637 \u0645\u0634 \u03c0 \u0646\u06cc\u0633\u062a) \u0627\u0646\u062c\u0627\u0645 \u06cc\u06a9 \u0639\u0645\u0644 \u062f\u0631 \u062d\u0627\u0644\u062a s \u0627\u0633\u062a (\u0645\u0639\u0627\u062f\u0644\u0647 \u06f1\u06f6).<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064224.jpg\" "\\"\\"")
\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0639\u0645\u06cc\u0642\u06f1\u06f6<\/figcaption><\/figure><\/div>\n\n\n\u062d\u0627\u0644 \u0628\u06cc\u0627\u06cc\u06cc\u062f \u062d\u0627\u0644\u062a \u0645\u062e\u0627\u0644\u0641 \u0631\u0627 \u062f\u0631 \u0634\u06a9\u0644 \u0646\u0647\u0645 \u062f\u0631 \u0632\u06cc\u0631 \u062f\u0631 \u0646\u0638\u0631 \u0628\u06af\u06cc\u0631\u06cc\u0645. \u0631\u06cc\u0634\u0647 \u062f\u0631\u062e\u062a \u062f\u0648\u062f\u0648\u06cc\u06cc \u0627\u06a9\u0646\u0648\u0646 \u062d\u0627\u0644\u062a\u06cc \u0627\u0633\u062a \u06a9\u0647 \u062f\u0631 \u0622\u0646 \u0645\u0627 \u06cc\u06a9 \u0639\u0645\u0644 \u062e\u0627\u0635 \u0631\u0627 \u0627\u0646\u062a\u062e\u0627\u0628 \u0645\u06cc \u06a9\u0646\u06cc\u0645 a. \u0628\u0647 \u06cc\u0627\u062f \u062f\u0627\u0634\u062a\u0647 \u0628\u0627\u0634\u06cc\u062f \u06a9\u0647 \u0641\u0631\u0622\u06cc\u0646\u062f\u0647\u0627\u06cc \u0645\u0627\u0631\u06a9\u0648\u0641 \u062a\u0635\u0627\u062f\u0641\u06cc \u0647\u0633\u062a\u0646\u062f. \u0627\u0646\u062c\u0627\u0645 \u06cc\u06a9 \u0627\u0642\u062f\u0627\u0645 \u0628\u0647 \u0627\u06cc\u0646 \u0645\u0639\u0646\u0627 \u0646\u06cc\u0633\u062a \u06a9\u0647 \u0634\u0645\u0627 \u0628\u0627 \u0627\u0637\u0645\u06cc\u0646\u0627\u0646 \u06f1\u06f0\u06f0 \u062f\u0631\u0635\u062f \u0628\u0647 \u062c\u0627\u06cc\u06cc \u062e\u0648\u0627\u0647\u06cc\u062f \u0631\u0633\u06cc\u062f \u06a9\u0647 \u0645\u06cc \u062e\u0648\u0627\u0647\u06cc\u062f. \u0628\u0647 \u0637\u0648\u0631 \u062f\u0642\u06cc\u0642\u060c \u0634\u0645\u0627 \u0628\u0627\u06cc\u062f \u0627\u062d\u062a\u0645\u0627\u0644\u0627\u062a \u0631\u0627 \u062f\u0631 \u0646\u0638\u0631 \u0628\u06af\u06cc\u0631\u06cc\u062f \u06a9\u0647 \u067e\u0633 \u0627\u0632 \u0627\u0646\u062c\u0627\u0645 \u0627\u0642\u062f\u0627\u0645 \u0628\u0647 \u0633\u0627\u06cc\u0631 \u062d\u0627\u0644\u062a \u0647\u0627 \u062e\u062a\u0645 \u0634\u0648\u062f.<\/p>\n
\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0648\u0631\u062f \u062e\u0627\u0635\u060c \u067e\u0633 \u0627\u0632 \u0627\u0646\u062c\u0627\u0645 \u0627\u0642\u062f\u0627\u0645 a\u060c \u0645\u06cc \u062a\u0648\u0627\u0646\u06cc\u062f \u062f\u0631 \u062f\u0648 \u062d\u0627\u0644\u062a \u0645\u062e\u062a\u0644\u0641 \u0628\u0639\u062f\u06cc \u0642\u0631\u0627\u0631 \u0628\u06af\u06cc\u0631\u06cc\u062f:<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064225.jpg\" "\\"\\"")
<\/figure><\/div>\n\n\n\u0628\u0631\u0627\u06cc \u0628\u0647 \u062f\u0633\u062a \u0622\u0648\u0631\u062f\u0646 \u0645\u0642\u062f\u0627\u0631 \u0639\u0645\u0644\u060c \u0628\u0627\u06cc\u062f \u0627\u0631\u0632\u0634\u200c\u0647\u0627\u06cc \u062d\u0627\u0644\u062a \u062a\u0646\u0632\u06cc\u0644\u200c\u0634\u062f\u0647 \u0631\u0627 \u0628\u0627 \u0627\u062d\u062a\u0645\u0627\u0644\u0627\u062a Pss \u062f\u0631 \u0646\u0638\u0631 \u0628\u06af\u06cc\u0631\u06cc\u062f \u062a\u0627 \u062f\u0631 \u062a\u0645\u0627\u0645 \u062d\u0627\u0644\u062a\u200c\u0647\u0627\u06cc \u0645\u0645\u06a9\u0646 (\u062f\u0631 \u0627\u06cc\u0646 \u0645\u0648\u0631\u062f \u0641\u0642\u0637 \u062f\u0648 \u062d\u0627\u0644\u062a) \u0642\u0631\u0627\u0631 \u06af\u06cc\u0631\u0646\u062f \u0648 \u067e\u0627\u062f\u0627\u0634 \u0641\u0648\u0631\u06cc \u0631\u0627 \u0627\u0636\u0627\u0641\u0647 \u06a9\u0646\u06cc\u062f:<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064226.jpg\" "\\"\\"")
\u0645\u0639\u0627\u062f\u0644\u0647\u200c\u06cc\u06f1\u06f7<\/figcaption><\/figure><\/div>\n\n\n\u0627\u06a9\u0646\u0648\u0646 \u06a9\u0647 \u0631\u0627\u0628\u0637\u0647 \u0628\u06cc\u0646 \u0622\u0646 \u062a\u0648\u0627\u0628\u0639 \u0631\u0627 \u0645\u06cc \u062f\u0627\u0646\u06cc\u0645 \u0645\u06cc \u062a\u0648\u0627\u0646\u06cc\u0645 v(s) \u0631\u0627 \u0627\u0632 \u0631\u0627\u0628\u0637\u0647 \u06f1\u06f6 \u0628\u0647 q(s,a) \u0627\u0632 \u0631\u0627\u0628\u0637\u0647 \u06f1\u06f7 \u0648\u0627\u0631\u062f \u06a9\u0646\u06cc\u0645. \u0645\u0639\u0627\u062f\u0644\u0647 \u06f1\u06f8 \u0631\u0627 \u0628\u0647 \u062f\u0633\u062a \u0645\u06cc \u0622\u0648\u0631\u06cc\u0645 \u0648 \u0645\u062a\u0648\u062c\u0647 \u0645\u06cc \u0634\u0648\u06cc\u0645 \u06a9\u0647 \u06cc\u06a9 \u0631\u0627\u0628\u0637\u0647 \u0628\u0627\u0632\u06af\u0634\u062a\u06cc \u0628\u06cc\u0646 q(s,a) \u0641\u0639\u0644\u06cc \u0648 \u0639\u0645\u0644-\u0645\u0642\u062f\u0627\u0631 \u0628\u0639\u062f\u06cc q(s’,a’).<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064227.jpg\" "\\"\\"")
\u0645\u0639\u0627\u062f\u0644\u0647\u200c\u06cc\u06f1\u06f8<\/figcaption><\/figure><\/div>\n\n\n\u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u0645 \u0627\u06cc\u0646 \u0631\u0627\u0628\u0637\u0647 \u0628\u0627\u0632\u06af\u0634\u062a\u06cc \u0631\u0627 \u062f\u0631 \u062f\u0631\u062e\u062a \u0628\u0627\u06cc\u0646\u0631\u06cc \u062f\u06cc\u06af\u0631\u06cc \u062a\u062c\u0633\u0645 \u06a9\u0646\u06cc\u0645 (\u0634\u06a9\u0644 \u06f1\u06f0). \u0628\u0627 q(s,a) \u0634\u0631\u0648\u0639 \u0645\u06cc \u06a9\u0646\u06cc\u0645\u060c \u0628\u0627 \u0627\u062d\u062a\u0645\u0627\u0644 \u0645\u0634\u062e\u0635\u06cc Pss \u0628\u0647 \u062d\u0627\u0644\u062a \u0628\u0639\u062f\u06cc s \u062e\u062a\u0645 \u0645\u06cc \u06a9\u0646\u06cc\u0645. \u0627\u0632 \u0622\u0646\u062c\u0627 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u06cc\u0645 \u06cc\u06a9 \u0639\u0645\u0644 a\u2019 \u0628\u0627 \u0627\u062d\u062a\u0645\u0627\u0644 \u03c0 \u0627\u0646\u062c\u0627\u0645 \u062f\u0647\u06cc\u0645 \u0648 \u0628\u0627 \u0645\u0642\u062f\u0627\u0631 \u0639\u0645\u0644 q(s\u2019,a\u2019) \u067e\u0627\u06cc\u0627\u0646 \u0645\u06cc\u200c\u062f\u0647\u06cc\u0645. \u0628\u0631\u0627\u06cc \u0628\u0647 \u062f\u0633\u062a \u0622\u0648\u0631\u062f\u0646 q(s,a) \u0628\u0627\u06cc\u062f \u062f\u0631 \u062f\u0631\u062e\u062a \u0628\u0631\u0648\u06cc\u0645 \u0648 \u0647\u0645\u0647 \u0627\u062d\u062a\u0645\u0627\u0644\u0627\u062a \u0631\u0627 \u0647\u0645\u0627\u0646\u0637\u0648\u0631 \u06a9\u0647 \u062f\u0631 \u0631\u0627\u0628\u0637\u0647 \u06f1\u06f8 \u0645\u06cc \u0628\u06cc\u0646\u06cc\u062f \u0627\u062f\u063a\u0627\u0645 \u06a9\u0646\u06cc\u0645.<\/p>\n\n\n
![\"\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc](\"https:\/\/shahaab-co.com\/mag\/wp-content\/uploads\/2022\/01\/\u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc-\u0639\u0645\u06cc\u064228.jpg\" "\\"\\"")
<\/figure><\/div>\n\n\n\n