{"id":475880,"date":"2023-08-09T07:24:43","date_gmt":"2023-08-09T07:24:43","guid":{"rendered":""},"modified":"2023-09-05T11:11:30","modified_gmt":"2023-09-05T11:11:30","slug":"apache-spark","status":"publish","type":"wiki","link":"https:\/\/oneproxy.pro\/ir\/wiki\/apache-spark\/","title":{"rendered":"\u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9"},"content":{"rendered":"<p>Apache Spark \u06cc\u06a9 \u0633\u06cc\u0633\u062a\u0645 \u0645\u062d\u0627\u0633\u0628\u0627\u062a\u06cc \u062a\u0648\u0632\u06cc\u0639 \u0634\u062f\u0647 \u0645\u0646\u0628\u0639 \u0628\u0627\u0632 \u0627\u0633\u062a \u06a9\u0647 \u0628\u0631\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u0648 \u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0628\u0632\u0631\u06af \u0637\u0631\u0627\u062d\u06cc \u0634\u062f\u0647 \u0627\u0633\u062a. \u062f\u0631 \u0627\u0628\u062a\u062f\u0627 \u062f\u0631 AMPLab \u062f\u0631 \u062f\u0627\u0646\u0634\u06af\u0627\u0647 \u06a9\u0627\u0644\u06cc\u0641\u0631\u0646\u06cc\u0627\u060c \u0628\u0631\u06a9\u0644\u06cc \u062f\u0631 \u0633\u0627\u0644 2009 \u062a\u0648\u0633\u0639\u0647 \u06cc\u0627\u0641\u062a \u0648 \u0628\u0639\u062f\u0627\u064b \u0628\u0647 \u0628\u0646\u06cc\u0627\u062f \u0646\u0631\u0645\u200c\u0627\u0641\u0632\u0627\u0631 \u0622\u067e\u0627\u0686\u06cc \u0627\u0647\u062f\u0627 \u0634\u062f \u0648 \u062f\u0631 \u0633\u0627\u0644 2010 \u0628\u0647 \u06cc\u06a9 \u067e\u0631\u0648\u0698\u0647 \u0622\u067e\u0627\u0686\u06cc \u062a\u0628\u062f\u06cc\u0644 \u0634\u062f. \u0627\u0632 \u0622\u0646 \u0632\u0645\u0627\u0646\u060c Apache Spark \u0628\u0647 \u062f\u0644\u06cc\u0644 \u062f\u0627\u0634\u062a\u0646 \u0622\u0646 \u0645\u062d\u0628\u0648\u0628\u06cc\u062a \u06af\u0633\u062a\u0631\u062f\u0647\u200c\u0627\u06cc \u062f\u0631 \u062c\u0627\u0645\u0639\u0647 \u062f\u0627\u062f\u0647\u200c\u0647\u0627\u06cc \u0628\u0632\u0631\u06af \u0628\u0647 \u062f\u0633\u062a \u0622\u0648\u0631\u062f\u0647 \u0627\u0633\u062a. \u0633\u0631\u0639\u062a\u060c \u0633\u0647\u0648\u0644\u062a \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0648 \u062a\u0637\u0628\u06cc\u0642 \u067e\u0630\u06cc\u0631\u06cc.<\/p>\n<h2>\u062a\u0627\u0631\u06cc\u062e\u0686\u0647 \u067e\u06cc\u062f\u0627\u06cc\u0634 \u0627\u0633\u067e\u0627\u0631\u06a9 \u0622\u067e\u0627\u0686\u06cc \u0648 \u0627\u0648\u0644\u06cc\u0646 \u0630\u06a9\u0631 \u0622\u0646<\/h2>\n<p>Apache Spark \u0627\u0632 \u062a\u0644\u0627\u0634\u200c\u0647\u0627\u06cc \u062a\u062d\u0642\u06cc\u0642\u0627\u062a\u06cc \u062f\u0631 AMPLab \u0645\u062a\u0648\u0644\u062f \u0634\u062f\u060c \u062c\u0627\u06cc\u06cc \u06a9\u0647 \u062a\u0648\u0633\u0639\u0647\u200c\u062f\u0647\u0646\u062f\u06af\u0627\u0646 \u0628\u0627 \u0645\u062d\u062f\u0648\u062f\u06cc\u062a\u200c\u0647\u0627\u06cc\u06cc \u062f\u0631 \u0639\u0645\u0644\u06a9\u0631\u062f \u0648 \u0633\u0647\u0648\u0644\u062a \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 Hadoop MapReduce \u0645\u0648\u0627\u062c\u0647 \u0628\u0648\u062f\u0646\u062f. \u0627\u0648\u0644\u06cc\u0646 \u0630\u06a9\u0631 \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u062f\u0631 \u06cc\u06a9 \u0645\u0642\u0627\u0644\u0647 \u062a\u062d\u0642\u06cc\u0642\u0627\u062a\u06cc \u0628\u0627 \u0639\u0646\u0648\u0627\u0646 \u00ab\u0645\u062c\u0645\u0648\u0639\u0647\u200c\u0647\u0627\u06cc \u062f\u0627\u062f\u0647 \u062a\u0648\u0632\u06cc\u0639\u200c\u0634\u062f\u0647 \u0627\u0646\u0639\u0637\u0627\u0641\u200c\u067e\u0630\u06cc\u0631: \u06cc\u06a9 \u0627\u0646\u062a\u0632\u0627\u0639 \u062a\u062d\u0645\u0644\u200c\u067e\u0630\u06cc\u0631 \u062e\u0637\u0627 \u0628\u0631\u0627\u06cc \u0645\u062d\u0627\u0633\u0628\u0627\u062a \u062e\u0648\u0634\u0647\u200c\u0627\u06cc \u062f\u0631\u0648\u0646 \u062d\u0627\u0641\u0638\u0647\u00bb \u06a9\u0647 \u062a\u0648\u0633\u0637 \u0645\u062a\u06cc \u0632\u0647\u0627\u0631\u06cc\u0627 \u0648 \u062f\u06cc\u06af\u0631\u0627\u0646 \u062f\u0631 \u0633\u0627\u0644 2012 \u0645\u0646\u062a\u0634\u0631 \u0634\u062f. \u0627\u06cc\u0646 \u0645\u0642\u0627\u0644\u0647 \u0645\u0641\u0647\u0648\u0645 \u0645\u062c\u0645\u0648\u0639\u0647\u200c\u0647\u0627\u06cc \u062f\u0627\u062f\u0647 \u062a\u0648\u0632\u06cc\u0639\u200c\u0634\u062f\u0647 \u0627\u0646\u0639\u0637\u0627\u0641\u200c\u067e\u0630\u06cc\u0631 (RDDs) \u0631\u0627 \u0645\u0639\u0631\u0641\u06cc \u06a9\u0631\u062f. \u060c \u0633\u0627\u062e\u062a\u0627\u0631 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0627\u0633\u0627\u0633\u06cc \u062f\u0631 Spark.<\/p>\n<h2>\u0627\u0637\u0644\u0627\u0639\u0627\u062a \u062f\u0642\u06cc\u0642 \u062f\u0631\u0628\u0627\u0631\u0647 \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9: \u06af\u0633\u062a\u0631\u0634 \u0645\u0648\u0636\u0648\u0639<\/h2>\n<p>Apache Spark \u06cc\u06a9 \u0631\u0648\u0634 \u06a9\u0627\u0631\u0622\u0645\u062f \u0648 \u0627\u0646\u0639\u0637\u0627\u0641 \u067e\u0630\u06cc\u0631 \u0628\u0631\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u062f\u0631 \u0645\u0642\u06cc\u0627\u0633 \u0628\u0632\u0631\u06af \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u062f. \u0627\u06cc\u0646 \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u0631\u0627 \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u062f \u06a9\u0647 \u0628\u0647 \u0637\u0648\u0631 \u0642\u0627\u0628\u0644 \u062a\u0648\u062c\u0647\u06cc \u0648\u0638\u0627\u06cc\u0641 \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0627\u062f\u0647 \u0631\u0627 \u062f\u0631 \u0645\u0642\u0627\u06cc\u0633\u0647 \u0628\u0627 \u0633\u06cc\u0633\u062a\u0645 \u0647\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u0645\u0628\u062a\u0646\u06cc \u0628\u0631 \u062f\u06cc\u0633\u06a9 \u0633\u0646\u062a\u06cc \u0645\u0627\u0646\u0646\u062f Hadoop MapReduce \u0633\u0631\u0639\u062a \u0645\u06cc \u0628\u062e\u0634\u062f. Spark \u0628\u0647 \u062a\u0648\u0633\u0639\u0647 \u062f\u0647\u0646\u062f\u06af\u0627\u0646 \u0627\u06cc\u0646 \u0627\u0645\u06a9\u0627\u0646 \u0631\u0627 \u0645\u06cc \u062f\u0647\u062f \u06a9\u0647 \u0628\u0631\u0646\u0627\u0645\u0647 \u0647\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0627\u062f\u0647 \u0631\u0627 \u0628\u0647 \u0632\u0628\u0627\u0646 \u0647\u0627\u06cc \u0645\u062e\u062a\u0644\u0641 \u0627\u0632 \u062c\u0645\u0644\u0647 Scala\u060c Java\u060c Python \u0648 R \u0628\u0646\u0648\u06cc\u0633\u0646\u062f \u0648 \u0622\u0646 \u0631\u0627 \u0628\u0631\u0627\u06cc \u0645\u062e\u0627\u0637\u0628\u0627\u0646 \u06af\u0633\u062a\u0631\u062f\u0647 \u062a\u0631\u06cc \u062f\u0631 \u062f\u0633\u062a\u0631\u0633 \u0642\u0631\u0627\u0631 \u062f\u0647\u0646\u062f.<\/p>\n<h2>\u0633\u0627\u062e\u062a\u0627\u0631 \u062f\u0627\u062e\u0644\u06cc \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9: \u0627\u0633\u067e\u0627\u0631\u06a9 \u0622\u067e\u0627\u0686\u06cc \u0686\u06af\u0648\u0646\u0647 \u06a9\u0627\u0631 \u0645\u06cc \u06a9\u0646\u062f<\/h2>\n<p>\u062f\u0631 \u0647\u0633\u062a\u0647 Apache Spark\u060c Resilient Distributed Dataset (RDD) \u0642\u0631\u0627\u0631 \u062f\u0627\u0631\u062f\u060c \u0645\u062c\u0645\u0648\u0639\u0647 \u0627\u06cc \u063a\u06cc\u0631\u0642\u0627\u0628\u0644 \u062a\u063a\u06cc\u06cc\u0631 \u0627\u0632 \u0627\u0634\u06cc\u0627\u0621 \u062a\u0648\u0632\u06cc\u0639 \u0634\u062f\u0647 \u06a9\u0647 \u0645\u06cc \u062a\u0648\u0627\u0646\u0646\u062f \u0628\u0647 \u0635\u0648\u0631\u062a \u0645\u0648\u0627\u0632\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u0634\u0648\u0646\u062f. RDD \u0647\u0627 \u0645\u0642\u0627\u0648\u0645 \u0628\u0647 \u062e\u0637\u0627 \u0647\u0633\u062a\u0646\u062f\u060c \u0628\u0647 \u0627\u06cc\u0646 \u0645\u0639\u0646\u06cc \u06a9\u0647 \u0645\u06cc \u062a\u0648\u0627\u0646\u0646\u062f \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0627\u0632 \u062f\u0633\u062a \u0631\u0641\u062a\u0647 \u0631\u0627 \u062f\u0631 \u0635\u0648\u0631\u062a \u062e\u0631\u0627\u0628\u06cc \u06af\u0631\u0647 \u0628\u0627\u0632\u06cc\u0627\u0628\u06cc \u06a9\u0646\u0646\u062f. \u0645\u0648\u062a\u0648\u0631 \u0627\u0633\u067e\u0627\u0631\u06a9 DAG (Directed Acyclic Graph) \u0639\u0645\u0644\u06cc\u0627\u062a RDD \u0631\u0627 \u0628\u0631\u0627\u06cc \u062f\u0633\u062a\u06cc\u0627\u0628\u06cc \u0628\u0647 \u062d\u062f\u0627\u06a9\u062b\u0631 \u06a9\u0627\u0631\u0627\u06cc\u06cc \u0628\u0647\u06cc\u0646\u0647 \u0633\u0627\u0632\u06cc \u0648 \u0628\u0631\u0646\u0627\u0645\u0647 \u0631\u06cc\u0632\u06cc \u0645\u06cc \u06a9\u0646\u062f.<\/p>\n<p>\u0627\u06a9\u0648\u0633\u06cc\u0633\u062a\u0645 \u0627\u0633\u067e\u0627\u0631\u06a9 \u0627\u0632 \u0686\u0646\u062f\u06cc\u0646 \u062c\u0632\u0621 \u0633\u0637\u062d \u0628\u0627\u0644\u0627 \u062a\u0634\u06a9\u06cc\u0644 \u0634\u062f\u0647 \u0627\u0633\u062a:<\/p>\n<ol>\n<li>Spark Core: \u0639\u0645\u0644\u06a9\u0631\u062f \u0627\u0648\u0644\u06cc\u0647 \u0648 \u0627\u0646\u062a\u0632\u0627\u0639 RDD \u0631\u0627 \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u062f.<\/li>\n<li>Spark SQL: \u067e\u0631\u0633 \u0648 \u062c\u0648\u0647\u0627\u06cc SQL \u0645\u0627\u0646\u0646\u062f \u0631\u0627 \u0628\u0631\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0633\u0627\u062e\u062a \u06cc\u0627\u0641\u062a\u0647 \u0641\u0639\u0627\u0644 \u0645\u06cc \u06a9\u0646\u062f.<\/li>\n<li>Spark Streaming: \u067e\u0631\u062f\u0627\u0632\u0634 \u0628\u0644\u0627\u062f\u0631\u0646\u06af \u062f\u0627\u062f\u0647 \u0647\u0627 \u0631\u0627 \u0641\u0639\u0627\u0644 \u0645\u06cc \u06a9\u0646\u062f.<\/li>\n<li>MLlib (\u06a9\u062a\u0627\u0628\u062e\u0627\u0646\u0647 \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646): \u0637\u06cc\u0641 \u06af\u0633\u062a\u0631\u062f\u0647 \u0627\u06cc \u0627\u0632 \u0627\u0644\u06af\u0648\u0631\u06cc\u062a\u0645 \u0647\u0627\u06cc \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646 \u0631\u0627 \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u062f.<\/li>\n<li>GraphX: \u0627\u0645\u06a9\u0627\u0646 \u067e\u0631\u062f\u0627\u0632\u0634 \u0648 \u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u06af\u0631\u0627\u0641 \u0631\u0627 \u0641\u0631\u0627\u0647\u0645 \u0645\u06cc \u06a9\u0646\u062f.<\/li>\n<\/ol>\n<h2>\u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u0648\u06cc\u0698\u06af\u06cc \u0647\u0627\u06cc \u06a9\u0644\u06cc\u062f\u06cc Apache Spark<\/h2>\n<p>\u0648\u06cc\u0698\u06af\u06cc \u0647\u0627\u06cc \u06a9\u0644\u06cc\u062f\u06cc \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u0622\u0646 \u0631\u0627 \u0628\u0647 \u0627\u0646\u062a\u062e\u0627\u0628\u06cc \u0645\u062d\u0628\u0648\u0628 \u0628\u0631\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u0648 \u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0628\u0632\u0631\u06af \u062a\u0628\u062f\u06cc\u0644 \u0645\u06cc \u06a9\u0646\u062f:<\/p>\n<ol>\n<li>\u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647: \u062a\u0648\u0627\u0646\u0627\u06cc\u06cc Spark \u0628\u0631\u0627\u06cc \u0630\u062e\u06cc\u0631\u0647 \u062f\u0627\u062f\u0647 \u0647\u0627 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u0628\u0647 \u0637\u0648\u0631 \u0642\u0627\u0628\u0644 \u062a\u0648\u062c\u0647\u06cc \u0639\u0645\u0644\u06a9\u0631\u062f \u0631\u0627 \u0627\u0641\u0632\u0627\u06cc\u0634 \u0645\u06cc \u062f\u0647\u062f \u0648 \u0646\u06cc\u0627\u0632 \u0628\u0647 \u0639\u0645\u0644\u06cc\u0627\u062a \u062e\u0648\u0627\u0646\u062f\u0646\/\u0646\u0648\u0634\u062a\u0646 \u0645\u06a9\u0631\u0631 \u062f\u06cc\u0633\u06a9 \u0631\u0627 \u06a9\u0627\u0647\u0634 \u0645\u06cc \u062f\u0647\u062f.<\/li>\n<li>\u062a\u062d\u0645\u0644 \u062e\u0637\u0627: RDD \u0647\u0627 \u062a\u062d\u0645\u0644 \u062e\u0637\u0627 \u0631\u0627 \u0641\u0631\u0627\u0647\u0645 \u0645\u06cc \u06a9\u0646\u0646\u062f \u0648 \u0627\u0632 \u062b\u0628\u0627\u062a \u062f\u0627\u062f\u0647 \u0647\u0627 \u062d\u062a\u06cc \u062f\u0631 \u0635\u0648\u0631\u062a \u062e\u0631\u0627\u0628\u06cc \u06af\u0631\u0647 \u0647\u0627 \u0627\u0637\u0645\u06cc\u0646\u0627\u0646 \u0645\u06cc \u062f\u0647\u0646\u062f.<\/li>\n<li>\u0633\u0647\u0648\u0644\u062a \u0627\u0633\u062a\u0641\u0627\u062f\u0647: API\u0647\u0627\u06cc Spark \u06a9\u0627\u0631\u0628\u0631\u067e\u0633\u0646\u062f \u0647\u0633\u062a\u0646\u062f\u060c \u0627\u0632 \u0686\u0646\u062f\u06cc\u0646 \u0632\u0628\u0627\u0646 \u0628\u0631\u0646\u0627\u0645\u0647 \u0646\u0648\u06cc\u0633\u06cc \u067e\u0634\u062a\u06cc\u0628\u0627\u0646\u06cc \u0645\u06cc \u06a9\u0646\u0646\u062f \u0648 \u0641\u0631\u0622\u06cc\u0646\u062f \u062a\u0648\u0633\u0639\u0647 \u0631\u0627 \u0633\u0627\u062f\u0647 \u0645\u06cc \u06a9\u0646\u0646\u062f.<\/li>\n<li>\u062a\u0637\u0628\u06cc\u0642 \u067e\u0630\u06cc\u0631\u06cc: Spark \u0637\u06cc\u0641 \u06af\u0633\u062a\u0631\u062f\u0647 \u0627\u06cc \u0627\u0632 \u06a9\u062a\u0627\u0628\u062e\u0627\u0646\u0647 \u0647\u0627 \u0631\u0627 \u0628\u0631\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0633\u062a\u0647 \u0627\u06cc\u060c \u067e\u0631\u062f\u0627\u0632\u0634 \u062c\u0631\u06cc\u0627\u0646\u06cc\u060c \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646\u06cc \u0648 \u067e\u0631\u062f\u0627\u0632\u0634 \u0646\u0645\u0648\u062f\u0627\u0631 \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u062f \u06a9\u0647 \u0622\u0646 \u0631\u0627 \u0628\u0647 \u06cc\u06a9 \u067e\u0644\u062a \u0641\u0631\u0645 \u0647\u0645\u0647 \u06a9\u0627\u0631\u0647 \u062a\u0628\u062f\u06cc\u0644 \u0645\u06cc \u06a9\u0646\u062f.<\/li>\n<li>\u0633\u0631\u0639\u062a: \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0631\u0648\u0646 \u062d\u0627\u0641\u0638\u0647 \u0648 \u0645\u0648\u062a\u0648\u0631 \u0627\u062c\u0631\u0627\u06cc \u0628\u0647\u06cc\u0646\u0647 Spark \u0628\u0647 \u0633\u0631\u0639\u062a \u0628\u0631\u062a\u0631 \u0622\u0646 \u06a9\u0645\u06a9 \u0645\u06cc \u06a9\u0646\u062f.<\/li>\n<\/ol>\n<h2>\u0627\u0646\u0648\u0627\u0639 \u0627\u0633\u067e\u0627\u0631\u06a9 \u0622\u067e\u0627\u0686\u06cc<\/h2>\n<p>Apache Spark \u0631\u0627 \u0645\u06cc \u062a\u0648\u0627\u0646 \u0628\u0631 \u0627\u0633\u0627\u0633 \u06a9\u0627\u0631\u0628\u0631\u062f \u0648 \u0639\u0645\u0644\u06a9\u0631\u062f \u0622\u0646 \u0628\u0647 \u0627\u0646\u0648\u0627\u0639 \u0645\u062e\u062a\u0644\u0641\u06cc \u062f\u0633\u062a\u0647 \u0628\u0646\u062f\u06cc \u06a9\u0631\u062f:<\/p>\n<table>\n<thead>\n<tr>\n<th>\u062a\u0627\u06cc\u067e \u06a9\u0646\u06cc\u062f<\/th>\n<th>\u0634\u0631\u062d<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0633\u062a\u0647 \u0627\u06cc<\/td>\n<td>\u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u0648 \u067e\u0631\u062f\u0627\u0632\u0634 \u062d\u062c\u0645 \u0632\u06cc\u0627\u062f\u06cc \u0627\u0632 \u062f\u0627\u062f\u0647 \u0647\u0627 \u0628\u0647 \u0637\u0648\u0631 \u0647\u0645\u0632\u0645\u0627\u0646.<\/td>\n<\/tr>\n<tr>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u062c\u0631\u06cc\u0627\u0646<\/td>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u0628\u06cc\u200c\u062f\u0631\u0646\u06af \u062c\u0631\u06cc\u0627\u0646\u200c\u0647\u0627\u06cc \u062f\u0627\u062f\u0647 \u0628\u0647 \u0645\u062d\u0636 \u0631\u0633\u06cc\u062f\u0646.<\/td>\n<\/tr>\n<tr>\n<td>\u0641\u0631\u0627\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646<\/td>\n<td>\u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 MLlib \u0627\u0633\u067e\u0627\u0631\u06a9 \u0628\u0631\u0627\u06cc \u067e\u06cc\u0627\u062f\u0647 \u0633\u0627\u0632\u06cc \u0627\u0644\u06af\u0648\u0631\u06cc\u062a\u0645 \u0647\u0627\u06cc \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646.<\/td>\n<\/tr>\n<tr>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u0646\u0645\u0648\u062f\u0627\u0631<\/td>\n<td>\u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u0648 \u067e\u0631\u062f\u0627\u0632\u0634 \u0646\u0645\u0648\u062f\u0627\u0631\u0647\u0627 \u0648 \u0633\u0627\u062e\u062a\u0627\u0631\u0647\u0627\u06cc \u062f\u0627\u062f\u0647 \u067e\u06cc\u0686\u06cc\u062f\u0647.<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h2>\u0631\u0627\u0647 \u0647\u0627\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 Apache Spark: \u0645\u0634\u06a9\u0644\u0627\u062a \u0648 \u0631\u0627\u0647 \u062d\u0644 \u0647\u0627\u06cc \u0645\u0631\u062a\u0628\u0637 \u0628\u0627 \u0627\u0633\u062a\u0641\u0627\u062f\u0647<\/h2>\n<p>\u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u0628\u0631\u0646\u0627\u0645\u0647 \u0647\u0627\u06cc \u06a9\u0627\u0631\u0628\u0631\u062f\u06cc \u0631\u0627 \u062f\u0631 \u062d\u0648\u0632\u0647 \u0647\u0627\u06cc \u0645\u062e\u062a\u0644\u0641 \u0627\u0632 \u062c\u0645\u0644\u0647 \u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u062f\u0627\u062f\u0647 \u0647\u0627\u060c \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646\u06cc\u060c \u0633\u06cc\u0633\u062a\u0645 \u0647\u0627\u06cc \u062a\u0648\u0635\u06cc\u0647 \u0648 \u067e\u0631\u062f\u0627\u0632\u0634 \u0631\u0648\u06cc\u062f\u0627\u062f\u0647\u0627\u06cc \u0628\u0644\u0627\u062f\u0631\u0646\u06af \u067e\u06cc\u062f\u0627 \u0645\u06cc \u06a9\u0646\u062f. \u0628\u0627 \u0627\u06cc\u0646 \u062d\u0627\u0644\u060c \u0647\u0646\u06af\u0627\u0645 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9\u060c \u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u0628\u0631\u062e\u06cc \u0627\u0632 \u0686\u0627\u0644\u0634\u200c\u0647\u0627\u06cc \u0631\u0627\u06cc\u062c \u0627\u06cc\u062c\u0627\u062f \u0634\u0648\u062f:<\/p>\n<ol>\n<li>\n<p><strong>\u0645\u062f\u06cc\u0631\u06cc\u062a \u062d\u0627\u0641\u0638\u0647<\/strong>: \u0627\u0632 \u0622\u0646\u062c\u0627\u06cc\u06cc \u06a9\u0647 Spark \u0628\u0647 \u0634\u062f\u062a \u0628\u0647 \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u0645\u062a\u06a9\u06cc \u0627\u0633\u062a\u060c \u0645\u062f\u06cc\u0631\u06cc\u062a \u06a9\u0627\u0631\u0622\u0645\u062f \u062d\u0627\u0641\u0638\u0647 \u0628\u0631\u0627\u06cc \u062c\u0644\u0648\u06af\u06cc\u0631\u06cc \u0627\u0632 \u062e\u0637\u0627\u0647\u0627\u06cc \u062e\u0627\u0631\u062c \u0627\u0632 \u062d\u0627\u0641\u0638\u0647 \u0628\u0633\u06cc\u0627\u0631 \u0645\u0647\u0645 \u0627\u0633\u062a.<\/p>\n<ul>\n<li>\u0631\u0627\u0647 \u062d\u0644: \u0630\u062e\u06cc\u0631\u0647 \u0633\u0627\u0632\u06cc \u062f\u0627\u062f\u0647 \u0647\u0627 \u0631\u0627 \u0628\u0647\u06cc\u0646\u0647 \u06a9\u0646\u06cc\u062f\u060c \u0627\u0632 \u062d\u0627\u0641\u0638\u0647 \u067e\u0646\u0647\u0627\u0646 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0646\u06cc\u062f \u0648 \u0645\u06cc\u0632\u0627\u0646 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 \u062d\u0627\u0641\u0638\u0647 \u0631\u0627 \u0646\u0638\u0627\u0631\u062a \u06a9\u0646\u06cc\u062f.<\/li>\n<\/ul>\n<\/li>\n<li>\n<p><strong>\u0627\u0646\u062d\u0631\u0627\u0641 \u062f\u0627\u062f\u0647 \u0647\u0627<\/strong>: \u062a\u0648\u0632\u06cc\u0639 \u0646\u0627\u0628\u0631\u0627\u0628\u0631 \u062f\u0627\u062f\u0647 \u0647\u0627 \u062f\u0631 \u0628\u06cc\u0646 \u067e\u0627\u0631\u062a\u06cc\u0634\u0646 \u0647\u0627 \u0645\u06cc \u062a\u0648\u0627\u0646\u062f \u0645\u0646\u062c\u0631 \u0628\u0647 \u06af\u0644\u0648\u06af\u0627\u0647 \u0647\u0627\u06cc \u0639\u0645\u0644\u06a9\u0631\u062f \u0634\u0648\u062f.<\/p>\n<ul>\n<li>\u0631\u0627\u0647 \u062d\u0644: \u0627\u0632 \u062a\u06a9\u0646\u06cc\u06a9 \u0647\u0627\u06cc \u062a\u0642\u0633\u06cc\u0645 \u0645\u062c\u062f\u062f \u062f\u0627\u062f\u0647 \u0647\u0627 \u0628\u0631\u0627\u06cc \u062a\u0648\u0632\u06cc\u0639 \u06cc\u06a9\u0646\u0648\u0627\u062e\u062a \u062f\u0627\u062f\u0647 \u0647\u0627 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0646\u06cc\u062f.<\/li>\n<\/ul>\n<\/li>\n<li>\n<p><strong>\u0627\u0646\u062f\u0627\u0632\u0647 \u062e\u0648\u0634\u0647<\/strong>: \u0627\u0646\u062f\u0627\u0632\u0647 \u0646\u0627\u062f\u0631\u0633\u062a \u062e\u0648\u0634\u0647 \u0645\u0645\u06a9\u0646 \u0627\u0633\u062a \u0645\u0646\u062c\u0631 \u0628\u0647 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0646\u0627\u06a9\u0627\u0641\u06cc \u06cc\u0627 \u0628\u0627\u0631\u06af\u0630\u0627\u0631\u06cc \u0628\u06cc\u0634 \u0627\u0632 \u062d\u062f \u0645\u0646\u0627\u0628\u0639 \u0634\u0648\u062f.<\/p>\n<ul>\n<li>\u0631\u0627\u0647 \u062d\u0644: \u0628\u0647 \u0637\u0648\u0631 \u0645\u0646\u0638\u0645 \u0628\u0631 \u0639\u0645\u0644\u06a9\u0631\u062f \u062e\u0648\u0634\u0647 \u0646\u0638\u0627\u0631\u062a \u06a9\u0646\u06cc\u062f \u0648 \u0645\u0646\u0627\u0628\u0639 \u0631\u0627 \u0628\u0631 \u0627\u0633\u0627\u0633 \u0622\u0646 \u062a\u0646\u0638\u06cc\u0645 \u06a9\u0646\u06cc\u062f.<\/li>\n<\/ul>\n<\/li>\n<li>\n<p><strong>\u0633\u0631\u06cc\u0627\u0644 \u0633\u0627\u0632\u06cc \u062f\u0627\u062f\u0647 \u0647\u0627<\/strong>: \u0633\u0631\u06cc\u0627\u0644 \u0633\u0627\u0632\u06cc \u0646\u0627\u06a9\u0627\u0631\u0622\u0645\u062f \u062f\u0627\u062f\u0647 \u0647\u0627 \u0645\u06cc \u062a\u0648\u0627\u0646\u062f \u0628\u0631 \u0639\u0645\u0644\u06a9\u0631\u062f \u062f\u0631 \u062d\u06cc\u0646 \u0627\u0646\u062a\u0642\u0627\u0644 \u062f\u0627\u062f\u0647 \u062a\u0623\u062b\u06cc\u0631 \u0628\u06af\u0630\u0627\u0631\u062f.<\/p>\n<ul>\n<li>\u0631\u0627\u0647 \u062d\u0644: \u0641\u0631\u0645\u062a \u0647\u0627\u06cc \u0633\u0631\u06cc\u0627\u0644 \u0633\u0627\u0632\u06cc \u0645\u0646\u0627\u0633\u0628 \u0631\u0627 \u0627\u0646\u062a\u062e\u0627\u0628 \u06a9\u0646\u06cc\u062f \u0648 \u062f\u0631 \u0635\u0648\u0631\u062a \u0646\u06cc\u0627\u0632 \u062f\u0627\u062f\u0647 \u0647\u0627 \u0631\u0627 \u0641\u0634\u0631\u062f\u0647 \u06a9\u0646\u06cc\u062f.<\/li>\n<\/ul>\n<\/li>\n<\/ol>\n<h2>\u0648\u06cc\u0698\u06af\u06cc \u0647\u0627\u06cc \u0627\u0635\u0644\u06cc \u0648 \u0645\u0642\u0627\u06cc\u0633\u0647 \u0647\u0627\u06cc \u062f\u06cc\u06af\u0631 \u0628\u0627 \u0627\u0635\u0637\u0644\u0627\u062d\u0627\u062a \u0645\u0634\u0627\u0628\u0647<\/h2>\n<table>\n<thead>\n<tr>\n<th>\u0645\u0634\u062e\u0635\u0647<\/th>\n<th>\u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9<\/th>\n<th>Hadoop MapReduce<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>\u067e\u0627\u0631\u0627\u062f\u0627\u06cc\u0645 \u067e\u0631\u062f\u0627\u0632\u0634<\/td>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u0648 \u062a\u06a9\u0631\u0627\u0631 \u0634\u0648\u0646\u062f\u0647<\/td>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0633\u062a\u0647 \u0627\u06cc \u0645\u0628\u062a\u0646\u06cc \u0628\u0631 \u062f\u06cc\u0633\u06a9<\/td>\n<\/tr>\n<tr>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0627\u062f\u0647 \u0647\u0627<\/td>\n<td>\u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0633\u062a\u0647 \u0627\u06cc \u0648 \u0628\u0644\u0627\u062f\u0631\u0646\u06af<\/td>\n<td>\u0641\u0642\u0637 \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0633\u062a\u0647 \u0627\u06cc<\/td>\n<\/tr>\n<tr>\n<td>\u062a\u062d\u0645\u0644 \u062e\u0637\u0627<\/td>\n<td>\u0628\u0644\u0647 (\u0627\u0632 \u0637\u0631\u06cc\u0642 RDD)<\/td>\n<td>\u0628\u0644\u0647 (\u0627\u0632 \u0637\u0631\u06cc\u0642 \u062a\u06a9\u0631\u0627\u0631)<\/td>\n<\/tr>\n<tr>\n<td>\u0630\u062e\u06cc\u0631\u0647 \u0633\u0627\u0632\u06cc \u062f\u0627\u062f\u0647 \u0647\u0627<\/td>\n<td>\u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u0648 \u0645\u0628\u062a\u0646\u06cc \u0628\u0631 \u062f\u06cc\u0633\u06a9<\/td>\n<td>\u0645\u0628\u062a\u0646\u06cc \u0628\u0631 \u062f\u06cc\u0633\u06a9<\/td>\n<\/tr>\n<tr>\n<td>\u0632\u06cc\u0633\u062a \u0628\u0648\u0645<\/td>\n<td>\u0645\u062c\u0645\u0648\u0639\u0647 \u0645\u062a\u0646\u0648\u0639\u06cc \u0627\u0632 \u06a9\u062a\u0627\u0628\u062e\u0627\u0646\u0647 \u0647\u0627 (Spark SQL\u060c Spark Streaming\u060c MLlib\u060c GraphX \u0648 \u063a\u06cc\u0631\u0647)<\/td>\n<td>\u0627\u06a9\u0648\u0633\u06cc\u0633\u062a\u0645 \u0645\u062d\u062f\u0648\u062f<\/td>\n<\/tr>\n<tr>\n<td>\u06a9\u0627\u0631\u0627\u06cc\u06cc<\/td>\n<td>\u0628\u0647 \u062f\u0644\u06cc\u0644 \u067e\u0631\u062f\u0627\u0632\u0634 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u0633\u0631\u06cc\u0639\u062a\u0631 \u0627\u0633\u062a<\/td>\n<td>\u0628\u0647 \u062f\u0644\u06cc\u0644 \u062e\u0648\u0627\u0646\u062f\u0646\/\u0646\u0648\u0634\u062a\u0646 \u062f\u06cc\u0633\u06a9 \u06a9\u0646\u062f\u062a\u0631 \u0627\u0633\u062a<\/td>\n<\/tr>\n<tr>\n<td>\u0631\u0627\u062d\u062a\u06cc \u062f\u0631 \u0627\u0633\u062a\u0641\u0627\u062f\u0647<\/td>\n<td>API\u0647\u0627\u06cc \u06a9\u0627\u0631\u0628\u0631 \u067e\u0633\u0646\u062f \u0648 \u067e\u0634\u062a\u06cc\u0628\u0627\u0646\u06cc \u0627\u0632 \u0686\u0646\u062f \u0632\u0628\u0627\u0646<\/td>\n<td>\u0645\u0646\u062d\u0646\u06cc \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u062a\u0646\u062f\u062a\u0631 \u0648 \u0645\u0628\u062a\u0646\u06cc \u0628\u0631 \u062c\u0627\u0648\u0627<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h2>\u062f\u06cc\u062f\u06af\u0627\u0647 \u0647\u0627 \u0648 \u0641\u0646\u0627\u0648\u0631\u06cc \u0647\u0627\u06cc \u0622\u06cc\u0646\u062f\u0647 \u0645\u0631\u062a\u0628\u0637 \u0628\u0627 \u0627\u0633\u067e\u0627\u0631\u06a9 \u0622\u067e\u0627\u0686\u06cc<\/h2>\n<p>\u0622\u06cc\u0646\u062f\u0647 \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u0627\u0645\u06cc\u062f\u0648\u0627\u0631 \u06a9\u0646\u0646\u062f\u0647 \u0628\u0647 \u0646\u0638\u0631 \u0645\u06cc \u0631\u0633\u062f \u0632\u06cc\u0631\u0627 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0628\u0632\u0631\u06af \u0647\u0645\u0686\u0646\u0627\u0646 \u062c\u0646\u0628\u0647 \u062d\u06cc\u0627\u062a\u06cc \u0635\u0646\u0627\u06cc\u0639 \u0645\u062e\u062a\u0644\u0641 \u0627\u0633\u062a. \u0628\u0631\u062e\u06cc \u0627\u0632 \u062f\u06cc\u062f\u06af\u0627\u0647 \u0647\u0627 \u0648 \u0641\u0646\u0627\u0648\u0631\u06cc \u0647\u0627\u06cc \u06a9\u0644\u06cc\u062f\u06cc \u0645\u0631\u062a\u0628\u0637 \u0628\u0627 \u0622\u06cc\u0646\u062f\u0647 \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u0639\u0628\u0627\u0631\u062a\u0646\u062f \u0627\u0632:<\/p>\n<ol>\n<li><strong>\u0628\u0647\u064a\u0646\u0647 \u0633\u0627\u0632\u064a<\/strong>: \u062a\u0644\u0627\u0634\u200c\u0647\u0627\u06cc \u0645\u062f\u0627\u0648\u0645 \u0628\u0631\u0627\u06cc \u0628\u0647\u0628\u0648\u062f \u0639\u0645\u0644\u06a9\u0631\u062f Spark \u0648 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u0627\u0632 \u0645\u0646\u0627\u0628\u0639 \u0627\u062d\u062a\u0645\u0627\u0644\u0627\u064b \u0645\u0646\u062c\u0631 \u0628\u0647 \u067e\u0631\u062f\u0627\u0632\u0634 \u0633\u0631\u06cc\u0639\u200c\u062a\u0631 \u0648 \u06a9\u0627\u0647\u0634 \u0633\u0631\u0628\u0627\u0631 \u062d\u0627\u0641\u0638\u0647 \u0645\u06cc\u200c\u0634\u0648\u062f.<\/li>\n<li><strong>\u0627\u062f\u063a\u0627\u0645 \u0628\u0627 \u0647\u0648\u0634 \u0645\u0635\u0646\u0648\u0639\u06cc<\/strong>: \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u0627\u062d\u062a\u0645\u0627\u0644\u0627\u064b \u0639\u0645\u06cc\u0642\u200c\u062a\u0631 \u0628\u0627 \u0686\u0627\u0631\u0686\u0648\u0628\u200c\u0647\u0627\u06cc \u0647\u0648\u0634 \u0645\u0635\u0646\u0648\u0639\u06cc \u0648 \u06cc\u0627\u062f\u06af\u06cc\u0631\u06cc \u0645\u0627\u0634\u06cc\u0646 \u0627\u062f\u063a\u0627\u0645 \u0645\u06cc\u200c\u0634\u0648\u062f \u0648 \u0622\u0646 \u0631\u0627 \u0628\u0647 \u06af\u0632\u06cc\u0646\u0647\u200c\u0627\u06cc \u0645\u0646\u0627\u0633\u0628 \u0628\u0631\u0627\u06cc \u0628\u0631\u0646\u0627\u0645\u0647\u200c\u0647\u0627\u06cc \u0645\u0628\u062a\u0646\u06cc \u0628\u0631 \u0647\u0648\u0634 \u0645\u0635\u0646\u0648\u0639\u06cc \u062a\u0628\u062f\u06cc\u0644 \u0645\u06cc\u200c\u06a9\u0646\u062f.<\/li>\n<li><strong>\u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u0632\u0645\u0627\u0646 \u0648\u0627\u0642\u0639\u06cc<\/strong>: \u0642\u0627\u0628\u0644\u06cc\u062a\u200c\u0647\u0627\u06cc \u0627\u0633\u062a\u0631\u06cc\u0645 \u0627\u0633\u067e\u0627\u0631\u06a9 \u0627\u062d\u062a\u0645\u0627\u0644\u0627\u064b \u067e\u06cc\u0634\u0631\u0641\u062a \u0645\u06cc\u200c\u06a9\u0646\u062f \u0648 \u0627\u0645\u06a9\u0627\u0646 \u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u0628\u06cc\u200c\u062f\u0631\u0646\u06af \u0628\u06cc\u200c\u0646\u0638\u06cc\u0631 \u0631\u0627 \u0628\u0631\u0627\u06cc \u0628\u06cc\u0646\u0634\u200c\u0647\u0627\u06cc \u0641\u0648\u0631\u06cc \u0648 \u062a\u0635\u0645\u06cc\u0645\u200c\u06af\u06cc\u0631\u06cc \u0641\u0631\u0627\u0647\u0645 \u0645\u06cc\u200c\u06a9\u0646\u062f.<\/li>\n<\/ol>\n<h2>\u0686\u06af\u0648\u0646\u0647 \u0645\u06cc \u062a\u0648\u0627\u0646 \u0627\u0632 \u0633\u0631\u0648\u0631\u0647\u0627\u06cc \u067e\u0631\u0648\u06a9\u0633\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f \u06cc\u0627 \u0628\u0627 \u0627\u0633\u067e\u0627\u0631\u06a9 \u0622\u067e\u0627\u0686\u06cc \u0645\u0631\u062a\u0628\u0637 \u0634\u062f<\/h2>\n<p>\u0633\u0631\u0648\u0631\u0647\u0627\u06cc \u067e\u0631\u0648\u06a9\u0633\u06cc \u0645\u06cc \u062a\u0648\u0627\u0646\u0646\u062f \u0646\u0642\u0634 \u0645\u0647\u0645\u06cc \u062f\u0631 \u0627\u0641\u0632\u0627\u06cc\u0634 \u0627\u0645\u0646\u06cc\u062a \u0648 \u0639\u0645\u0644\u06a9\u0631\u062f \u0627\u0633\u062a\u0642\u0631\u0627\u0631\u0647\u0627\u06cc Apache Spark \u0627\u06cc\u0641\u0627 \u06a9\u0646\u0646\u062f. \u0628\u0631\u062e\u06cc \u0627\u0632 \u0631\u0627\u0647\u200c\u0647\u0627\u06cc\u06cc \u06a9\u0647 \u0645\u06cc\u200c\u062a\u0648\u0627\u0646 \u0627\u0632 \u0633\u0631\u0648\u0631\u0647\u0627\u06cc \u067e\u0631\u0648\u06a9\u0633\u06cc \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06a9\u0631\u062f \u06cc\u0627 \u0628\u0627 Apache Spark \u0645\u0631\u062a\u0628\u0637 \u0634\u062f\u060c \u0639\u0628\u0627\u0631\u062a\u0646\u062f \u0627\u0632:<\/p>\n<ol>\n<li><strong>\u062a\u0639\u0627\u062f\u0644 \u0628\u0627\u0631<\/strong>: \u0633\u0631\u0648\u0631\u0647\u0627\u06cc \u067e\u0631\u0648\u06a9\u0633\u06cc \u0645\u06cc \u062a\u0648\u0627\u0646\u0646\u062f \u062f\u0631\u062e\u0648\u0627\u0633\u062a \u0647\u0627\u06cc \u062f\u0631\u06cc\u0627\u0641\u062a\u06cc \u0631\u0627 \u062f\u0631 \u0686\u0646\u062f\u06cc\u0646 \u06af\u0631\u0647 Spark \u062a\u0648\u0632\u06cc\u0639 \u06a9\u0646\u0646\u062f \u0648 \u0627\u0632 \u0627\u0633\u062a\u0641\u0627\u062f\u0647 \u06cc\u06a9\u0646\u0648\u0627\u062e\u062a \u0627\u0632 \u0645\u0646\u0627\u0628\u0639 \u0648 \u0639\u0645\u0644\u06a9\u0631\u062f \u0628\u0647\u062a\u0631 \u0627\u0637\u0645\u06cc\u0646\u0627\u0646 \u062d\u0627\u0635\u0644 \u06a9\u0646\u0646\u062f.<\/li>\n<li><strong>\u0627\u0645\u0646\u06cc\u062a<\/strong>: \u0633\u0631\u0648\u0631\u0647\u0627\u06cc \u067e\u0631\u0648\u06a9\u0633\u06cc \u0628\u0647 \u0639\u0646\u0648\u0627\u0646 \u0648\u0627\u0633\u0637\u0647 \u0628\u06cc\u0646 \u06a9\u0627\u0631\u0628\u0631\u0627\u0646 \u0648 \u06a9\u0644\u0627\u0633\u062a\u0631\u0647\u0627\u06cc Spark \u0639\u0645\u0644 \u0645\u06cc \u06a9\u0646\u0646\u062f \u0648 \u06cc\u06a9 \u0644\u0627\u06cc\u0647 \u0627\u0645\u0646\u06cc\u062a\u06cc \u0627\u0636\u0627\u0641\u06cc \u0631\u0627 \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u0646\u062f \u0648 \u0628\u0647 \u0645\u062d\u0627\u0641\u0638\u062a \u062f\u0631 \u0628\u0631\u0627\u0628\u0631 \u062d\u0645\u0644\u0627\u062a \u0627\u062d\u062a\u0645\u0627\u0644\u06cc \u06a9\u0645\u06a9 \u0645\u06cc \u06a9\u0646\u0646\u062f.<\/li>\n<li><strong>\u0630\u062e\u06cc\u0631\u0647 \u0633\u0627\u0632\u06cc<\/strong>: \u0633\u0631\u0648\u0631\u0647\u0627\u06cc \u067e\u0631\u0648\u06a9\u0633\u06cc \u0645\u06cc\u200c\u062a\u0648\u0627\u0646\u0646\u062f \u062f\u0627\u062f\u0647\u200c\u0647\u0627\u06cc \u062f\u0631\u062e\u0648\u0627\u0633\u062a\u06cc \u0645\u06a9\u0631\u0631 \u0631\u0627 \u062f\u0631 \u062d\u0627\u0641\u0638\u0647 \u067e\u0646\u0647\u0627\u0646 \u0630\u062e\u06cc\u0631\u0647 \u06a9\u0646\u0646\u062f\u060c \u0628\u0627\u0631 \u0631\u0648\u06cc \u062e\u0648\u0634\u0647\u200c\u0647\u0627\u06cc Spark \u0631\u0627 \u06a9\u0627\u0647\u0634 \u062f\u0627\u062f\u0647 \u0648 \u0632\u0645\u0627\u0646 \u067e\u0627\u0633\u062e \u0631\u0627 \u0628\u0647\u0628\u0648\u062f \u0645\u06cc\u200c\u0628\u062e\u0634\u0646\u062f.<\/li>\n<\/ol>\n<h2>\u0644\u06cc\u0646\u06a9 \u0647\u0627\u06cc \u0645\u0631\u0628\u0648\u0637\u0647<\/h2>\n<p>\u0628\u0631\u0627\u06cc \u0627\u0637\u0644\u0627\u0639\u0627\u062a \u0628\u06cc\u0634\u062a\u0631 \u062f\u0631 \u0645\u0648\u0631\u062f Apache Spark\u060c \u0645\u06cc \u062a\u0648\u0627\u0646\u06cc\u062f \u0645\u0646\u0627\u0628\u0639 \u0632\u06cc\u0631 \u0631\u0627 \u0628\u0631\u0631\u0633\u06cc \u06a9\u0646\u06cc\u062f:<\/p>\n<ol>\n<li><a href=\"https:\/\/spark.apache.org\/\" target=\"_new\" rel=\"noopener nofollow\">\u0648\u0628 \u0633\u0627\u06cc\u062a \u0631\u0633\u0645\u06cc \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9<\/a><\/li>\n<li><a href=\"https:\/\/spark.apache.org\/documentation.html\" target=\"_new\" rel=\"noopener nofollow\">\u0645\u0633\u062a\u0646\u062f\u0627\u062a \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9<\/a><\/li>\n<li><a href=\"https:\/\/github.com\/apache\/spark\" target=\"_new\" rel=\"noopener nofollow\">\u0645\u062e\u0632\u0646 Apache Spark GitHub<\/a><\/li>\n<li><a href=\"https:\/\/databricks.com\/spark\/about\" target=\"_new\" rel=\"noopener nofollow\">Databricks \u2013 Apache Spark<\/a><\/li>\n<\/ol>\n<p>\u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u0647\u0645\u0686\u0646\u0627\u0646 \u0628\u0647 \u062a\u06a9\u0627\u0645\u0644 \u0648 \u062a\u062d\u0648\u0644 \u062f\u0631 \u0686\u0634\u0645 \u0627\u0646\u062f\u0627\u0632 \u06a9\u0644\u0627\u0646 \u062f\u0627\u062f\u0647 \u0647\u0627 \u0627\u062f\u0627\u0645\u0647 \u0645\u06cc \u062f\u0647\u062f \u0648 \u0633\u0627\u0632\u0645\u0627\u0646 \u0647\u0627 \u0631\u0627 \u0642\u0627\u062f\u0631 \u0645\u06cc \u0633\u0627\u0632\u062f \u062a\u0627 \u0628\u06cc\u0646\u0634 \u0647\u0627\u06cc \u0627\u0631\u0632\u0634\u0645\u0646\u062f \u0631\u0627 \u0627\u0632 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u062e\u0648\u062f \u0628\u0647 \u0633\u0631\u0639\u062a \u0648 \u06a9\u0627\u0631\u0622\u0645\u062f \u0628\u0627\u0632 \u06a9\u0646\u0646\u062f. \u0686\u0647 \u062f\u0627\u0646\u0634\u0645\u0646\u062f \u062f\u0627\u062f\u0647\u060c \u0645\u0647\u0646\u062f\u0633 \u06cc\u0627 \u062a\u062d\u0644\u06cc\u0644\u06af\u0631 \u06a9\u0633\u0628 \u0648 \u06a9\u0627\u0631 \u0628\u0627\u0634\u06cc\u062f\u060c \u0622\u067e\u0627\u0686\u06cc \u0627\u0633\u067e\u0627\u0631\u06a9 \u06cc\u06a9 \u067e\u0644\u062a \u0641\u0631\u0645 \u0642\u062f\u0631\u062a\u0645\u0646\u062f \u0648 \u0627\u0646\u0639\u0637\u0627\u0641 \u067e\u0630\u06cc\u0631 \u0628\u0631\u0627\u06cc \u067e\u0631\u062f\u0627\u0632\u0634 \u0648 \u062a\u062c\u0632\u06cc\u0647 \u0648 \u062a\u062d\u0644\u06cc\u0644 \u062f\u0627\u062f\u0647 \u0647\u0627\u06cc \u0628\u0632\u0631\u06af \u0627\u0631\u0627\u0626\u0647 \u0645\u06cc \u062f\u0647\u062f.<\/p>","protected":false},"featured_media":467620,"menu_order":0,"template":"","meta":{"_acf_changed":false,"content-type":"","inline_featured_image":false,"footnotes":""},"class_list":["post-475880","wiki","type-wiki","status-publish","has-post-thumbnail","hentry"],"acf":{"faq_title":"Frequently Asked Questions about <mark>Apache Spark: A Comprehensive Guide<\/mark>","faq_items":[{"question":"What is Apache Spark?","answer":"<p>Apache Spark is an open-source distributed computing system designed for big data processing and analytics. It provides fast in-memory processing, fault tolerance, and supports multiple programming languages for data processing applications.<\/p>"},{"question":"How did Apache Spark originate?","answer":"<p>Apache Spark originated from research efforts at the AMPLab, University of California, Berkeley, and was first mentioned in a research paper titled \"Resilient Distributed Datasets: A Fault-Tolerant Abstraction for In-Memory Cluster Computing\" in 2012.<\/p>"},{"question":"What is the internal structure of Apache Spark?","answer":"<p>At the core of Apache Spark is the concept of Resilient Distributed Datasets (RDDs), which are immutable distributed collections of objects processed in parallel. Spark's ecosystem includes Spark Core, Spark SQL, Spark Streaming, MLlib, and GraphX.<\/p>"},{"question":"What are the key features of Apache Spark?","answer":"<p>The key features of Apache Spark include in-memory processing, fault tolerance, ease of use with various APIs, versatility with multiple libraries, and superior processing speed.<\/p>"},{"question":"What are the types of Apache Spark?","answer":"<p>Apache Spark can be categorized into batch processing, stream processing, machine learning, and graph processing.<\/p>"},{"question":"What are the ways to use Apache Spark?","answer":"<p>Apache Spark finds applications in data analytics, machine learning, recommendation systems, and real-time event processing. Some common challenges include memory management, data skew, and cluster sizing.<\/p>"},{"question":"How does Apache Spark compare to Hadoop MapReduce?","answer":"<p>Apache Spark excels in in-memory and iterative processing, supports real-time analytics, offers a more diverse ecosystem, and is user-friendly compared to Hadoop MapReduce's disk-based batch processing and limited ecosystem.<\/p>"},{"question":"What are the future perspectives for Apache Spark?","answer":"<p>The future of Apache Spark looks promising with ongoing optimizations, deeper integration with AI, and advancements in real-time analytics.<\/p>"},{"question":"How can proxy servers be associated with Apache Spark?","answer":"<p>Proxy servers can enhance Apache Spark's security and performance by providing load balancing, caching, and acting as intermediaries between users and Spark clusters.<\/p>"}]},"_links":{"self":[{"href":"https:\/\/oneproxy.pro\/ir\/wp-json\/wp\/v2\/wiki\/475880","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/oneproxy.pro\/ir\/wp-json\/wp\/v2\/wiki"}],"about":[{"href":"https:\/\/oneproxy.pro\/ir\/wp-json\/wp\/v2\/types\/wiki"}],"version-history":[{"count":0,"href":"https:\/\/oneproxy.pro\/ir\/wp-json\/wp\/v2\/wiki\/475880\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/oneproxy.pro\/ir\/wp-json\/wp\/v2\/media\/467620"}],"wp:attachment":[{"href":"https:\/\/oneproxy.pro\/ir\/wp-json\/wp\/v2\/media?parent=475880"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}