مقالات

تاريخ سبارك الأول - التاريخ

تاريخ سبارك الأول - التاريخ

شرارة أنا

(العميد: t. 310 ؛ Ibp. 103 '؛ ب. 25'4N ؛ dph. 12'8 "؛ cpl. 90 ؛
أ. 10 18-pdr. سيارة ، عدد 2 طويل 18 قرشًا).

تم شراء أول سبارك - وهو قرصان تم بناؤه عام 1813 في ساغ هاربور ، لونغ آيلاند ، نيويورك - من قبل البحرية في بالتيمور في عام 1814 للخدمة في الحرب مع إنجلترا. ومع ذلك ، انتهت الحرب قبل أن يصل العميد إلى البحر للخدمة الفعلية ضد البحرية الملكية.

غادر سبارك ، بقيادة الملازم توماس جامبل ، نيويورك في 20 مايو 1815 وأبحر إلى البحر الأبيض المتوسط ​​لعمليات في سرب العميد البحري ستيفن ديكاتور ضد قراصنة الجزائر. وصلت إلى جبل طارق في 15 يونيو ، وبعد يومين ، ساعدت في العمليات التي أسفرت عن الاستيلاء على الرائد الجزائري ، ماشودة ، بالقرب من كيب دي جات. في التاسع عشر ، ساعدت Epervier و Torch و Spitfire في تشغيل Estedo على الشاطئ حيث تم احتجازها والقبض عليها. بعد الإبحار في البحر الأبيض المتوسط ​​خلال الصيف ، أبحر سبارك عائداً إلى الوطن في 6 أكتوبر في سرب بقيادة العميد البحري ويليام بينبريدج ووصل إلى نيوبورت ، في 15 نوفمبر وتم وضعه للإصلاحات.

أُعيد تكليفه في 1 يوليو 1816 ، وأبحر العميد مرة أخرى إلى البحر الأبيض المتوسط ​​في 6 سبتمبر حاملاً رسالة من رئيس الولايات المتحدة في يوم الجزائر العاصمة وأمر بتعيين العميد البحري إسحاق تشونسي ومفوضين القنصل العام شالتر للتفاوض من أجل السلام. أبحر شرارة في البحر الأبيض المتوسط ​​حتى عودته إلى الوطن في عام 1821.

في خريف عام 1821 ، غادر سبارك ، بقيادة الملازم جون إتش إلتون ، بوسطن متوجهاً إلى منطقة البحر الكاريبي للقيام بعمليات ضد القراصنة. في يناير 1822 ، استولى على سفينة شراعية هولندية وأحضرها وسبعة قراصنة إلى تشارلستون ، ساوث كارولينا ، لمحاكمتهم. عادت إلى منطقة البحر الكاريبي وأمضت أكثر من ثلاث سنوات في قمع القراصنة. عاد العميد إلى المنزل في عام 1825 وتم بيعه في نيويورك عام 1826.


يقوم كل SparkContext بتشغيل Web UI ، افتراضيًا على المنفذ 4040 ، والذي يعرض معلومات مفيدة حول التطبيق. هذا يشمل:

  • قائمة بمراحل ومهام المجدول
  • ملخص لأحجام RDD واستخدام الذاكرة
  • المعلومات البيئية.
  • معلومات حول المنفذين قيد التشغيل

يمكنك الوصول إلى هذه الواجهة ببساطة عن طريق فتح http: // & ltdriver-node & gt: 4040 في متصفح الويب. إذا كانت SparkContexts متعددة تعمل على نفس المضيف ، فسوف ترتبط بالمنافذ المتتالية التي تبدأ بـ 4040 (4041 ، 4042 ، إلخ).

لاحظ أن هذه المعلومات متاحة فقط لمدة التطبيق افتراضيًا. لعرض واجهة مستخدم الويب بعد حدوث ذلك ، قم بتعيين spark.eventLog.enabled إلى true قبل بدء التطبيق. يؤدي هذا إلى تكوين Spark لتسجيل أحداث Spark التي تقوم بترميز المعلومات المعروضة في واجهة المستخدم للتخزين المستمر.


تاريخنا

خلق وظائف مستدامة للشباب في الدول الهشة لمدة 25 عامًا. اقرأ قصتنا.

تضامن الشباب في العمل
في عام 1994 ، دخلت حرب البوسنة عامها الثاني. على الرغم من استمرار جرائم الحرب والفظائع ، إلا أن التغطية الإعلامية الغربية كانت تتلاشى بسرعة. قامت مجموعة من الطلاب الشباب في أمستردام بتشكيل منظمة التضامن الشبابي مع يوغوسلافيا السابقة (سبارك) لتسليط الضوء على ما يجري. وقادوا مسيرات ضخمة في شوارع العاصمة الهولندية مرددين دعوتهم لإنهاء العنف.

1996-2008

خلق فرص للتعلم

بعد حرب البوسنة وتفكك يوغوسلافيا السابقة ، كان الشباب حريصين على تولي زمام الأمور بأيديهم وإعادة بناء بلادهم. ومع ذلك ، فقد افتقروا إلى الفرص التعليمية للقيام بذلك.

بدأت سبارك في تنظيم أول مدارس صيفية دولية في المنطقة. سافر المحاضرون من جميع أنحاء العالم لتعليم الشباب من كلا جانبي الصراع في خضم نقص الطاقة ، ونقص الإقامة المناسبة والاضطرابات.

نمو الأعمال في فلسطين

بينما ازدهرت المدارس الصيفية في توزلا وبريشتينا وميتروفيتشا ، على بعد 2000 كيلومتر شرق البلقان ، كان الخريجون الشباب في الضفة الغربية وقطاع غزة يواجهون فرص عمل غير مثمرة.

من خلال توحيد الجهود مع المنظمات المحلية ، أنشأت سبارك حاضنات أعمال لمساعدة الشركات الناشئة الشابة على الازدهار وخلق وظائف جديدة في بيئة بها نسبة بطالة تبلغ 70٪.

المزارعين الريفيين لأصحاب المشاريع الزراعية

وسط الصراع العنيف المتقطع وعدم الاستقرار الاقتصادي ، رأت سبارك أنه في بلدان مثل اليمن وجنوب السودان ، أدى تحسين القطاع الزراعي إلى محاربة البطالة وتعزيز الأمن الغذائي الذي تشتد الحاجة إليه. حولت برامج دعم الأعمال التجارية الزراعية ، المصممة خصيصًا لسلاسل القيمة المحلية ، مزارعي الكفاف إلى أعمال تجارية وتعاونيات مشغولة.

10،000 منحة دراسية

لا يزال الصراع في سوريا يهدد وصول الشباب إلى التعليم والعمل اللائق.

واستجابة لذلك ، دخلت سبارك في شراكة مع مئات من معاهد التعليم والمنظمات الحكومية والمحلية لتقديم منح دراسية للتعليم العالي والمهني للشباب في البلدان المضيفة المجاورة.

تعد سبارك الآن أكبر مزود للمنح الدراسية للاجئين السوريين في الشرق الأوسط.

اليوم

بعد 25 عامًا من التكيف مع السياقات الصعبة ، أصبحت سبارك خبيرة في ست خدمات رئيسية تخلق مسارات للتوظيف في المناطق الهشة والمتأثرة بالصراع.

من خلال توحيد القطاعين العام والخاص وصانعي السياسات والمنظمات غير الحكومية ، نوفر للشباب الأدوات التي يحتاجونها للنجاح في المناطق المتأثرة بالصراع وأزمة المناخ والنزوح.


محتويات

قسم قانون الخدمات البريدية لعام 1987 مكتب بريد نيوزيلندا آنذاك إلى New Zealand Post Limited (تداول باسم NZPost) و Telecom New Zealand Limited (المتداول باسم Telecom) و Post Office Bank Limited (المتداول باسم PostBank ، والذي تم بيعه إلى ANZ في عام 1989) وجميع ثلاث صناعات تم تحريرها تدريجياً. اعتبر البعض أن سعر بيع Telecom منخفض للغاية ، نظرًا لأن Telecom كانت تحتكر جميع خطوط الهاتف في نيوزيلندا في ذلك الوقت. [8]

تعديل التسعينيات

في عام 1990 ، تم بيع شركة Telecom إلى شركتي اتصالات في الولايات المتحدة ، هما Verizon Communications (المعروفة سابقًا باسم Bell Atlantic) و Ameritech ، مقابل 4.25 مليار دولار نيوزيلندي. [9] بعد خصخصة Telecom ، تم وضع اتفاقية Kiwi Share ، والتي تضمنت شرطًا بأن الشركة تحتفظ بالمكالمات المحلية المجانية للعملاء المقيمين. [10]

في عام 1991 ، تم إدراج شركة Telecom في بورصات نيوزيلندا وأستراليا ونيويورك. في العام التالي ، نفذت شركة Telecom وصلة كابل ألياف ضوئية بقيمة 200 مليون دولار نيوزيلندي بين أستراليا ونيوزيلندا. أيضًا في عام 1991 ، تم تعيين رودريك دين الرئيس التنفيذي للشركة. ثم في عام 1993 خفضت شركة Ameritech و Bell Atlantic حصتها في Telecom إلى 49.6 ٪ مجتمعة ، وأنشأت BellSouth New Zealand Limited (BellSouth) ، التي استحوذت عليها شركة Vodafone لاحقًا ، أول شبكة للهاتف المحمول للتنافس مع Telecom.

توصلت شركة Clear Communications إلى اتفاقية مع Telecom في عام 1995 بشأن الترابط المحلي للخدمة. في عام 1995 أيضًا ، أنشأت شركة Telecom شركة First Media Ltd لتطوير شبكة تلفزيون الكابل عبر أوكلاند وويلينجتون ، والتي تسمى First TV. في عام 1996 ، أنشأت Telecom مقسمًا هاتفيًا في الولايات المتحدة لحركة المرور الدولية ، وأطلقت Xtra ، وهي أكبر مزود خدمة إنترنت في نيوزيلندا اليوم. [ بحاجة لمصدر ]

شهد عام 1997 قيام شركة Telecom بإعادة شراء أسهمها بقيمة مليار دولار نيوزيلندي. في العام التالي ، باعت Ameritech حصتها البالغة 24.8٪ في طرح عام دولي ، وأصدرت شركة Bell Atlantic سندات قابلة للتحويل إلى أسهم Telecom التي تمتلكها. أيضًا في عام 1998 ، أعلنت شركة Southern Cross Cables Limited (نصف مملوكة لشركة Telecom) عن خطط لبناء كابل ألياف ضوئية يربط نيوزيلندا بأستراليا وأمريكا الشمالية ، واشترت شركة Vodafone New Zealand شركة BellSouth وبدأت حملة لجذب عملاء Telecom إلى شبكتها. [ بحاجة لمصدر ]

في ديسمبر 1997 [11] تم تعيين باتريشيا ريدي في مجلس إدارة الاتصالات. وظلت عليها حتى عام 2008. [12] في مارس 2016 بصفتها السيدة باتسي ريدي ، تم تعيينها الحاكم العام المعين لنيوزيلندا.

في عام 1999 ، أسست Telecom وجودًا في أستراليا ، حيث اشترت 78٪ من AAPT ، ثالث أكبر شركة اتصالات في أستراليا. قامت شركة Telecom بترقية شبكة الهاتف العمومي على مستوى البلاد إلى تقنية البطاقة الذكية. تم إطلاق خدمة الإنترنت ذات النطاق العريض الخاصة بشركة Telecom القائمة على تقنية ADSL ، والتي تسمى JetStream ، وتم نشرها تدريجياً في التبادلات المحلية. في هذا الوقت أيضًا ، بدأت Telecom في فرض رسوم على العملاء المتصلين بالإنترنت باستخدام رقم اتصال هاتفي محلي ، مما أجبر جميع مزودي خدمة الإنترنت في نيوزيلندا على التغيير إلى رقم 0867. نتج عن ذلك شكاوى من أن هذا يعد انتهاكًا لاتفاقية Kiwishare الخاصة بشركة Telecom حيث يُسمح للعملاء المقيمين بإجراء مكالمات محلية مجانية. انتهى العقد مع تعيين تيريزا جاتونج مديرًا تنفيذيًا جديدًا للاتصالات ، مع انتقال رود دين إلى منصب رئيس مجلس الإدارة. [ بحاجة لمصدر ]

2000s تحرير

في عام 2000 ، وقعت Xtra على 300000 عميل لها. كما رفعت شركة Telecom حصتها في AAPT إلى 100٪.

ظهرت أدلة في أوائل عام 2002 على أن شركة Telecom قد استغلت معيارًا محاسبيًا غير مدروس أو تم القيام به بطريقة احتيالية (FRS38) لتضخيم أرباحها لعام 2001 بنحو 263 مليون دولار. [13] يتطلب هذا المعيار من الشركات القابضة دمج أرباح وخسائر الشركات الزميلة في حسابات مجموعتها عن طريق "محاسبة حقوق الملكية" إلا عندما تكون الشركة الزميلة معسرة. تم اعتبار الإفلاس خطأ على أنه دليل جوهري على أن الشركة القابضة لن تشارك في أرباح وخسائر الشركات الزميلة. دفعت الشركة الزميلة Southern Cross Cables إلى Telecom 263 مليون دولار كأرباح حسب (الملاحظة 2 من) حسابات Telecom السنوية لعام 2001 ، [14] 200m دولار أمريكي وفقًا للحسابات السنوية لـ Southern Cross. [15] افتتحت شركة Southern Cross للعمل (المحدود) في نوفمبر 2000 وكان دخلها من العمليات حتى 30 يونيو 2001 فقط 13 مليون دولار أمريكي (55 مليون دولار أمريكي لعام 2002). كانت شركة Southern Cross معسرة بمقدار 24 مليون دولار أمريكي في 30 يونيو 2000 وزاد هذا المبلغ إلى 280 مليون دولار أمريكي في يونيو 2001 نتيجة توزيعات الأرباح والنفقات (الصافية) الأخرى (328 مليون دولار أمريكي في عام 2002). تم التعامل مع توزيعات الأرباح على أنها دخل في حسابات شركة Telecom ، ولم يكن هناك شيء في معيار المحاسبة المصرى رقم (28) للقول بأنه لا يجب أن تكون ، على الرغم من أن هذا التضمين لم يخالف الشرط العام المتمثل في أن الحسابات تقدم وجهة نظر عادلة.

في عام 2003 ، تم إطلاق شعار جديد. [16] [ أفضل مصدر مطلوب ]

في عام 2004 ، اشترت شركة Telecom شركة Gen-i Ltd (في مايو) وشركة Computerland Ltd (في سبتمبر). كما فازت الشركة بجائزة روجر لأفضل شركة عبر الوطنية تعمل في نيوزيلندا.

في عام 2005 ، قدمت شركة Telecom "Bitstream" ، وهي خدمة ADSL سعة 256 كيلوبت تُباع بأسعار الجملة (بنسبة 10٪ تقريبًا أقل من سعر التجزئة) لمزودي خدمة الإنترنت الآخرين. وحققت شركة Telecom أيضًا أرباحًا بلغت 916 مليون دولار نيوزيلندي. كما أطلقت الشركة أيضًا متجر بيع بالتجزئة على الإنترنت فيريت مع حوالي 150 من تجار التجزئة. [17]

  • 9 مايو: تم إصدار مقطع صوتي تم تسجيله في 2 مارس بمشاركة تيريزا جاتونج ، الرئيس التنفيذي لشركة Telecom ، والتي اعترفت باستخدام الارتباك كأداة تسويق رئيسية في الصناعة. كما رفض تسجيل مارس الحكومة النيوزيلندية ووصفها بأنها "أذكى من أن تفعل أي شيء غبي" فيما يتعلق بالتنظيم. [18]
  • أواخر مايو: استقال رودريك دين من منصب رئيس مجلس الإدارة ، وحل محله واين بويد في الشهر التالي.
  • يوليو: تم تعيين مات كروكيت في منصب الرئيس التنفيذي لقسم البيع بالجملة الذي تم تشكيله حديثًا في شركة Telecom. [19]
  • تم تغيير العلامة التجارية لجميع فروع Computerland في جميع أنحاء نيوزيلندا إلى Gen-i.
  • 16 كانون الثاني (يناير): تقدمت جمعية أمناء المكتبات في نيوزيلندا بشكوى بخصوص إعلان للاتصالات حيث صرح 3 أطفال صغار في المدارس أن "الأطفال البكم فقط هم من يقرأون الكتب ، والأطفال الأذكياء لديهم النطاق العريض". في الأصل صرحت شركة Telecom بأن هذه هي آراء الأطفال الصغار وليس Telecom وكان الإعلان غير مكتوب ، وفي وقت لاحق من ذلك الأسبوع ، اختارت Telecom تعديل الإعلان لإزالة التعليقات التي أدلى بها الأطفال. [بحاجة لمصدر]
  • 19 يناير: أفيد أن Paritai Drive، Orakei ، أحد أغنى الشوارع في أوكلاند ، لا يزال غير قادر على تلقي خدمة النطاق العريض ، وهناك العديد من المناطق الأخرى المأهولة بالسكان في جميع أنحاء نيوزيلندا لا تزال غير قادرة على استقبال النطاق العريض. قامت شركة Opposition Woosh Wireless باختبار خدمتهم على الفور في المنطقة ومنحت السكان الفرصة للانضمام إلى خدمة النطاق العريض اللاسلكي الخاصة بهم. [20] [21]
  • 5 فبراير: أعلنت شركة Telecom أنها ستبدأ في طرح ADSL2 + اعتبارًا من مارس 2007 ، بعد مرور أكثر من عام على إعلانها في الأصل عن طرحها.
  • 31 مارس: أغلقت شركة Telecom شبكة 025 D-AMPS / TDMA القديمة مع تغيير جميع الهواتف 025 إلى 027 (CDMA).
  • مايو 2007: أجرت شركة British Telecom مناقشات مع حكومة نيوزيلندا بشأن احتكار شركة Telecom للتحكم في شبكة النطاق العريض النيوزيلندية. قبل ثلاث إلى أربع سنوات ، كانت شركة British Telecom في وضع مماثل لتلك التي أصبحت NZ Telecom موجودة الآن في شبكة النطاق العريض البريطانية التي تم تفكيكها منذ ذلك الحين ، وحكومة نيوزيلندا حريصة على تعلم وربما نسخ نموذج التطوير / التنظيم / الاستثمار المستخدم من قبل الشركة البريطانية.
  • صرحت غرفة التجارة في أوكلاند علنًا أنه إذا لم تستثمر شركة Telecom في شبكة عالية السرعة من الجيل التالي ، يمكن مقارنتها بشبكة الدول الغربية الأخرى ، فإنها ستمول خدمة خاصة تعتمد على الألياف الضوئية في نطاق سرعة 100 ميغا بت. ستكون التغطية المقترحة لهذا على بعد 200 متر من مسار يمتد جنوبًا من أوكلاند سي بي دي (يقع للسماح لأكبر عدد ممكن من الشركات بالاتصال). سيتم تقديم اتصال لأي شركة أو فرد خاص ضمن هذا النطاق.
  • 28 يونيو: أعلنت شركة Telecom أن بول رينولدز ، الرئيس التنفيذي لشركة BT Wholesale ، قد تم اختياره كرئيس تنفيذي جديد ، ليبدأ العمل في 27 سبتمبر. [22] تم تعيين Simon Moutter كمدير تنفيذي بالإنابة في هذه الأثناء. [23]
  • 30 يونيو: تنحي تيريزا جاتونج من منصبها كرئيس تنفيذي ، [24] مع دفع مبلغ 5.125 مليون دولار. [25]
  • 27 سبتمبر: بدأ الدكتور بول رينولدز منصب الرئيس التنفيذي لشركة Telecom.
  • 21 نوفمبر: تم تعيين مارك راتكليف ، الرئيس التنفيذي للعمليات للتكنولوجيا ، الرئيس التنفيذي لشركة Telecom التي سيتم فصلها قريبًا عن قسم الشبكة.
  • 16 يناير: تليكوم تعلن عن تشكيل Chorus ، قسم البنية التحتية للشبكات الجديد. [26] [27]
  • 31 مارس: تم تقسيم شركة Telecom رسميًا إلى ثلاثة أقسام (Chorus و Telecom Wholesale و Telecom Retail)
  • 1 أبريل: تم تعيين روس هولدن ، زميل رينولدز في شركة BT ، في منصب المدير المالي. يحل محل ماركو بوغويفسكي ، الذي انضم إلى Infratil.
  • 12 يناير: تليكوم تعلن عن إغلاق متجرها للبيع بالتجزئة عبر الإنترنت فيريت. [17]
  • أغسطس: نشأ نزاع صناعي بين Chorus واتحاد الهندسة والطباعة والتصنيع بعد منح عقود الخدمة في منطقتي أوكلاند ونورثلاند لشركة Visionstream الأسترالية ، التي خططت لتغيير عقود عمل الفنيين إلى نموذج مقاول تابع. [28] [29]

في أكتوبر تم الإعلان عن شعار جديد.

2010s تحرير

  • تشرين الثاني (نوفمبر): انتقلت شركة Telecom إلى مقرها العالمي الجديد في شارع فيكتوريا في منطقة الأعمال المركزية بأوكلاند. سيكلف المطور 280 مليون دولار ، وسيتألف من 2700 موظف وسيكون أكبر تحرك للشركة في تاريخ نيوزيلندا.
  • 24 مايو: أعلنت شركة Crown Fibre Holdings أن شركة Telecom قد نجحت في الشراكة مع الحكومة لبناء شبكة ألياف ضوئية.
  • 9 يونيو: كشفت مجلة National Business Review أنه في وثائق مكتب المراجعة الداخلية للحسابات ، اعتبرت وزارة الشؤون الداخلية أن رسالة نصية واحدة على الأقل أرسلتها شركة Telecom تنتهك قانون الرسائل الإلكترونية غير المرغوب فيها لعام 2007. [30]
  • 1 ديسمبر: تخلت شركة Telecom عن شركة Chorus ، قسم البنية التحتية للشبكات ، في صفقة واحدة مقابل خمسة أسهم ، وأصبحت شركة Chorus شركة مدرجة بشكل منفصل.
  • 9 ديسمبر: Telecom تعلن عن بيع AAPT مقابل 450 مليون دولار أسترالي [31]
  • 21 فبراير: أعلنت Telecom عن تغيير اسمها إلى "Spark" ، والذي دخل حيز التنفيذ في 8 أغسطس 2014 [32] ليعكس بشكل أفضل اتجاه الشركة وتطلعاتها الجديدة. [7]
  • 25 يونيو 2014: أعلنت Spark عن Lightbox ، وهي خدمة بث الأفلام والبرامج التلفزيونية عبر الإنترنت ، في منافسة مع Netflix و SkyTV. [33] تم إطلاق Lightbox في 27 أغسطس 2014. [34]
  • 8 أغسطس: شركة Telecom تغير اسمها إلى Spark. تم تغيير العلامة التجارية للشركات التابعة الفردية للشركة لتعكس تغيير الاسم مثل Telecom Mobile تصبح Spark Mobile ، مؤسسة Telecom تصبح Spark Foundation ، Gen-i تم تغيير علامتها التجارية إلى Spark Digital. احتفظت الشركة بالشعار الموجود على شكل نجمة مع كل قسم باستخدام لون مختلف للشعار مثل الفضة لـ Spark New Zealand والبرتقالي أو الوردي لمحلات Spark Home & amp Mobile ، والأخضر لـ Spark Business والأرجواني لـ Spark Digital.
  • 5-7 سبتمبر: واجهت Spark انقطاعات في جميع أنحاء البلاد بسبب هجوم رفض الخدمة ، والذي يُعتقد أنه نشأ إلى حد كبير من البرامج الضارة التي تم تثبيتها على أجهزة كمبيوتر العملاء عندما نقروا على روابط ضارة لصور المشاهير التي تم تسريبها في أغسطس. [35]
  • 12 أغسطس: أصدرت Spark خدمة عملاء جديدة قائمة على السحابة تسمى Morepork ، والتي تقدم خدمات أمان منزلية ذكية. وقد مكّن ذلك المستهلكين من شراء أجهزة وخدمات أمنية من خلال اشتراك شهري لمراقبة المنزل مرتبط بهواتفهم المحمولة. [36]
  • 7 ديسمبر: اشترت Spark شركة خدمات تكنولوجيا المعلومات التي تتخذ من الجزيرة الجنوبية مقراً لها ، وهي Computer Concepts Ltd ، مقابل 50 مليون دولار نيوزيلندي. [37]
  • 14 مارس: أطلقت Spark خدمة البث الرياضي القائمة على الاشتراك سبارك سبورت. ستتنافس الخدمة مع Sky Sport (نيوزيلندا) التي كانت في ذلك الوقت تحتكر حقوق الرياضة التلفزيونية المدفوعة الأجر في نيوزيلندا.
  • 19 ديسمبر: أُعلن أن Spark ستبيع خدمة البث المباشر Lightbox لشركة Sky Television ، التي تعتزم دمج Lightbox في خدمة البث المباشر الخاصة بها عبر الإنترنت Neon في عام 2020. بعد الاندماج ، ستشترك Spark مع Sky لجعل الخدمة متاحة لعملاء Spark من خلال عروض الترفيه الخاصة بشركة الاتصالات. [38] [39] [40]

تعديل شبكة المحمول

بدأت Telecom خدمات الشبكة الخلوية الأولى باستخدام AMPS في عام 1987. وانتقل هذا إلى الخدمات الرقمية D-AMPS TDMA في أوائل التسعينيات. أعطت الخدمة في النطاق 800 ميجاهرتز تغطية جغرافية رائعة ووضعت معيارًا لأداء الخدمة لسنوات عديدة.

في عام 1996 ، قدمت شركة Telecom شبكة خلوية للبيانات اللاسلكية المبتكرة والأولى من نوعها تُعرف باسم CDPD (حزمة البيانات الرقمية الخلوية) والتي وفرت اتصالات IP مع إمكانية التنقل. تم تقديمهم إلى السوق من قبل مدير المنتج ، ديفيد بيل ، ونجحوا في أول اتصالات أجهزة iOT في المنطقة التي تربط من بين أشياء أخرى ، وآلات بيع Coke's Vending ، و NZ Post Couriers وبيانات تتبع الطرود والقياس عن بعد من سباقات كأس الأمريكتين لليخوت في أوكلاند لتغذية خدمة رسومات تلفزيون في الوقت الفعلي.

وصل تيليكوم موبايل ، قسم الهاتف المحمول للاتصالات ، إلى 500000 من عملاء الهاتف المحمول المتصلين بشبكتها في عام 1998 ، والتي تضاعفت إلى مليون عميل بحلول عام 2000. في عام 2005 ، كشف مخترق يُدعى ^ god عن ثغرة أمنية في شبكة الهاتف المحمول ، مما سمح للجمهور بالوصول إلى ما يقرب من البريد الصوتي لأي شخص استجابةً للمخاوف المتعلقة بالخصوصية والأمان ، تم حل مشكلة الشبكة هذه.

في 31 مارس 2007 ، تم إغلاق الشبكة الخلوية 025 D-AMPS ("TDMA"). [41] ثم في 8 يونيو من ذلك العام ، أعلنت شركة Telecom Mobile عن خططها لبناء شبكة هجينة W-CDMA / UMTS-CDMA بسرعة 850 ميجاهرتز ، [42] استنادًا إلى تقنية WCDMA HSPA ، لتحل محل شبكة CDMA EV-DO الحالية. . في 29 مايو 2009 ، أطلقت Telecom شبكتها الجديدة ، التي تحمل علامة "XT" ، للجمهور. [43]

في كانون الأول (ديسمبر) 2009 [44] وفبراير 2010 ، [45] [46] شهدت شبكة XT Mobile الجديدة التابعة لشركة Telecom إخفاقات بارزة للعديد من العملاء في مواقع من جنوب تاوبو ، بسبب فشل وحدة التحكم في شبكة الراديو في كرايستشيرش. ونتيجة لخسارة خدمة الاتصالات عرضت حزمة تعويضات بقيمة خمسة ملايين دولار لعملائها. [47]

في أبريل 2010 ، أصدرت Telecom أول هاتف يعمل بنظام Android على شبكة XT Mobile Network ، LG GW620.

في 31 يوليو 2012 ، تم إغلاق شبكة الهاتف المحمول Telecom CDMA. [48]

في سبتمبر 2013 ، أطلقت شركة Telecom رسميًا خططًا وعلامات تجارية جديدة لشركة Ultra Mobile. تتضمن هذه الخطط ترقية مجانية لشبكة 4G (تم توفير 4G لاحقًا في نوفمبر 2013) مع 1 جيجابايت من البيانات يوميًا من نقاط اتصال WiFi الساخنة. [49] في أكتوبر 2013 ، سعت شركة Telecom للحصول على إذن للحصول على حقوق إدارة لأجزاء من طيف 700 ميجاهرتز بقصد المساعدة في تطوير شبكة 4G للهاتف المحمول. [50]

تنظيم الصناعة وإعادة هيكلة الشركة تحرير

في عام 2000 ، أجرت حكومة نيوزيلندا مراجعة شاملة للنظام التنظيمي في صناعة الاتصالات. بعد ذلك ، في عام 2001 ، تم تمرير قانون الاتصالات ، والذي حدد ، من بين أمور أخرى ، دور مفوض الاتصالات.

في قرار اتخذته الحكومة في 3 مايو 2006 ، اضطرت شركة Telecom إلى تفكيك الحلقة المحلية ، لتوفير "الوصول إلى الإنترنت السريع ذي النطاق العريض وبأسعار تنافسية". [51] أثر القرار بشكل كبير على حصة الشركة في السوق ، [52] وسمح للمنافسين (مثل TelstraClear و Orcon و Ihug) بتقديم خدمات اتصالات واسعة النطاق وخدمات اتصالات أخرى في جميع أنحاء نيوزيلندا عن طريق تثبيت معداتهم الخاصة في البورصات. [53] [54] تم تسريع الإعلان عن هذا القرار قبل الموعد المحدد ، حيث تم تسريب الوثائق إلى شركة Telecom التي أبلغت الحكومة بالتسريب. أفادت الأنباء على نطاق واسع أن الحكومة كانت تنوي الإعلان خلال موازنة 2006. أشاد معظم منافسي Telecom والعديد من المعلقين المستقلين مثل InternetNZ و Paul Budde بالقرار ، مع معارضة الفصل من Business Roundtable و Federated Farmers و Bruce Sheppard (الذي يمثل مساهمي Telecom). تم تقديم تشريع لتمكين التغييرات التنظيمية. أيدت ثلاثة أحزاب سياسية أخرى (نيوزيلندا أولاً ، [55] حزب الخضر [56] والمستقبل المتحد) [57] القرار ، الذي سيعطي الحكومة ما لا يقل عن 66 صوتًا إذا لم تكن هناك أصوات ضد خط الحزب. عارض الحزب الوطني المعارض الرئيسي في البداية قرار الفصل ، لكنه صوت لاحقًا لصالحه بعد جلسة استماع مختارة للجنة. ترك هذا حزب ACT وحده في معارضة القرار.

ثم تأثرت الشركة بسلسلة من القرارات الحكومية الأخرى. أولاً ، في أوائل يونيو 2006 ، حكمت لجنة التجارة في القضية الخلافية المتعلقة برسوم إنهاء الهاتف المحمول ، معلنة أنه يمكن توصيل المكالمات بين خط أرضي وهاتف محمول داخل حدود محددة جغرافيًا بدون رسوم إنهاء. سمح هذا الحكم لشركة Vodafone New Zealand بإنشاء منتج للهاتف المحمول يمكن أن يوفر أيضًا مكالمات محلية مجانية. بعد ذلك ، منحت لجنة التجارة اثنين من منافسي Telecom ، CallPlus و ihug ، الوصول إلى خدمة Bitstream غير مقيدة وغير مجمعة ، والتي من شأنها أن تسمح لهما بتقديم خدمات النطاق العريض التنافسية. [ بحاجة لمصدر ]

في 27 يونيو 2006 ، أعلنت الشركة أنها ستفصل طواعية أعمالها إلى وحدتي أعمال تشغيليتين منفصلتين - البيع بالجملة والتجزئة. [58] قدمت الحكومة مشروع قانون تعديل الاتصالات في نوفمبر 2006 لإجبار شركة Telecom على فتح شبكتها أمام المنافسين. قام مشروع القانون بتقسيم الاتصالات رسميًا إلى ثلاث وحدات أعمال اعتبارًا من 31 مارس 2008 ، مع فصل الوصول إلى الشبكة عن وحدات البيع بالجملة والتجزئة. [59]

في يناير 2012 أطلقت شركة Telecom شبكة هاتف نقال جديدة تستهدف سوق الشباب المسماة نحيف موبايل [60]

في 28 مارس 2013 ، أعلنت شركة Telecom أنها ستخفض مستويات الموظفين بفرض قيود على نشاط التوظيف والتسريح عن العمل. تبع ذلك تكهنات النائب كلير كوران بأنه سيتم إلغاء ما يصل إلى 1500 وظيفة من الشركة. [61]

Spark هي أكبر مزود خدمة إنترنت في نيوزيلندا. كان اسمه سابقًا Xtra. ثاني أكبر مزود خدمة إنترنت في سوق نيوزيلندا هو Vodafone NZ ، وهو المركز الذي اكتسبته عندما اشترت TelstraClear في عام 2012. [62] [ أفضل مصدر مطلوب ]

تقدم Spark خط مشترك رقمي غير متماثل (ADSL) ، وخط مشترك رقمي عالي معدل البت (VDSL) وألياف إلى النطاق العريض للخط الثابت (FTTP). يمكن لعملاء FTTP اختيار إما 30/10 ميجابت / ثانية ، 100/20 ميجابت / ثانية ، 200/20 ميجابت / ثانية ، 200/200 ميجابت / ثانية ، أو في مناطق محددة ، 900/400 ميجابت / ثانية السرعة القصوى (أسفل / أعلى ) سرعات تنزيل عملاء ADSL و VDSL تقتصر فقط على ما يمكن لخطهم ومعداتهم التعامل معها. يقدم الثلاثة خططًا محدودة البيانات وغير محدودة. قد يختار العملاء المقيَّدين بالبيانات إما الدفع الإضافي لكل جيجابايت (أو جزء منه) على حد أقصى للبيانات ، أو خفض سرعتهم مرة أخرى إلى 128 كيلوبت / ثانية مجانًا بمجرد تجاوزهم الحد الأقصى. الخطط غير المحدودة ليس لها حدود قصوى للبيانات.

Spark Ultra Mobile هي ثاني أكبر مشغل للهاتف المحمول في نيوزيلندا من حيث الحصة السوقية ، بعد فودافون. [63] تم تصنيف شبكة الهاتف المحمول التابعة لشركة Telecom باسم "XT" ، وتعمل بسرعة 850 ميجاهرتز على مستوى الدولة (مع تراكب 2100 ميجاهرتز في المناطق الحضرية) ، وتوفر اتصال بيانات 3G أينما كانت التغطية.

قامت شركة Telecom في الأصل بتشغيل شبكة المحمول TDMA (AMPS ، Digital D-AMPS / TDMA) التي حلت محلها شبكة CDMA الخاصة بها. تم إيقاف تشغيل شبكة TDMA في 31 مارس 2007 ، وانتقل معظم عملائها إلى CDMA. تم تسويق شبكة CDMA EV-DO على أنها T3G ، وهو نظام متنقل من الجيل الثالث بسعة 2 ميجابايت. أعلنت شركة Telecom في 8 يونيو 2007 عن نيتها لبناء شبكة W-CDMA / UMTS ، [42] لتُسمى XT Mobile Network ، استنادًا إلى تقنية WCDMA HSPA ، لتحل محل شبكة CDMA EV-DO الحالية. تم إطلاق الشبكة في 29 مايو 2009. تم اختيار مواصفات XT لتتماشى مع عدد من الشبكات الأخرى في أقاليم ما وراء البحار ، مثل Telstra's Next G (في أستراليا) علاوة على ذلك ، يمكن أن تغطي خدمات 850 MHz مسافات جغرافية أكبر و تخترق المباني بشكل أكثر فاعلية من الترددات العالية. عملت شبكة CDMA بالتوازي مع XT حتى تم إغلاقها في 31 يوليو 2012.

استخدمت شبكة TDMA بادئة الهاتف المحمول 025 ، باستخدام مزيج من أرقام المشتركين المكونة من ستة وسبعة أرقام. مع التبديل إلى CDMA ، انتقلت Telecom إلى البادئة 027 وقامت بتوحيد أرقام المشتركين إلى سبعة أرقام ، مضيفةً 4 إلى بداية الأرقام القديمة المكونة من ستة أرقام.

أرقام العملاء وحصة السوق تحرير

في عام 2005 أطلقت Telecom أول شبكة 3G في نيوزيلندا ، باستخدام الاسم التجاري T3G. نظرًا لكونها الأولى في سوق 3G ، جنبًا إلى جنب مع التسويق القوي وحزمة الرسائل النصية بقيمة 10 دولارات شهريًا ، تمكنت Telecom من استعادة بعض حصتها في السوق من Vodafone. في نوفمبر 2005 ، أبلغت شركة Telecom عن 72000 عميل جديد للهاتف المحمول ، مقارنة بـ 27000 عميل لشركة Vodafone.

في عام 2009 ، انخفضت حصة الهاتف المحمول بشكل أكبر مع دخول الوافد الجديد درجتين إلى السوق ، فقدت كل من فودافون وتيليكوم عملاء (25000 و 19000 على التوالي) ، وقد فقدت شركة Telecom بعضًا منها بسبب صورتها غير الموثوقة بعد انقطاعها. استجابة لذلك ، زادت شركة Telecom تسويقها وحسّنت عروض خططها.

يوضح ما يلي أرقام العملاء ومعلومات حصة السوق الخاصة بشركة Telecom Mobile ، والتي تغطي كل من شبكات TDMA و CDMA التي تم إغلاقها حاليًا وشبكة XT الحالية.

ربع لا من العملاء الحصة السوقية ٪
ديسمبر 1999 858,000 68.37%
ديسمبر 2000 1,150,000 60.43%
ديسمبر 2001 1,379,000 56.94%
ديسمبر 2002 1,229,000 50.18%
ديسمبر 2003 1,298,000 49.95%
نوفمبر 2005 1,600,000 46%
مارس 2007 1,900,000 49%
فبراير 2010 2,152,000 44.4%
اغسطس 2012 1,600,000 32.2%

Spark Sport هي خدمة بث رياضية نيوزيلندية تملكها وتديرها Spark. تم إطلاق الخدمة في 14 مارس 2019 بعد حصول Spark على حقوق البث النيوزيلندية لمختلف أحداث الرجبي العالمية بما في ذلك كأس العالم للرجبي 2019 قبل عام. خلال ذلك الوقت ، حصلت Spark Sport على حقوق العديد من الألعاب الرياضية الأخرى لبناء كتالوجها ، إلى أن أصبحت خدمة البث جاهزة للإطلاق ، تم ترخيص التغطية لـ TVNZ لعرضها. كان أول بث رياضي مباشر رئيسي لها هو تدفق 2019 Australian Australian F1 Grand Prix.

كانت هناك مخاوف من أن بث Spark لكأس العالم للرجبي سيواجه صعوبات في ظل قدرات الإنترنت لنيوزيلندا خاصة في المجتمعات الريفية وأعداد الجماهير المتوقعة التي تبث المباريات مما أدى إلى مشكلات مماثلة لبث Optus Sport لكأس العالم 2018 في أستراليا. في اليوم الثاني من بطولة كأس العالم للرجبي ، عانت سبارك سبورت من مشاكل فنية خلال بثها المباشر للمباراة بين نيوزيلندا وجنوب إفريقيا مما جعل المشاهدين غير قادرين على مشاهدة المباراة ، ونتيجة لذلك تم بث الشوط الثاني بالتزامن مع التلفزيون التقليدي على TVNZ Duke كجزء من خطة طوارئ مع مذيع TVNZ المجاني للمشكلات أثناء كأس العالم للرجبي. سيستمر المشاهدون في الإبلاغ عن المشكلات طوال البطولة ، على الرغم من المشكلات التي ردت عليها Spark مشيرة إلى أنه لم تكن هناك مشكلات من نهايتها في موجز البث وأن المشكلات التي تمت مواجهتها كانت بسبب تكوين المشاهد الفردي لأجهزة البث.

بعد بثها لكأس العالم للرجبي 2019 ، أعلنت Spark Sport أنها حصلت على صفقة بث لمدة ست سنوات مع New Zealand Cricket لجميع الكريكيت المحلي والدولي الذي يتم لعبه داخل نيوزيلندا. كانت الحقوق محفوظة سابقًا لشركة Sky Sport لأكثر من 25 عامًا. يتم تقديم تغطية Spark Sport للكريكيت من قبل سكوتي ستيفنسون ، مع محللين ومعلقين منتظمين بما في ذلك مارك ريتشاردسون ، وكريغ ماكميلان ، وكريغ كومينغ ، وبريندون ماكولوم ، وغرانت إليوت ، وستيفن فليمينغ ، وريبيكا رولز ، وفرانسيس ماكاي.

ستكون سبارك سبورت هي المذيع المضيف لبطولة كأس العالم للرجبي للسيدات 2021 التي تقام في نيوزيلندا.

كانت Spark قد بثت الرياضة سابقًا من خلال خدمة اشتراك الفيديو عند الطلب Lightbox بالشراكة مع Coliseum Sports Media لتقديم خدمة بث رياضي قائمة على الاشتراك تسمى Lightbox Sport المتدفقة للجولف و English Premier League و French Top 14 للرجبي.

تحرير الرياضة

    لعبت لعبة الكريكيت المحلية والدولية داخل نيوزيلندا. لعبت لعبة الكريكيت المحلية والدولية داخل المملكة المتحدة.
  • يسلط الضوء على أحداث المحكمة الجنائية الدولية.

عندما احتكرت شركة Telecom احتكارًا عامًا في الاتصالات النيوزيلندية ، تم انتقادها لاستخدام وضعها الحالي لفرض أسعار مرتفعة. انخفضت الأسعار لاحقًا مع زيادة المنافسة في السوق.

زعم المنافسون أن شركة Telecom قد انخرطت في ممارسات غير عادلة لمنعها من تحقيق مكاسب ، على سبيل المثال عن طريق إعادة بيع سعة النطاق العريض إلى Xtra بأسعار منخفضة مقارنة بمزودي خدمة الإنترنت الآخرين. [ بحاجة لمصدر ] في يوليو 2005 ، اشتكى أكثر من عشرين مزودًا لخدمة الإنترنت رسميًا إلى لجنة التجارة النيوزيلندية عبر خطاب. [64] كان من الغائبين بشكل ملحوظ من قائمة الموقعين ISP التابع لشركة Telecom و Xtra والعديد من مزودي خدمات الإنترنت المملوكة لمنافسها الرئيسي TelstraClear. في 1 فبراير 2007 ، منح معهد المستهلكين "الجائزة العليا" للمنتجات السيئة لشركة Telecom لخدمة النطاق العريض Xtra ، ادعى ديفيد راسل ، المدير التنفيذي لمعهد المستهلكين ، أنه منذ أن أطلقت شركة Telecom "العنان" لسرعات النطاق العريض ، غُمر المعهد " شكاوى من سرعات أبطأ وانقطاعات محبطة ". [65] منحت شركة Telecom جائزة روجر أكثر من مرة ، في عامي 2004 و 2007 - وتم منح الشركة الثانية فقط على هذا النحو ، وكانت شركة TranzRail البائدة هي الأولى. [66]

قدرت وزارة الخزانة النيوزيلندية ذات مرة الخسارة الاقتصادية من احتكار شركة الاتصالات (السابق الآن) بما يتراوح بين 50 و 250 مليون دولار في السنة. [ بحاجة لمصدر ] دراسة أخرى بتكليف من المنافس Clear (لاحقًا TelstraClear) في عام 1998 قدرت الخسارة بمبلغ 400 مليون دولار سنويًا. على مستوى البيع بالتجزئة ، تواجه شركة Telecom الآن منافسة في جميع المجالات - الخلوية ، والإنترنت ، والمكالمات الهاتفية ، ورهناً بالتطورات المستمرة ، في الاتصال المحلي. على مستوى الشبكة ، غالبًا ما تقوم خدمات البيع بالتجزئة بإعادة بيع منتجات الاتصالات بالجملة.

ادعت شركة Telecom [67] أن أحد أسباب ضعف استيعاب النطاق العريض في نيوزيلندا يرجع إلى حقيقة أن المشتركين المقيمين في نيوزيلندا يتمتعون بمكالمات محلية مجانية. صرحت شركة Telecom أن "العملاء لديهم خيار الانتقال إلى خدمات النطاق العريض الأسرع ، ولكن الاتصال المحلي المجاني يخلق عاملًا مثبطًا من خلال السماح لهم باستخدام الاتصال الهاتفي طالما يريدون" (أي ليس عليهم دفع رسوم مكالمة لكل دقيقة أثناء باستخدام الطلب الهاتفي ، على عكس العديد من البلدان الأخرى التي يتم فيها فرض رسوم على المكالمات المحلية). ومع ذلك ، اختلف بعض الخبراء والمنافسين - بما في ذلك أمين منظمة التعاون الاقتصادي والتنمية. [68]

Telecom failed to reach their self-imposed goal of around 83,333 wholesale broadband customers by the end of 2005. During her opening address to parliament, Prime Minister Helen Clark criticised the state of the internet in New Zealand. [69] This was followed by extensive criticism in the media such as in two high-profile television programmes, in two episodes of Campbell Live (whose past major sponsors include Telecom), during which CEO Theresa Gattung was challenged by host John Campbell, and an episode of the New Zealand edition of يوم الأحد. Critical articles had been published by various magazines and newspapers, including the largest newspaper, نيوزيلندا هيرالد. Of significance, many of these were lengthy and high-profile articles compared to many previous articles critical of Telecom — among the most noticeable of these was published by the National Business Review, in which it was stated that "Far from being 'Xtraordinary', as its multimillion dollar advertising would have you believe, Telecom is strangling the nation's advancement." While in Wellington for an ICANN meeting, Vint Cerf was reported to have made a personal visit to David Cunliffe, the telecommunications minister where it is believed he recommended that Telecom be unbundled. [70] [71] The government investigated whether it needed to force Telecom to unbundle the network, thereby allowing other companies access and improving broadband service for consumers.

From 2007, Yahoo! provided Telecom's email service, which came under heavy criticism in early 2013 following a spam and phishing attack described as the biggest to have ever hit the country. [72] Telecom and Yahoo! automatically reset tens of thousands of users' passwords. [73] In April, Telecom announced that despite the issue, it would keep Yahoo! on as an email provider. [74] Problems with Telecom's YahooXtra email continued into December 2013 and further into 2014 with the latest problems reported on 10 January. [75] They later moved their mail service to SMX, a New Zealand-based provider, in May 2017. [76]


History Server Configurations

In order to store event logs for all submitted applications, first, Spark needs to collect the information while applications are running. By default, the spark doesn’t collect event log information. You can enable this by setting the below configs on spark-defaults.conf

  • Enable by setting the configuration spark.eventLog.enabled to true .
  • Specify where to store the event log history using spark.history.fs.logDirectory and spark.eventLog.dir , by default the location is file:///tmp/spark-events . You need to create the directory in advance.

Spark keeps a history of every application you run by creating a sub-directory for each application and logs the events specific to the application in this directory.

You can also set the location like an HDFS directory so history files can be read by the history server.


Spark runs on Hadoop, Apache Mesos, Kubernetes, standalone, or in the cloud. It can access diverse data sources.

You can run Spark using its standalone cluster mode, on EC2, on Hadoop YARN, on Mesos, or on Kubernetes. Access data in HDFS, Alluxio, Apache Cassandra, Apache HBase, Apache Hive, and hundreds of other data sources.

تواصل اجتماعي

Spark is used at a wide range of organizations to process large datasets. You can find many example use cases on the Powered By page.

There are many ways to reach the community:

  • Use the mailing lists to ask questions.
  • In-person events include numerous meetup groups and conferences.
  • We use JIRA for issue tracking.

Contributors

Apache Spark is built by a wide set of developers from over 300 companies. Since 2009, more than 1200 developers have contributed to Spark!

The project's committers come from more than 25 organizations.

If you'd like to participate in Spark, or contribute to the libraries on top of it, learn how to contribute.

ابدء

Learning Apache Spark is easy whether you come from a Java, Scala, Python, R, or SQL background:


Understanding the spark gap transmitter

One of the key issues with the spark gap transmitter was that few people really understood its operation. In 1906, Professor Max Wein of Danzig in Germany published a paper in which he detailed his thorough analysis of the mechanisms behind the generation of radio signals using spark gap transmitters.

One of the main issues was that Wein showed that it was not necessary to use a long spark to generate a powerful radio signal. He also showed that it was possible to create a high level of efficiency and a single frequency by having close coupling between the spark circuit and the antenna circuit.


History of Spark I - History

Donations to Segue are exclusively designated to support Passion Spark.

History of Passion Spark and Segue

The history of Passion Spark began with Segue Career Guidance Program, Inc., a 501(c)(3) nonprofit. Passion Spark shares the same core mission as Segue, &ldquoTo engage people today to support their career successes tomorrow.&rdquo Now, under contract to Segue, Passion Spark represents Segue's only activity to support the Segue mission. Passion Spark engages those of different ages, from high school, college, college alumni, and those in mid-career, to a much deeper and more engaging level than did Segue.

Specifically , Passion Spark's Retreat Workshops occur over 20 hours, whereas Segue's in-class career speakers presented for just 20 minutes. Participants in mid-career already know what's it's like work in a dissatisfying career. Younger participants who are not yet in a career are gently guided, preemptively, to "Do what you love AND earn a good living."

To support these outcomes, foundations and philanthropists have donated to Segue and specifically designated that their funds be used to support participants to attend Passion Spark Retreats.

Historically, Segue provided over 90,000 Student Career Exposures (SCE: One SCE is one exposure to one career option by one live in-class speaker). Over 50,000 of the Segue participants were from low to very low income households. Segue produced outstanding outcomes as measured by Harvard University and California Lutheran University, as well as by student and teacher testimonials. Findings by these universities are summarized below under the button titled "Research."

Segue was highly regarded in the community , as described in a 4-minute summary video by a Superior Court Judge, a school Superintendent, a county District Attorney, a County Sheriff, a Probation Chief, and others, as found below under the button titled "Testimonials."

Unique to Segue was its proprietary self-scheduling software system, which enabled speakers, everyday members of the workforce, to self-schedule a convenient time to speak in three consecutive high school or college classrooms, for 20 minutes each, at the frequency requested by the teachers/professors. Speakers brought students real world examples from a large variety of careers, their careers, and reported actual examples of how behaviors such as initiative and perseverance generate career success.


You can press control + R , then start typing to search for your command. You can then press enter to run, or you can edit the command before running, like in readline.

Yes It is possible to use the use HISTORY command in spark shell

scala> :history

scala> ctrl + r

dpeacock's answer is probably the best you can get currently.

If you look at this SO question you can see that you could load the history yourself, but loading and running it is another story as I cannot seem to find a way to get access to the ILoop variable, which is the interactive loop that you could run an interpret command through.

To load the history, just do

You could wrap this all up in an object, but without the ILoop you would still need to copy and paste. وبالتالي. the short answer is not really

In Linux it will be present in /home/<userid>/scala_history for spark-shell


Spark Performance Monitoring with History Server

In this Apache Spark tutorial, we will explore the performance monitoring benefits when using the Spark History server. This Spark tutorial will review a simple Spark application without the History server and then revisit the same Spark app with the History server. We will explore all the necessary steps to configure Spark History server for measuring performance metrics. At the end of this post, there is a screencast of me going through all the tutorial steps.

This Spark Performance tutorial is part of the Spark Monitoring tutorial series.

What is the Spark History Server?

The Spark History server allows us to review Spark application metrics after the application has completed. Without the History Server, the only way to obtain performance metrics is through the Spark UI while the application is running. Don’t worry if this doesn’t make sense yet. I’m going to show you in examples below.

The Spark History server is bundled with Apache Spark distributions by default. The steps we take to configure and run it in this tutorial should be applicable to various distributions.

Spark Tutorial Overview

In this spark tutorial on performance metrics with Spark History Server, we will run through the following steps:

  1. Run a Spark application without History Server
  2. Review Spark UI
  3. Update Spark configuration to enable History Server
  4. Start History Server
  5. Re-run Spark application
  6. Review Performance Metrics in History Server
  7. الرقصة
Step 1 Spark App without History

To start, we’re going to run a simple example in a default Spark 2 cluster. The Spark app example is based on a Spark 2 github repo found here https://github.com/tmcgrath/spark-2. But the Spark application really doesn’t matter. It can be anything that we run to show a before and after perspective.

This will give us a “before” picture. Or, in other words, this will show what your life is like without the History server. To run, this Spark app, clone the repo and run `sbt assembly` to build the Spark deployable jar. If you have any questions on how to do this, leave a comment at the bottom of this page. Again, the screencast below might answer questions you might have as well.

The entire `spark-submit` command I run in this example is:

`spark-submit --class com.supergloo.Skeleton --master spark://tmcgrath-rmbp15.local:7077 ./target/scala-2.11/spark-2-assembly-1.0.jar`

but again, the Spark application doesn’t really matter.

STEP 2 SPARK UI Review

After we run the application, let’s review the Spark UI. As we will see, the application is listed under completed applications.

spark tutorial completed applications

If we click this link, we are unable to review any performance metrics of the application. Without access to the perf metrics, we won’t be able to establish a performance monitor baseline. Also, we won’t be able to analyze areas of our code which could be improved. So, we are left with the option of guessing on how we can improve. Guessing is not an optimal place to be. Let’s use the History Server to improve our situation.

Step 3 Update Spark Configuration for History Server

Spark is not configured for the History server by default. We need to make a few changes. For this tutorial, we’re going to make the minimal amount of changes in order to highlight the History server. I’ll highlight areas which should be addressed if deploying History server in production or closer-to-a-production environment.

We’re going to update the conf/spark-defaults.conf in this tutorial. In a default Spark distro, this file is called spark-defaults.conf.template. Just copy the template file to a new file called spark-defaults.conf if you have not done so already.

Next, update 3 configuration variables

  • Set `spark.eventLog.enabled` to true
  • Set `spark.eventLog.dir` to a directory **
  • Set `spark.history.fs.logDirectory` to a directory **

** In this example, I set the directories to a directory on my local machine. You will want to set this to a distributed file system (S3, HDFS, DSEFS, etc.) if you are enabling History server outside your local environment.

STEP 4 Start HISTORY SERVER

Consider this the easiest step in the entire tutorial. All we have to do now is run `start-history-server.sh` from your Spark `sbin` directory. It should start up in just a few seconds and you can verify by opening a web browser to http://localhost:18080/

The most common error is the events directory not being available. If you discover any issues during history server startup, verify the events log directory is available.

STEP 5 Rerun the Spark Application

Ok, this should be another easy one. Let’s just rerun the Spark app from Step 1. There is no need to rebuild or change how we deployed because we updated default configuration in the spark-defaults.conf file previously. So now we’re all set, so let’s just re-run it.

STEP 6 Review Spark APplication Performance metrics in HISTORY SERVER

Alright, the moment of truth…. drum roll, please…

Refresh the http://localhost:18080/ and you will see the completed application. Click around you history-server-running-person-of-the-world you! You now are able to review the Spark application’s performance metrics even though it has completed.

Step 7 Boogie

هذا صحيح & # 8217s. Let’s boogie down. This means, let’s dance and celebrate. Now, don’t celebrate like you just won the lottery… don’t celebrate that much! But a little dance and a little celebration cannot hurt. Yell “whoooo hoooo” if you are unable to do a little dance. If you can’t dance or yell a bit, then I don’t know what to tell you bud.

In any case, as you can now see your Spark History server, you’re now able to review Spark performance metrics of a completed application. And just in case you forgot, you were not able to do this before. But now you can. Slap yourself on the back kid.

Spark Performance with History Server Conclusion

I hope this Spark tutorial on performance monitoring with History Server was helpful. See the screencast below in case you have any questions. If you still have questions, let me know in the comments section below.

موارد
  • For a more comprehensive list of all the Spark History configuration options, see Spark History Server configuration options
  • Speaking of Spark Performance Monitoring and maybe even debugging, you might be interested in Spark Scala with IntelliJ tutorial or Debug Scala Spark in IntelliJ tutorial
  • For more on Apache Spark
Screencast

Can’t get enough of my Spark tutorials? Well, if so, the following is a screencast of me running through most of the steps above


شاهد الفيديو: مادة التاريخ للصف الأول الثانوي. درس عصور ماقبل التاريخ ومهام المؤرخ (شهر نوفمبر 2021).