As data has been increasing explosively due to development of social networks and cloud computing, there has been a new challenge for storing, processing, and analyzing a large volume of data. The traditional technologies do not become a proper solution to process big data so that a big data platform has begun to emerge. It is certain that big data platform helps users develop analysis service effectively. However, it still takes a long time to collect data, develop algorithms and analytics services. We present a collaborative big data analytics platform for big data as a service. Developers can collaborate with each other on the platform by sharing data, algorithms, and services. Therefore, this paper describes big data analytics platform that effectively supports to manage big data and develop analytics algorithms and services, collaborating with data owners, data scientists, and service developers on the Web. Finally, we introduce a CCTV metadata analytics service developed on the platform

چکیده

ازآنجایی که داده ها به خاطر توسعه شبکه های اجتماعی و رایانش ابری به صورت انفجاری در حال افزایش بوده اند، در نتیجه چالش جدیدی برای ذخیره، پردازش، و آنالیز حجم بزرگی از داده ها وجود داشته است. تکنولوژیهای سنتی به راه حلی مشهور برای پردازش داده های بزرگ تبدیل نمی شوند، به گونه ای که پلتفرم داده های بزرگ (بزرگ داده ها) شروع به ظهور کرده است. قطعاً پلتفرم داده های بزرگ به کاربران در توسعه موثر سرویس آنالیز (تجزیه و تحلیل) کمک می کند. اما، جمع آوری داده ها، توسعه الگوریتم ها و سرویسهای تحلیلی زمان طولانی صرف می کند. در اینجا پلتفرم تحلیلی مبتنی بر همکاری داده های بزرگ  برای داده های بزرگ به عنوان سرویس (خدمات) مطرح می کنیم. توسعه دهندگان با به اشتراک گذاشتن داده ها، الگوریتم ها و سرویسها می توانند با یکدیگر روی پلتفرم همکاری نمایند. بنابراین، این مقاله پلتفرم تحلیل داده های بزرگ را تشریح می کند که از مدیریت داده های بزرگ پشتیبانی کرده، الگوریتم ها و سرویسهای تحلیلی توسعه می دهد، با صاحبان داده ها، دانشمندان داده و توسعه دهندگان سرویس روی وب همکاری می کند. بالاخره، سرویس تحلیل متادیتا (فراداده) CCTV توسعه یافته روی پلتفرم را معرفی می کنیم.

1-مقدمه                                                                                                         

امروز، به خاطر روند و پارادایم های جدیدی نظیر شبکه های اجتماعی و رایانش ابری، انفجار عظیم داده ها وجود داشته است. به علاوه، داده ها متنوع تر، پیچیده تر و کمتر ساختار یافته شده و همچنین می بایست به سرعت پردازش شوند. این موقعیت باعث بروز چالش جدیدی برای تکنولوژی های سنتی نظیر پایگاههای داده ارتباطی و افزایش مقیاس زیرساختارها گردیده است. به طور تحت اللفظی، داده های بزرگ به حجم بزرگ داده ها اتلاق می گردد به گونه ای که جمع آوری، ذخیره وآنالیز آنها سخت و دشوار می باشد. اما، داده های بزرگ تنها در مورد حجم بزرگ داده هانیست. آن مفهومی است که فرصتی برای یافتن دانش مفید در داده های موجود فراهم می کند...