خزش وب - انجام تحلیل اکتشافی (exploratory) بر روی دو دادگان آماده شده
یک ماه پیش منتشر شده
تعداد بازدید: 67
کد پروژه: 577082
شرح پروژه
۱- ایجاد یک مجموعه داده (دادگان) با استفاده از خزش وب در یک موضوع دلخواه شما (اخبار جنگ، اخبار ورزشی، آرشیو مقالات علمی دانشگاه، فهرست محصولات فناورانه در یک حوزه، ....)
می توانید از ابزارهای آماده
web crawler
برای این منظور استفاده کنید
۲- انتخاب یک مجموعه داده (دادگان) استاندارد مشابه با داده های جمع آوری شده از منابعی مانند
..., Kaggle, UCI Machine Learning Repository
۳- آماده سازی داده های فوق برای تحلیل
۴- راه اندازی یک چارچوب تحلیل کلان داده با استفاده از Spark و Hadoop
۵- انجام تحلیل اکتشافی (exploratory) بر روی دو دادگان آماده شده. برخی اقدامات عبارتند از
summary statistics, visualizations, correlations, ....
۶- نوشتن یک گزارش فنی کامل با جزئیات از کلیه اقدامات (گام به گام با اسکرین شات های مربوطه) و نتایج تحلیل ها و نتیجه گیری از تحلیل های انجام شده
مهارت ها و تخصص های مورد نیاز
مهلت برای انجام
7روز
وضعیت مناقصه
بسته
درباره کارفرما
عضویت دو سال پیش
