تحلیلگری عظیم‌داده و کسب‌وکار

📌 معرفی مقالات داغ حوزه عظیم‌داده

“Big Data: Deep Learning for financial sentiment analysis”


🖋نویسندگان:
Sahar Sohangir, Dingding Wang, Anna Pomeranets and Taghi M. Khoshgoftaar


🔸 در این مقاله با بررسی چالش‌های موجود در تحلیل عظیم‌داده و به طور خاص حوزه تحلیل احساسات، استفاده از الگوریتم‌های یادگیری عمیق را بر روی مجموعه داده‌های شبکه اجتماعی مالی مربوط به بازار بورس مطرح نموده است و چگونگی استفاده از تحلیل احساسات در این شبکه برای رسیدن به پیش‌بینی دقیقی از حرکت‌های آتی بازار مورد بررسی قرار گرفته است. مجموعه داده‌های StockTwits به عنوان یک شبکه اجتماعی مالی شامل اطلاعاتی از بازار بورس نظیر آخرین قیمت‌ها، تغییرات قیمت، تاریخچه مبادلات بورس، توصیه‌های مبتنی بر خرید یا فروش و ... می‌باشد. علاوه بر این به عنوان یک شبکه اجتماعی امکان تبادل تجربیات میان معامله‌کنندگان در بازار بورس را شامل می‌شود. آنچه در این مقاله به آن پرداخته شده است پاسخ به این سؤال است که احساسات یا نظر گروه وسیعی از این مختصصان در خصوص سهام‌های مختلف چه می‌باشد؟ و تعیین اینکه آیا مدل‌های یادگیری عمیق می‌تواند جهت بهبود عملکرد تحلیل احساسات بر روی StockTwits پذیرفته شوند؟ بر این اساس ابتدا به بررسی ارتباط میان تحلیل احساسات و قیمت آتی سهام پرداخته شده است و سپس مدل‌های شبکه عصبی نظیر LSTM، Doc2vec و CNN بر روی مجموعه داده‌های StockTwits اعمال شده است و با الگوریتم LR نیز مقایسه شده‌اند. نتایج به دست آمده در این مقاله نشان می‌دهد مدل یادگیری عمیق می‌تواند به نحو مؤثری برای تحلیل احساسات در حوزه مالی استفاده شود و CNN با دقت بالاتری نسبت به LR و سایر الگوریتم‌ها توانسته است در تحلیل احساسات و پیش‌بینی حرکت آتی بازار مؤثر واقع گردد.

🔹خلاصه و دريافت مقاله:

🔗 https://bit.ly/2ZeGibi


#معرفی_مقاله
#تحلیل_احساسات
#یادگیری_عمیق
#فاطمه_مظفری


www.bdbanalytics.ir
@BigData_BusinessAnalytics

📖 کتاب بخوانیم؛

"ذخیره‌سازی و تحلیل در سطح اینترنت" از مجموعه کتب "راهنمای کامل هدوپ"
"Hadoop: The Definitive Guide: Storage and Analysis at Internet Scale"

☑️ بخش سیزدهم: Parquet

📌فصل سیزدهم این کتاب به معرفی یک قالب ذخیره‌سازی داده به نام Apache Parquet می‌پردازد.

🔸این قالب که یک شیوه ذخیره‌سازی ستونی است، می‌تواند برای داده‌های تو در تو (nested) بسیار مناسب باشد. قالب‌های ستونی به این دلیل که بازدهی بهتری از نظر اندازه فایل و کارآیی query دارند، جذاب هستند. از آنجایی که داده‌های موجود در یک ستون، قالبا از یک جنس هستند، کدگذاری آنها (Encoding) آسان است. برای مثال اگر یک ستون شامل داده‌های زمانی با فواصل مشخص باشد، صرفا ذخیره‌سازی داده اول و بازه‌ی زمانی بین هر دو سطر، کفایت می‌کند.


☑️برای خواندن ادامه این مطلب می‌توانید به لینک زیر مراجعه فرمایید:

🔗https://bit.ly/2LCaGoL

#کتاب_بخوانیم
#ذخیره‌سازی_و_تحلیل_در_سطح_اینترنت_از_مجموعه_کتب_راهنمای_کامل_هدوپ
#فصل_سیزدهم
#احسان_نوری

www.bdbanalytics.ir
@BigData_BusinessAnalytics

📌 معرفی مقالات داغ حوزه عظیم‌داده

Big Data in Smart Farming – A review

🖋نویسندگان:
Sjaak Wolfert, Lan Ge, Cor Verdouw, Marc-Jeroen Bogaardt

🔸 کشاورزی هوشمند یک رویه توسعه‌مدار است که بر استفاده از فناوری اطلاعات و ارتباطات در چرخه مدیریت مزارع فیزیکی-سایبری تاکید دارد. انتظار می‌رود که فناوری‌های جدید مانند اینترنت اشیاء و رایانش ابری در این فرایند مورد استفاده قرار گرفته و بکارگیری ربات‌ها و هوش‌مصنوعی در زمینه کشاورزی را بیش از پیش توسعه دهند.
این فرآیند توسط پدیده عظیم‌داده احاطه شده است، یعنی حجم گسترده‌ای از اطلاعات با تنوع بسیار وسیعی که می‌توان آنها را دریافت نموده، تجزیه و تحلیل کرده و برای تصمیم‌گیری مورد استفاده قرار داد. این بررسی با هدف به دست آوردن بینش به‌روز درباره کاربرد عظیم‌داده در کشاورزی هوشمند و شناسایی چالش‌های اجتماعی و اقتصادی مرتبط با آن صورت گرفته است.
بدین ترتیب در این تحقیق با دنبال کردن یک رویکرد ساختار یافته، یک چارچوب مفهومی برای تجزیه و تحلیل ایجاد شده است که می‌تواند برای مطالعات آینده نیز در این موضوع مورد استفاده قرار گیرد.

خلاصه و دريافت مقاله:

🔗 https://bit.ly/2XeQCz4


#معرفی_مقاله
#عظیم_‌داده
#کشاورزی
#مهدی_اميرصادقي

www.bdbanalytics.ir
@BigData_BusinessAnalytics

📌 معرفی مقالات داغ حوزه عظیم‌داده

"اقتصاد در عصر عظیم‌داده "

Economics in the age of big data

🔸کیفیت و کمیت داده‌های مربوط به فعالیت‌های اقتصادی، با سرعت در حال رشد هستند. تحقیقات تجربی به شکل فزاینده‌ای، متکی بر داده‌های حجیم سازمانی یا داده‌های بخش خصوصی هستند. در این مقاله تعدادی از چالش‌های دسترسی به این داده‌ها و استفاده از آنها بررسی می‌شود. همچنین در این مقاله، روش‌های آماری و نوع سوالاتی که اقتصاددانان جایگزین روشهای قدیمی باید بکنند معرفی می‌شوند.

خلاصه و دریافت مقاله:

🔗https://bit.ly/2MUQCzB

#معرفی_مقاله
#عظیم_داده
#اقتصاد
#احسان_نوری

www.bdbanalytics.ir
@BigData_BusinessAnalytics