نقشه اینترنت اشیا ایران
  • خانه
  • دانش اینترنت اشیا
  • کاربردهای اینترنت اشیا
    • پزشکی هوشمند
    • کسب و کار هوشمند
    • کشاورزی هوشمند
    • خانه هوشمند
  • زیرساخت اینترنت اشیا
  • محصولات هوشمند
  • آموزش
  • درباره ما
  • تماس با ما

محبوبترین مطالب

وضعیت اینترنت اشیا در ایران
دانش اینترنت اشیا,

وضعیت اینترنت اشیا در ایران

توسط پورعلیاکتبر 16, 2018بدون دیدگاه
مزایا و معایب اینترنت اشیا را می‌دانید؟!
دانش اینترنت اشیا, کاربردهای اینترنت اشیا,

مزایا و معایب اینترنت اشیا را می‌دانید؟!

توسط پورعلیدسامبر 24, 2019بدون دیدگاه
تکنولوژی RFID و نقش آن در هوشمندسازی اشیا
آموزش, زیرساخت اینترنت اشیا,

تکنولوژی RFID و نقش آن در هوشمندسازی اشیا

توسط iotmapadminمارس 30, 2019بدون دیدگاه
دانش اینترنت اشیا,

تاریخچه اینترنت اشیا IOT

توسط پورعلیدسامبر 4, 2018بدون دیدگاه

موضوعات

  • آموزش (39)
  • اتومبیل های خودران (11)
  • اخبار (14)
  • اقتصاد هوشمند (2)
  • امنیت اینترنت اشیا (33)
  • انرژی هوشمند (16)
  • اینترنت اشیا صنعتی (33)
  • بازارکار (16)
  • بلاک‎چین (20)
  • پردازش تصویر (2)
  • پردازش داده (22)
  • پزشکی هوشمند (43)
  • تجهیزات پوشیدنی (13)
  • تجهیزات هوشمند (108)
  • حمل و نقل هوشمند (24)
  • خانه هوشمند (171)
  • داده کاوی (28)
  • دانش اینترنت اشیا (127)
  • دسته‌بندی نشده (62)
  • رویدادهای اینترنت اشیا (10)
  • زیرساخت اینترنت اشیا (82)
  • سیستم های فازی (2)
  • شرکت های اینترنت اشیا (12)
  • شهر هوشمند (82)
  • علم داده (24)
  • فین‎تک (16)
  • کاربردهای اینترنت اشیا (143)
  • کسب و کار هوشمند (30)
  • کشاورزی هوشمند (52)
  • محصولات خواب هوشمند (7)
  • محصولات هوشمند (70)
  • محصولات هوشمند سلامت (11)
  • هوش مصنوعی (56)

ما را دنبال کنید!

اینستاگرام

  • Instagram Image22
  • Instagram Image5
  • Instagram Image2
  • Instagram Image3
  • Instagram Image2
  • Instagram Image3

Popular Posts

وضعیت اینترنت اشیا در ایران
دانش اینترنت اشیا,

وضعیت اینترنت اشیا در ایران

توسط پورعلیاکتبر 16, 2018بدون دیدگاه
مزایا و معایب اینترنت اشیا را می‌دانید؟!
دانش اینترنت اشیا, کاربردهای اینترنت اشیا,

مزایا و معایب اینترنت اشیا را می‌دانید؟!

توسط پورعلیدسامبر 24, 2019بدون دیدگاه
تکنولوژی RFID و نقش آن در هوشمندسازی اشیا
آموزش, زیرساخت اینترنت اشیا,

تکنولوژی RFID و نقش آن در هوشمندسازی اشیا

توسط iotmapadminمارس 30, 2019بدون دیدگاه
دانش اینترنت اشیا,

تاریخچه اینترنت اشیا IOT

توسط پورعلیدسامبر 4, 2018بدون دیدگاه

Category List

  • آموزش (39)
  • اتومبیل های خودران (11)
  • اخبار (14)
  • اقتصاد هوشمند (2)
  • امنیت اینترنت اشیا (33)
  • انرژی هوشمند (16)
  • اینترنت اشیا صنعتی (33)
  • بازارکار (16)
  • بلاک‎چین (20)
  • پردازش تصویر (2)
  • پردازش داده (22)
  • پزشکی هوشمند (43)
  • تجهیزات پوشیدنی (13)
  • تجهیزات هوشمند (108)
  • حمل و نقل هوشمند (24)
  • خانه هوشمند (171)
  • داده کاوی (28)
  • دانش اینترنت اشیا (127)
  • دسته‌بندی نشده (62)
  • رویدادهای اینترنت اشیا (10)
  • زیرساخت اینترنت اشیا (82)
  • سیستم های فازی (2)
  • شرکت های اینترنت اشیا (12)
  • شهر هوشمند (82)
  • علم داده (24)
  • فین‎تک (16)
  • کاربردهای اینترنت اشیا (143)
  • کسب و کار هوشمند (30)
  • کشاورزی هوشمند (52)
  • محصولات خواب هوشمند (7)
  • محصولات هوشمند (70)
  • محصولات هوشمند سلامت (11)
  • هوش مصنوعی (56)

Follow Us

Instagram

  • Instagram Image22
  • Instagram Image5
  • Instagram Image2
  • Instagram Image3
  • Instagram Image2
  • Instagram Image3
نقشه اینترنت اشیا ایران
  • خانه
  • دانش اینترنت اشیا
  • کاربردهای اینترنت اشیا
    • پزشکی هوشمند
    • کسب و کار هوشمند
    • کشاورزی هوشمند
    • خانه هوشمند
  • زیرساخت اینترنت اشیا
  • محصولات هوشمند
  • آموزش
  • درباره ما
  • تماس با ما
پردازش داده, داده کاوی, علم داده,

استخراج داده از وب

توسط iotmapadminسپتامبر 7, 2019بدون دیدگاه
استخراج داده از وب
استخراج داده از وب

زندگی امروز از انبوی از اطلاعات تشکیل شده است. بخش زیادی از این داده ها در صفحات وب و از طریق اینترنت تولید می شود. این اطلاعات حاوی داده های با اهمیتی هستند که با استخراج و تجزیه و تحلیل، دانش زیاد و مهمی را در اختیار قرار میدهند.

استخراج داده از وب

استخراج داده از وب

استخراج داده از وب سایت

امروزه داده ها و اطلاعات با حجم وحشتناکی تولید میشود. مدیریت این اطلاعات با چشم و یا ذهن انسان غیر قابل انجام است. استفاده از برنامه وب اسکریینگ(Web Scraping) برای جمع آوری خودکار این داده ها و اطلاعات در دسترس است. می توان با این نرم افزارها داده کاوی، تحلیل داده و … را انجام داد. به عبارت دیگر وب اسکرپینگ تعریفی برای استخراج داده و ذخیره سازی از وب است. تمام داده های موجود در دنیای اینترنت را می توان جمع آوری کرد. از جمله اطلاعات املاک، ایمیل، کسب و کارهای مختلف، ورزشی و….

دسترسی به داده سایت

با استفاده از ابزارها و کتابخانه های زبان های برنامه نویسی، می توان از تگ های html هر صفحه و محتواهای آن استفاده نمود. برای رسیدن به تگ های html باید از طریق url سایت مورد نظر به تگ ها دسترسی داشت و از این طریق به تگ مورد نظر رسید و اطلاعات را ذخیره نمود. در html از تگ ها برای ایجاد صفحه های وب و انتشار محتواهای مختلف از جمله متن، تصویر، ویدئو، فایل های پی دی اف، صوت و غیره استفاده می شود. هر یک از داده ها(متن، تصویر، ویدئو و غیره) با فرمت ها و ساختارهای متفاوتی هستند. در حالت کلی سه ساختار برای داده ها در نظر میگیرند:

  • داده های ساختار یافته(structured data)- مانند فایل های متنی ساده
  • داده های ساختار نیافته(unstructured data)- مانند تصویر، ویدئو و غیره
  • داده های نیمه ساختار یافته(semi-structured data)- مانند فایل های اکسل، فایل های csv، فایل های با فرمتjson و فایل های با فرمتxml

پس با فرمتهای مختلفی از داده روبه رو هستیم که انبوهی از اطلاعات را در صفحه وب یا اینترنت شامل می شوند. اولین قدم بدست آوردن داده های از منابع مختلف اینترنت(صفحات وب) است. از طریق تگ های html در هر صفحه وب می توان داده ها را بدست آورد. هدف اصلی کسب این داده ها پردازش و استخراج دانش برای تصمیم گیری، از دانش به دست آمده است. این دانش برای توسعه و پیشرفت در زمینه ای که داده ها بدست آمده، است. این زمینه می تواند کسب و کاری مشخص باشد که داده های را تولید کرده است. با کشف دانش حاصل از داده های تولیدی این کسب و کار می توانیم به رونق و بهبود آن کمک کنیم.

در حقیقت هدف کلی و اصلی،  تجزیه و تحلیل داده ها برای بهبود و تصمیم گیری درست است.

 

 

قبلی

کاربرد هوش مصنوعی در پزشکی

سپتامبر 7, 2019
بعدی

هویت با استفاده از اینترنت اشیاء در شهر هوشمند

سپتامبر 7, 2019

ارسال پاسخ لغو پاسخ

مطالب مشابه

پشتیبانی خبر با هوش مصنوعی
داده کاوی, هوش مصنوعی,

پشتیبانی های خبری در جهت تهیه پیش‌نویس اخبار، به هوش مصنوعی تجهیز شدند

توسط پورعلیفوریه 19, 2020بدون دیدگاه
حوزه های فعالیت فین تک
پردازش داده, داده کاوی, دسته‌بندی نشده, فین‎تک, هوش مصنوعی,

۹حوزه فعالیت مختلف برای فین تک

توسط iotmapadminژانویه 17, 20201 دیدگاه
پردازش اطلاعات در اینترنت اشیا
پردازش داده,

پردازش اطلاعات در اینترنت اشیا با ۳ تکنولوژی برتر

توسط پورعلیدسامبر 25, 2019بدون دیدگاه
رگ تک و فین تک
پردازش داده, دسته‌بندی نشده, فین‎تک,

رگ تک و فین تک برای توسعه فناوری مالی

توسط iotmapadminدسامبر 23, 2019بدون دیدگاه

ما را دنبال کنید

اینستاگرام من
کانال تلگرام من
اپارات من
لینکدین من

لینکدونی

  • دانلود مقالات علمی در حوزه اینترنت اشیا
  • تبلیغات در سایت آی ‎او ‎تی ‎مپ
  • مشاوره دیجیتال مارکتینگ
  • دوره برنامه نویسی بک اند
  • دوره فرانت اند
  • دوره طراحی سایت وردپرس
  • هوش مصنوعی و تشخیص سرطان

    هوش مصنوعی و تشخیص سرطان

    12 ماه ago
  • نقش اینترنت اشیا (IoT) در جهت جلوگیری از شیوع COVID-19

    نقش اینترنت اشیا (IoT) در جهت جلوگیری از شیوع COVID-19

    دسامبر 14, 2021
  • بلاکچین حلقه گمشده اینترنت اشیا

    بلاکچین حلقه گمشده اینترنت اشیا

    نوامبر 9, 2021
  • شناسایی نفوذ به اینترنت اشیا

    شناسایی نفوذ به اینترنت اشیا

    نوامبر 3, 2021
  • سیستم سقوط در اپل واچ چگونه عمل می کند؟

    سیستم سقوط در اپل واچ چگونه عمل می کند؟

    اکتبر 31, 2021

دسته‌ها

  • آموزش
  • اتومبیل های خودران
  • اخبار
  • اقتصاد هوشمند
  • امنیت اینترنت اشیا
  • انرژی هوشمند
  • اینترنت اشیا صنعتی
  • بازارکار
  • بلاک‎چین
  • پردازش تصویر
  • پردازش داده
  • پزشکی هوشمند
  • تجهیزات پوشیدنی
  • تجهیزات هوشمند
  • حمل و نقل هوشمند
  • خانه هوشمند
  • داده کاوی
  • دانش اینترنت اشیا
  • دسته‌بندی نشده
  • رویدادهای اینترنت اشیا
  • زیرساخت اینترنت اشیا
  • سیستم های فازی
  • شرکت های اینترنت اشیا
  • شهر هوشمند
  • علم داده
  • فین‎تک
  • کاربردهای اینترنت اشیا
  • کسب و کار هوشمند
  • کشاورزی هوشمند
  • محصولات خواب هوشمند
  • محصولات هوشمند
  • محصولات هوشمند سلامت
  • هوش مصنوعی

تمامی حقوق برای iotmap محفوظ می‌باشد.