开发IOT PET跟踪器的大数据解决方案

开发IOT PET跟踪器的大数据解决方案

行业
电信
技术
大数据,AWS,Spark,云
商业收益
1秒以上从100万设备处理30,000多个事件

顾客

客户是18个州的美国公司。客户在电信方面拥有丰富的经验,客户决定在通过移动应用程序管理的可穿戴跟踪器的帮助下启动允许宠物所有者监控他们的宠物位置。

挑战

客户想要一个大数据解决方案,允许用户始终是最新的宠物的位置,接收关于关键事件的实时通知,以及访问其宠物存在的报告。

该解决方案是为了使媒体内容转移(音频,视频和照片)能够与他们的宠物交谈,或者看到他们的宠物在特定时刻的宠物。

由于客户希望用户数量不断增长,因此解决方案是轻松扩展以存储和处理增加的数据量。

解决方案

确保解决方案是高度可扩展的,SCIENCESTOFT的大数据团队在云中交付它并制作Apache Kafka,阿帕奇火花和Mongodb核心。

解决方案架构2.

解决方案如何工作:

  • 多个GPS跟踪器传输关于宠物位置的实时数据,以及关于事件(例如,低电量,留下安全领域等)消息经纪人使用MQTT协议。选择该协议是因为它有助于确保设备友好的界面并节省手机电池寿命。
  • A流数据处理器基于Apache Kafka从多个MQTT主题流中数据流,实时处理并检查数据质量。其组件Kafka Streams使推送通知成为可能,并确保安全数据传输。
  • A数据聚合器在Apache Spark流程中实现的内存中的数据,将其聚集在一小时,一天,周和月份并转移到数据仓库。对于后者而言,SCIENCESTOFT的团队建议了MongoDB技术,因为它允许将时间序列事件作为单个文档(按小时,日期,一周)存储。此外,其文档为导向的设计允许就地更新导致主要的性能胜利。
  • 运营数据库PostgreSQL RDS存储用户的简档,帐户和配置数据。
  • RESTful Services从数据存储中单独的用户界面,并确保从平台类型或编程语言的可靠性,可扩展性和独立性。

结果

客户收到了一个易于可扩展的大数据解决方案,允许从100万设备处理每秒30,000多个事件。因此,用户可以实时跟踪宠物的位置,以及发送和接收照片,视频和语音消息。如果发生了关键事件(例如,宠物交叉由宠物所有者或宠物的可佩戴跟踪器越过“超出通信”等)的地理围栏,则用户接收推送通知。如果需要,宠物所有者也可以自动访问每小时,每周或每月报告,或者手动调整报告期间。

技术和工具

亚马逊Web服务,MQTT,Apache Kafka(流数据处理器),Apache Spark(Data Aggregator),MongoDB(数据仓库),PostgreSQL RDS(运营数据库),RESTful Web服务。

需要帮助一个类似的项目?

向我们删除一条线,我们的代表将在30分钟内与您联系,安排初步讨论。

我们的联系方式

更多案例研究

大数据 Implementation for Advertising Channel Analysis in 10+ Countries

Migration to a new analytical system that ScienceSoft implemented helped one of the top market research companies secure an innovative big data solution based on Apache Hadoop, Apache Hive and Apache Spark frameworks. The new system was 100 times faster compared to the old one and could process 1,000 different data formats.

LEARN MORE

The World’s Largest PLM Software Development

The product lifecycle management solution, powering 20,000 retailers, manufacturers and suppliers in 110 countries, is a unique system that drives the development of products with $300+ bln in annual sales. The cloud-based platform helps all the industry players to conjoin their efforts, knowledge and clients, providing faster communication, more accurate data and transparency in their ventures.

LEARN MORE
">