IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 基于MapBox的船舶AIS数据在地图上的实时显示(仿船讯网效果) -> 正文阅读

[大数据]基于MapBox的船舶AIS数据在地图上的实时显示(仿船讯网效果)

分享个2个月前的小作业,部分代码暂无法公开,但我想我说的已经很明白了
AIS数据
NOAA Office for Coastal Management 提供了2009-2021年美国海岸周边的AIS数据,截止目前更新到21年3月份。
网址:https://coast.noaa.gov/htdata/CMSP/AISDataHandler/2020/

网站详情如下:

以20年数据为例,是按天提供的压缩包,解压后是.csv格式文件。
数据格式如下:
在这里插入图片描述
解析入库,这里我只是考虑获取尽可能多的不重复的船舶数据,没有考虑时间线的问题。

数据库sql脚本:

DROP TABLE IF EXISTS `ais`;
CREATE TABLE `ais` (
  `MMSI` varchar(255) NOT NULL,
  `BaseDateTime` varchar(255) DEFAULT NULL,
  `LAT` double DEFAULT NULL,
  `LON` double DEFAULT NULL,
  `SOG` double DEFAULT NULL,
  `COG` double DEFAULT NULL,
  `Heading` double DEFAULT NULL,
  `VesselName` varchar(255) DEFAULT NULL,
  `IMO` varchar(255) DEFAULT NULL,
  `CallSign` varchar(255) DEFAULT NULL,
  `VesselType` varchar(255) DEFAULT NULL,
  `Status` varchar(255) DEFAULT NULL,
  `Length` varchar(255) DEFAULT NULL,
  `Width` varchar(255) DEFAULT NULL,
  `Draft` varchar(255) DEFAULT NULL,
  `Cargo` varchar(255) DEFAULT NULL,
  PRIMARY KEY (`MMSI`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;

处理csv文件的python脚本

import pandas as pd
import pymysql
import time
class Ais:
    def __init__(self):
        self.conn = pymysql.connect(user="",password="",host="",database="",port=3306)
        self.cursor=self.conn.cursor()
    def aisSelect(self,MMSI):
        sql = "select * from ais where MMSI = %s"
        res_num = self.cursor.execute(sql,MMSI)  # 返回数据行数
        # self.cursor.fetchone() # 返回结果
        self.conn.commit()
        return res_num
    def aisInsert(self,message):
        sql = "insert into ais values(%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s,%s)"
        res_num = self.cursor.execute(sql,(message.MMSI,message.BaseDateTime,message.LAT,message.LON,message.SOG,message.COG,message.Heading,
                            message.VesselName,message.IMO,message.CallSign,message.VesselType,message.Status,message.Length,message.Width,
                            message.Draft,message.Cargo))
        self.conn.commit()
        return res_num
    def close(self):
        self.cursor.close()
        self.conn.close()
if __name__ == '__main__':
    start_time = time.strftime("%Y-%m-%d %H:%M:%S")
    print(start_time)
    ais = Ais()
    ais_cav_filePath = "G:/AIS_2020_01_01.csv"
    ais_csv = pd.read_csv(ais_cav_filePath)
    ais_num = 0
    for i in range(len(ais_csv)):
        s = ais_csv.loc[i].copy()
        s[pd.isna(s)] = "-"
        mmsi = s.MMSI
        insert_flag = ais.aisSelect(mmsi)
        if insert_flag == 0:
            ais.aisInsert(s)
            ais_num+=1
    ais.close()
    end_time = time.strftime("%Y-%m-%d %H:%M:%S")
    print(ais_num)
    print(end_time)

Web 服务:主要基于 Sringboot+Mybatis+Redis+Mapbox 等组成。
显示效果:
一共显示了12000条船舶,随着地图缩放等级船舶由亮点转变为类似箭头的图标,箭头指向依据船舶的COG设置。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-10-27 12:54:03  更:2021-10-27 12:55:19 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 3:32:31-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码