基于深度强化学习的多路径传输控制协议数据包调度方法

    公开(公告)号:CN110278149A

    公开(公告)日:2019-09-24

    申请号:CN201910537886.6

    申请日:2019-06-20

    Applicant: 南京大学

    Abstract: 本发明公开了基于深度强化学习的多路径传输控制协议数据包调度方法。在多路径传输控制协议(MPTCP)中,通过设置周期性的调度机制,将数据包调度过程转化为马尔可夫决策过程,并通过深度强化学习,用神经网络表示MPTCP的数据包调度策略,并且学出各种网络环境下的最优数据包调度策略。从根本上解决启发式MPTCP数据包调度无法适应复杂多样的动态网络环境导致MPTCP性能下降的问题。本发明方法使用Actor-Critic强化学习框架,采用基于策略梯度的深度强化学习算法,直接对MPTCP数据包调度策略进行建模和学习,从而提高策略优化效率,加速MPTCP数据包调度策略神经网络的训练。

    基于深度强化学习的多路径传输控制协议数据包调度方法

    公开(公告)号:CN110278149B

    公开(公告)日:2022-10-18

    申请号:CN201910537886.6

    申请日:2019-06-20

    Applicant: 南京大学

    Abstract: 本发明公开了基于深度强化学习的多路径传输控制协议数据包调度方法。在多路径传输控制协议(MPTCP)中,通过设置周期性的调度机制,将数据包调度过程转化为马尔可夫决策过程,并通过深度强化学习,用神经网络表示MPTCP的数据包调度策略,并且学出各种网络环境下的最优数据包调度策略。从根本上解决启发式MPTCP数据包调度无法适应复杂多样的动态网络环境导致MPTCP性能下降的问题。本发明方法使用Actor‑Critic强化学习框架,采用基于策略梯度的深度强化学习算法,直接对MPTCP数据包调度策略进行建模和学习,从而提高策略优化效率,加速MPTCP数据包调度策略神经网络的训练。

    基于线阵式摄像机的双向实时车辆底盘图像合成方法

    公开(公告)号:CN105376485B

    公开(公告)日:2018-06-29

    申请号:CN201510758083.5

    申请日:2015-11-09

    Applicant: 南京大学

    Abstract: 本发明提供了基于线阵式摄像机的双向实时车辆底盘图像合成方法,其中实时数据分析及拼接,包括以下步骤:步骤(1),接受到拼接信号后,取得线阵式摄像机每帧的图像,保存至临时文件夹,直至拼接信号结束;步骤(2),利用Sobel算子,计算每张图中是否存在有效内容,将有效图片路径保存至数组当中;步骤(3),根据数组中图片路径,将图片正序拼接为一张底盘合成图片;步骤(4),调整合成图片的分辨率和比例。本发明满足了大多数应用场合。本发明中的控制方法使得车辆底盘拼接自动实时完成,杜绝漏检发生,所得车底盘图像完整,清晰度高分辨率达数百万像素,支持双向实时拼接,适应大多数应用场景。

    一种用于空间信息网络的高效多媒体传输方法

    公开(公告)号:CN108173851A

    公开(公告)日:2018-06-15

    申请号:CN201711454484.7

    申请日:2017-12-28

    Applicant: 南京大学

    Abstract: 一种用于空间信息网络的高效多媒体传输方法,客户端节点通过空间信息网络访问服务器节点、传输服务器节点的HTML文件、文字、图像等多媒体资源;传输启动阶段;进行多媒体传输,首先需要建立连接;多路并发传输数据,包含在上层应用发起新的多媒体内容请求时,只需要发送开启流的STREAM帧通告新的流编号,流建立成功后就可以将包含应用数据的帧封装进数据包进行发送;在多媒体业务的传输阶段,传输的可靠性采用序列化传输和丢包重传机制的方法加以保障;为了缩小需要应答确认的范围,传输的双方需要定时发送STOP_WAITING帧;服务器在完成一个多媒体内容的传输后,会将发送的最后一个帧的FIN标志位置1,表示一个流的结束;传输结束阶段。在所有流都关闭之后,双端的连接关闭。

    基于线阵式摄像机的双向实时车辆底盘图像合成方法

    公开(公告)号:CN105376485A

    公开(公告)日:2016-03-02

    申请号:CN201510758083.5

    申请日:2015-11-09

    Applicant: 南京大学

    CPC classification number: H04N5/23232 H04N5/23238 H04N7/181 H04N9/09

    Abstract: 本发明提供了基于线阵式摄像机的双向实时车辆底盘图像合成方法,其中实时数据分析及拼接,包括以下步骤:步骤(1),接受到拼接信号后,取得线阵式摄像机每帧的图像,保存至临时文件夹,直至拼接信号结束;步骤(2),利用Sobel算子,计算每张图中是否存在有效内容,将有效图片路径保存至数组当中;步骤(3),根据数组中图片路径,将图片正序拼接为一张底盘合成图片;步骤(4),调整合成图片的分辨率和比例。本发明满足了大多数应用场合。本发明中的控制方法使得车辆底盘拼接自动实时完成,杜绝漏检发生,所得车底盘图像完整,清晰度高分辨率达数百万像素,支持双向实时拼接,适应大多数应用场景。

    一种用于空间信息网络的高效多媒体传输方法

    公开(公告)号:CN108173851B

    公开(公告)日:2020-07-03

    申请号:CN201711454484.7

    申请日:2017-12-28

    Applicant: 南京大学

    Abstract: 一种用于空间信息网络的高效多媒体传输方法,客户端节点通过空间信息网络访问服务器节点、传输服务器节点的HTML文件、文字、图像等多媒体资源;传输启动阶段;进行多媒体传输,首先需要建立连接;多路并发传输数据,包含在上层应用发起新的多媒体内容请求时,只需要发送开启流的STREAM帧通告新的流编号,流建立成功后就可以将包含应用数据的帧封装进数据包进行发送;在多媒体业务的传输阶段,传输的可靠性采用序列化传输和丢包重传机制的方法加以保障;为了缩小需要应答确认的范围,传输的双方需要定时发送STOP_WAITING帧;服务器在完成一个多媒体内容的传输后,会将发送的最后一个帧的FIN标志位置1,表示一个流的结束;传输结束阶段。在所有流都关闭之后,双端的连接关闭。

Patent Agency Ranking