search

ZJ96 / City_Brain_TSC

kddcup2021_citybrain
4 stars 0 forks source link

segment_tree库以及效果 #1

Open ToTDream opened 3 years ago

ZJ96 commented 3 years ago

不是自己写的，github上找的，你是在参加这个比赛吗，感觉tsc的比赛重点不是强化学习的算法，而是state，reward设计和其他策略的选择

------------------ 原始邮件 ------------------ 发件人: "ZJ96/City_Brain_TSC" @.>; 发送时间: 2021年6月16日(星期三) 下午4:47 @.>; @.***>; 主题: [ZJ96/City_Brain_TSC] segment_tree库以及效果 (#1)

老哥你使用的segment_tree是自己写的么，我看docker环境里好像也没这个库，而且PYPI里这个库好像也更新了。另外能告知下这算法最好的指标是多少么？感谢！

— You are receiving this because you are subscribed to this thread. Reply to this email directly, view it on GitHub, or unsubscribe.

ToTDream commented 3 years ago

啊，误操作给删了....我参加了，但是太菜了哈哈哈，跑来学学经验。用的D3QN最好只能到8w辆车

ZJ96 commented 3 years ago

差不多我也菜，我最好的也就109278，用的d3qn，感觉状态的设计和reward的设计比较重要，那个官方提供的maxpressure都能上10万，他提供的原始的agent里没写那个几十秒换action的那个代码，所以默认的10秒效果不太行

------------------ 原始邮件 ------------------ 发件人: "ZJ96/City_Brain_TSC" @.>; 发送时间: 2021年6月16日(星期三) 下午4:55 @.>; @.**@.>; 主题: Re: [ZJ96/City_Brain_TSC] segment_tree库以及效果 (#1)

啊，误操作给删了....我参加了，但是太菜了哈哈哈，跑来学学经验。用的D3QN最好只能到8w辆车

— You are receiving this because you commented. Reply to this email directly, view it on GitHub, or unsubscribe.

ToTDream commented 3 years ago

我状态和奖励参考的 IntelliLight 后面也考虑过10秒一换太频繁了，切换的话还得加5秒红灯，可能效果不行，但是只在预赛的数据集上试了，感觉没啥效果，就没改......可能是预赛的数据太简单体现不出来

ToTDream commented 3 years ago

老哥可以的话加个微信交流下呗 xiang-0112