学界 OpenAI MiniWoB环境介绍:与网站交互的强化学习代理基准

原标题:学界 OpenAI MiniWoB环境介绍:与网站交互的强化学习代理基准

Mini World of Bits,简称 MiniWoB,是一个用于与网站交互的强化学习代理的基准。其代理可以感知小网页(210×160 像素)的原始像素和产生键盘和鼠标动作。

该环境用 HTML/Java/CSS 写成,设计的目的是为了测试代理与常见网页浏览器元素的交互能力,这些元素包括按钮、文本框、滑块、日期选择器等等。这个基准的环境可以通过 OpenAI Universe 获取。

其中的每一个环境都是一个 210 像素高、160 像素宽的 HTML 网页(即与 ATARI ALE 模拟器的尺寸相同)。其最顶上的 50 个像素(黄色背景)包含了任务查询——一个关于代理应该在坏境所做的事情的描述。该环境的逻辑是用 Java 编写的,其会监控事件并分配奖励(reward)。我们认为 MiniWoB 就类似于是视觉识别领域的 MNIST 数据集,其中的这些环境很小、是自包含的(self-contained)、并且含有许多代理在浏览互联网时需要克服的挑战。

该基准中的任务包含许多常见的 UI 元素,范围涵盖从简单(比如点击取消按钮)到复杂(比如,搜索从 SFO 到 LAX 的 2016 年 12 月 5 日的航班并预定最便宜的机票)等各种难度。

MiniWoB 基准包含了一系列训练/测试分开的环境。其终极目标是在无需太多交互步骤的情况下在测试环境上良好地执行任务。被测试的模型可以在训练环境中进行不限次数的预训练。我们也计划发布训练环境的演示,因为许多模型如果仅靠强化学习,可能难以取得良好的效果。

贡献环境。因为该环境目前还非常小,而且也很容易通过 Java/HTML/CSS 书写,所以我们也鼓励社区为未来该基准的发行版提供贡献。

MiniWoB 的完整源代码将在未来几周通过 GitHub 发布,所以贡献也将变得非常方便。

为了训练强化学习代理,我们调整了运行 MiniWoB 环境的 Universe 指令。下面的简单代码可以用来创建一个可以以 5 FPS 的速度在 MiniWoB 的 160×160 像素的「游戏」区域随机点击的代理:

更多精彩报道,尽在https://www.camsleeve.com

镇原县平泉镇2017年易地扶贫搬迁南徐村什字安置点道路及排水工程招标公告

你现在所在的位置是:首页甘肃招标招标公告 详细内容

镇原县平泉镇2017年易地扶贫搬迁南徐村什字安置点道路及排水工程招标公告

1、镇原县平泉镇2017年易地扶贫搬迁南徐村什字安置点道路及排水工程,已由镇发改发【2018】304号文件批准建设。现对该项目的施工进行公开招标,选定承包人。

2.1工程内容:混凝土硬化、路沿石、渗水砖硬化、树池板、绿化、排水管道、检査井、单箅雨水口。180厚混凝土面积为2194㎡、路沿石维护长度1047m、100厚素混凝土面积为128㎡、DN200PE双壁波纹管112m、DN30OPE双壁波纹管210m、DN400PE双壁波纹管253m、DN500PE双壁波纹管150m、直径700检査井13个、直径1000检査井6个、单箅雨水口38个。招标控制价:899151.66元。

更多精彩报道,尽在https://www.camsleeve.com

【OPE体育】莱万特vs 皇家马德里 两连胜

据OPE体育的统计人员统计,两支球队在过往的交手中莱万特处于明显的下风。双方近21次交手莱万特仅取得了3胜2平16负的成绩,在巴伦西亚市政球场进行的近四次交手中莱万特更是全部失利。上一次莱万特可以在这座球场战胜皇马已经是在7年之前的事情了,因此在士气上皇马无疑会处在一个明显的优势地位。在双方本赛季的首次交手中,皇马在主场被对手逼平,在被对手先打进一球之后皇马才如梦初醒并最终避免了主场失利的尴尬。但是与那个时候的阵容相比,现在的这套阵容在前场无疑更具威胁,毕竟首回合交锋中罗纳尔多和贝尔均纷纷缺席。

莱万特主帅穆尼斯在本赛季的比赛中尝试过多种阵型以应对不同的对手。首回合比赛面对对手的强攻他使用了541的阵型,但是上轮联赛面对弱旅拉科他则在客场使用了433的攻击阵型。因此可以判定穆尼斯是一位善于改变的主帅,本场比赛不出意外的话穆尼斯应该还是会继续使用541的防守阵型。本赛季莱万特的一个最大特点就是球队攻击力的不足,在整个联赛中他的进球数只能排在联赛尾端,但是相反在防守端他们做的则不算太差,在积分榜后半段球队中莱万特的防守甚至是最好的。因此摆出一个大巴的防守阵型是有望在主场取得分数的,而一旦选择进攻的话他们的结果可能就不会是输一两个球的事情了。在两队过往的比赛中莱万特曾经五球不敌对手,那样的惨案现在还留在穆尼斯以及他的球队心中。

皇马本赛季的客场积分是排在联赛第三,上轮比赛刚刚客胜强敌之后无疑在士气上以及队员的信心上都会有一个极大的提升,这也使得本场继续做客巴伦西亚市的比赛更被高看一线。OPE体育的工作人员同样认为本场比赛皇马如果不出意外的话取胜是不成问题的,在OPE体育的官网上所给出的指数也是向着皇马示好。作为皇马的官方赞助商,OPE体育所给出的指数无疑相比与很多公司都更加具有代表性,大家可以持续关注一下。

OPE体育是一家来自于亚洲的顶级体育运营公司,他们不仅仅是活跃于足球赛事,多种运动多种游戏都是他们的拿手好戏。在这里你会暂时忘掉比赛的激烈,在这里你会真正的做到享受自己,享受体育给你的乐趣。

更多精彩报道,尽在https://www.camsleeve.com

OPE赞助英超:切尔西的万金油 可以从门将踢到前锋

切尔西在新赛季英超取得两连胜开局,而巴西国脚威廉均首发出场。威廉在接受切尔西官方采访时,谈到了对一些队友们的评价,尤其是对好友大卫-路易斯。

“在去客场的旅程我总是和大卫-路易斯在一起,我从8岁就认识他,因此我俩有着很好的关系。我们会一起玩《堡垒之夜》游戏,我也喜欢阅读,然后在睡前我会祈祷。通常我会和巴西同胞们一起聚餐,比如大卫-路易斯、埃莫森、若日尼奥,不过若日尼奥和埃莫森现在都是一半巴西人一半意大利人,因为他们都选择为意大利国家队效力,但我很乐意他们和我一起为巴西效力。”

威廉称大卫-路易斯可以胜任场上不同位置,“队内非门将球员中也许就是他最喜欢客串门将,他疯狂到足以担任门将。如果在比赛中我们不得不让一名球员客串门将,我相信他会主动请缨。在我加盟切尔西之前,我知道特里也曾在一场比赛中这么做过。哪位后卫可以成为优秀的前锋?还是大卫-路易斯,他年轻的时候曾是一名中场,但他很有攻击力,因此我认为他会胜任前锋位置。”

接着威廉还谈到了其他一些队友,“最近每个人在训练中都表现得很好,但如果要选择最好的,我会说若日尼奥和科瓦契奇,他们都为球队带来了很多。埃莫森的任意球很出色,尤其是他的左脚。更衣室播放的音乐由吕迪格控制,他是我们的DJ,也是最吵闹的人。大卫-路易斯绝对是最搞笑的球员,他很疯狂,总是在开玩笑。坎特是更衣室内最安静的人,他非常害羞,你可以看到,即便赢得了世界杯他也不想举起奖杯,这简直令人难以置信。输球后谁最擅长提振士气?卡希尔、大卫-路易斯、阿斯皮利奎塔,他们有着良好的领导素质,在这种情况下表现出色。”

最后威廉表示,“我不知道谁在Instagram上发的照片最吸引人,但我们没有太多球员一直更新Instagram,我有个账号,但我只是时不时用一用。球迷们应该在社交媒体上关注谁?当然是我自己,威廉。哪位巴西外援学英语花费的时间最长?说实话,这里每个人的英语都说得不错,虽然若日尼奥和埃莫森加盟球队的时间不长,但他们很快就学会了英语。过去拉米雷斯还在这里效力时,他学英语用的时间最长。”

更多精彩报道,尽在https://www.camsleeve.com

独家:段奕宏上春晚特激动 人都变open了

新浪娱乐讯 2月18日,央视春节联欢晚会在一号演播厅上演。张丰毅、段奕宏[微博]、朱亚文[微博]演绎的《中华好儿孙》是第二个节目登台。其实段奕宏差点与此节目擦肩而过,因为一开始收到春晚邀请时,曾想过拒绝,因为觉得自己唱歌不是科班出生,担心做不好。但是一旦要上春晚之前,自己就特别激动。原本很认生的一个人,顿时变open了。

为了上春晚,段奕宏还找声乐老师上课。自我感觉与朱亚文、张丰毅的水平差不多。段奕宏自曝与张丰毅、朱亚文相处细节。段奕宏与张丰毅因为一起合作过,所以彼此之间比较熟悉,但是朱亚文就比较拘谨,老把两人当老师长辈。

段奕宏:我不知道春晚的那个组委会邀请我的用意是什么?我当时12月份正在大连拍《大连故事》,我曾两度跟我的经纪人说咱别去了,我不想去了,因为什么呢?因为我太在意春晚这个晚会了,你得有一个好的上乘的作品,你说我干吗去,唱歌也不是我主业,我也没有精力心力弄这个作品。结果这个团队,我们经纪团队跟春晚负责人他们在交流、沟通,说我们请的是三位影视人员,有丰毅、朱亚文想促成这个事情挺好的,我做一些事情容易一根筋,这《大连故事》一直在拍着,有的时候拍得非常疲惫,主要还是对自己的唱歌和这个节目的质量是很担心的。所以一开始是拒绝的,最后被说服,这三个都是影视演员,唱歌,都差不多吧,水准,练练吧专门请了声乐老师上了几堂课。

段奕宏:我是上了将近四节课,找了一位老师声乐教授上的,一直在鼓励我,没问题,没问题,那么低的 要求我,肯定没问题,但上一上,准备准备还真的是不一样,还真的不一样。

段奕宏:差不多吧,都差不多吧。没有像羽泉[微博]唱得那么好嘛,也没有《我是歌手》那些特好听的唱歌演员们唱的,都不是专业的嘛,心里有底了。

段奕宏:我觉得是,如果用专业的水准来要求我们仨,真的是挺为难我们的,这首歌本身是铿锵有力的,加上我们这三个演员用个人的所谓的这种精神状态来诠释这首歌是很合适的,也是为这个歌添彩的。

新浪娱乐:您之前接受采访的时候,感觉自己还没有找到特别硬的感觉,现在怎么样?

段奕宏:我记起来了,就是很容易,就是越找这个硬,三块硬板都摆在那了,一开始我们彩排属于三块硬板杵在那,真不知道手不知该哪儿放了,还是掉坑里,太在乎外在的东西,我觉得不要被所谓的硬汉,阳刚气所被坑了,这个还是怎么活,实实在在的活生生的一个男人精神力量或者男人的精神气质,我觉得这个重要。

段奕宏:也不完全是,我平时我挺认生的,一个环境我挺认生的,不可能完全打开自己,得熟一会,你看我现在状态比较open,是因为那手歌唱得太铿锵有力了,还处在一种兴奋状态。

新浪娱乐:您说您认生,第一次跟张丰毅、朱亚文两位一起的,您会有认生的感觉吗?

段奕宏:有啊,我跟丰毅兄还好,可以开玩笑,因为丰毅兄,我们合作过《白鹿原》,跟亚文是第一次见面,不可能一上来胡说八道,乱开玩笑,也不可能,跟丰毅兄还是可以,他还是要接触,接触一下。本着三个人来合作是一个作品,三个人来成全一个作品,如果你从工作意义角度来看的话它就是一个合作关系。

段奕宏:亚文也有点拘一开始,见了丰毅兄,好像是我比他大一点,也挺拘,有时候,我们三个人在后台等着,就一把凳子,丰毅说,来奕宏坐这儿,好,坐一耳,一看亚文在那站着,我得起身,哥,往那边点。亚文,不不不,我站着,其实没必要,真没必要,大哥,往那边屁股挪一点,我跟丰毅开玩笑,我觉得挺好的。三个人在一起,我觉得既要展现个人的一种精神气质还要共同完成这首歌。

新浪娱乐:现在网友都说,不知道您有关注网友的评论,你们这个节目是男性荷尔蒙群,直男必看的节目?

段奕宏:这个我也不知道从何说起,确实我们三个人得益于每个人创作的角色,人物形象给大家留下这样的印象,如果通过一首歌完成能展示,我觉得不尽然,我的主业还是作品,从作品当中可能才能更好的去呈现一个男人的风度吧。

段奕宏:没想过,现在正在想说跟你在一起聊天,我还真没想待会去上台什么样的感觉。

段奕宏:倒计时,没事,外面不是放着炮嘛,我回家12点必须得放炮吃饺子,我们是8点10分,11分钟的节目,第二个,你不要去设想,全世界有十几亿人在关注这个晚会,也不要设想,也不要给自己太大的压力,准备了就这么多,我觉得拿出最自然的状态,对歌的诠释,喜气洋洋的呈现这个节目就OK了。

段奕宏:当然了,当然了,现在是依靠了就会偷懒了,没有依靠必须自给自足。(辛佳/文 夏祺/摄影)

更多精彩报道,尽在https://www.camsleeve.com

组图:周杰伦现身《新歌声》海选现场 坐音乐专车副驾兴致十足_高清图集_新浪网

新浪娱乐讯 22日中午《中国新歌声》音乐试音专列车上海站正式开始,导师周杰伦坐在副驾驶盲听,随时接受路人上车试音,一旦通过将给出盲选直通卡,保送盲选现场! 让我们一起期待吧!

新浪娱乐讯 22日中午《中国新歌声》音乐试音专列车上海站正式开始,导师周杰伦坐在副驾驶盲听,随时接受路人上车试音,一旦通过将给出盲选直通卡,保送盲选现场! 让我们一起期待吧!

新浪娱乐讯 22日中午《中国新歌声》音乐试音专列车上海站正式开始,导师周杰伦坐在副驾驶盲听,随时接受路人上车试音,一旦通过将给出盲选直通卡,保送盲选现场! 让我们一起期待吧!

新浪娱乐讯 22日中午《中国新歌声》音乐试音专列车上海站正式开始,导师周杰伦坐在副驾驶盲听,随时接受路人上车试音,一旦通过将给出盲选直通卡,保送盲选现场! 让我们一起期待吧!

新浪娱乐讯 22日中午《中国新歌声》音乐试音专列车上海站正式开始,导师周杰伦坐在副驾驶盲听,随时接受路人上车试音,一旦通过将给出盲选直通卡,保送盲选现场! 让我们一起期待吧!

新浪娱乐讯 22日中午《中国新歌声》音乐试音专列车上海站正式开始,导师周杰伦坐在副驾驶盲听,随时接受路人上车试音,一旦通过将给出盲选直通卡,保送盲选现场! 让我们一起期待吧!

更多精彩报道,尽在https://www.camsleeve.com

业界良心!AMD GPUOpen正式上线:开源福音

去年底,AMD在一次技术峰会上介绍了其GPUOpen开源计划。今天,这一项目正式推出了,这也是AMD有史以来最大规模的开源工程,游戏、图形、计算开发者可以从AMD那里得到几乎所有需要的资源,包括开发套件、效果库等等。

该项目的领导人之一Nicolas Thibieroz也骄傲地表示,这标志着AMD一种全新哲学理念的开端。

AMD最初是想针对封闭的NVIDIA GameWorks提供一套公开的解决方案,然后发现可以做的更多,于是就将各种开发资源都整合了进去,提供给开发者。

-专业计算:主要是HIP(异构计算移植接口),可将任意NVIDIA CUDA代码转换成C++代码,从而通过CUDA NVCC、AMD HCC编译器执行。这同样是针对CUDA的封闭性而做的。

当然还有其他很多专业计算资源,比如GCN 3 ISA、HSA Runtime等等。

NVIDIA RTX 2080/RTX 2080 Ti首发评测:感受12年来GPU最大革命

一、前言:NVIDIA革命性跨越 显卡又热闹起来了 作为GPU显卡行业的领头羊,NVIDIA的新产品发布节奏多年来一直非常稳,而且每一代都有极大的创新和提升(完全不知牙膏味儿),产品线布局十分丰富

Office 2019正式版面向Windows/macOS开放下载:个人版249美元

更多精彩报道,尽在https://www.camsleeve.com

OPE体育直播:曼联已无退路唯有取胜才能缓解危机

《OPE足球直播》9月2日讯联赛第4轮面对伯恩利,重压之下,曼联已无退路,唯有取胜,才能缓解危机,对穆里尼奥如此,对曼联也如此。

两连败之后,曼联已经到了最危急的关头。即便穆里尼奥再诡辩,也承受不了连败带来的舆论压力,即便诸如内维尔等名宿力挺穆里尼奥,想给他营造一个良好的备战环境,但是依然抵挡不住连续失败带来的冲击,如果对伯恩利再无法获胜,那穆里尼奥的结局,可能在曼联真的就没有明天了。

弗格森说过,曼联是宇宙最大的球队,容不得一点瑕疵。何况是两连败,具体来说,这两场败仗让人气愤,对阵布莱顿半场丢仨,曼联有过这项纪录,还要追溯到2015的范加尔时期。曼联在主场对热刺完败3球,曼联有过这一项输球纪录,还是在2014年,对穆帅而言,则是他人生中最大的主场失利,而开局三场遭受两败,更是1992/93赛季弗格森开启曼联王朝的岁月。

如果曼联再输给伯恩利,将继续带领红魔新一代球迷了解历史。1986/87赛季,阿特金森率领的曼联在头四场输了三场,而目前的净胜球(-3),也是创下了1992年8月以来最差的纪录,而上一次曼联净胜球出现负数,还是2014年9月份。

如果拿下伯恩利,曼联或许可以转危为安。其一,目前战绩最好的球队,利物浦和切尔西4战全胜12分到手,如果曼联此役锁定胜利,分差保持在6分,还有的追,不至于让自己提前告别争冠军团。

其二,该场若胜利最重要的影响还是对于舆论危机的化解。在当今媒体业高度发展的当下,曼联几被舆论压垮。而对穆里尼奥而言,他需要为自己证明仍是那个野心勃勃的狂人,仍是那个对于胜利无所不能的魔力鸟。

好在,伯恩利近况不佳,3轮比赛他们比曼联更惨,1平2负仅收获1分,新赛季将为保级而战,而过往17场顶级联赛对阵曼联,只赢过1场,还要追溯到2009年8月份,而曼联更是在过往10场比赛中有9场对伯恩利保持了零封,可谓是优势明显。最关键的时分,曼联需要一场胜利,胜利会如期而至么?

OPE体育什么时候上线

上海海事大学留学生们的“中国情

在上海海事大学的校园里,有这样一批留学生,他们与中国同学在同一个教室上课,在同一个图书馆自习,在同一个实验室做科研,在同一个体育场上踢球……他们痴迷于中国文化,喜欢中国诗词,学习中国武术,品尝中国美食,遍览中国美景……他们非常珍惜来上海学习的机会,在海事大学的学习让他们十分陶醉,因为中国对他们来说充满了很大的吸引力。

巴基斯坦小伙阿杜:汉字线月,在“隽永诗文,友谊之歌”上海市2017年留学生中国诗文诵读大赛的舞台上,巴基斯坦留学生“阿杜”一身汉服装束,字正腔圆、抑扬顿挫地吟咏起苏轼的名篇《念奴娇 •赤壁怀古》,举手投足间传递出悠扬的古风古韵,充满了蓬勃豪迈的激情。出神入化的演绎深深感染了在场的每一位观众,让他最终获得了大赛的人气选手优胜奖。

同样在今年11月举行的“2017年上海市大学生武术锦标赛”上,蝉联男子长拳冠军的David也来自上海海事大学。

上海海事大学物流管理专业的留学生Louis有“多重身份”。他不仅是上海海事大学校足球队队员,还在市区足球俱乐部、临港地区的多所中小学担任足球教练。

Louis戏称小时候是看着中国电视剧《西游记》长大的。申请到中国政府奖学金的他,放弃国内的工作,2014年来到上海海事大学。他十分珍惜这次机会,他认为中国给各国留学生带来的不仅仅是一份公费留学奖学金,更是一次难得的走出国门求学的机会,“在中国,我们所学到的知识,看到的‘中国故事’,都是人生最宝贵的财富。”

谈起毕业后的打算,Louis表示自己可能回国,也希望能留在中国做一名足球教练,为中国的足球发展献一份力。“中国足球,一定要从娃娃开始,我最大的愿望,就是想看到中国的孩子,能像我们国家的孩子那样,每天踢着足球快乐长大。”Louis说,他愿意作为一名民间的文化使者,促进国际文化交流,传递中加人民的友谊。

“到中国去吧,学习汉语对未来很有帮助。” 在叔叔这句线岁的越南女孩儿Nguyen申请到上海市政府奖学金,只身一人第一次踏上中国的土地。

“来中国后,我才发现,中国要比我之前想象的要好得多。”作为2017届新生,Nguyen说她对中国的了解可谓一日千里。初来中国时,她在同学的帮助下,首先下载使用的App是百度地图和微信,后来开始下载支付宝,然后是淘宝。地铁四通八达、微信随时沟通、网络随时购物……生活的便利让Nguyen很快爱上了中国,留学的经历也带给她许多前所未有的体验。

OPE体育什么时候上线

GTA5》安装OpenIV重复下载解决方法及安装教程 GTA5OpenIV不了怎么办

《GTA5》OpenIV安装不了怎么办?很多玩家表示在安装过程中,一直重复下载过程,今天小编带来“寒潭孤舟”分享的《GTA5》安装OpenIV重复下载解决方法,希望对大家有帮助,一起来看吧。

这时候请保证网络正常链接,根据网速不同,需要1-2分钟时间下载安装内容。

OPE网站靠谱吗