more >>再有一个月2019年就要过去了，这一年里好像什么都发生了，又好像什么都没改变。
我的生活在发生着什么呢？大概…..我变得喜欢听汪峰、Adele、还有Johnny Cash的歌；我变得会望着车窗外飞逝的光景没来由地泪湿眼眶；我变得越来越喜欢仰望天空；我变得越来越不敢在深夜推演公式。
各种ddl日常砸脸，论文也是毫无头绪，也做不出理想的实验数据；但最难的其实是生活，作为一个人去生活。
Two-armed Bandit
|
more >>RL问题有以下几个方面：
- 不同的actions导致不同的rewards
- rewards具有时延性
- action的reward取决于环境状态
OpenAI Spinning Up Part 1： Key Concepts in RL
|
more >>来自OpenAI Spinning Up Introduction to RL
简而言之，RL是研究agent(智能体，本文保留英文描述)如何通过反复的尝试来学习。我们通过奖励或惩罚agent的行为，使其在未来能以更高的概率去重复或放弃该行为。
Connecting Generative Adversarial Networks and Actor-Critic Methods
|
more >>Abstract
无监督的GAN和强化学习的actor-critic方法在优化困难方面声名显著。这两个领域的研究人员积累了大量的缓解不稳定和改善训练情况的策略。这里我们展示了GAN可以看作是一个特定环境中的actor-critic方法，在这个环境中actor无法影响奖励。我们对这两类模型稳定训练方法做了综述，不仅包括可以同时对二者使用的方法，还包括只针对特定模型的方法。我们也对一系列信息流更复杂的GAN和RL算法进行了综述。我们希望强调二者之间的联系来激励GAN和RL两个领域开发出通用，可扩展以及稳定的算法。
statapy——在jupyter里写stata代码
|
Stata是做生物统计/计量经济学的重要统计工具, 而python是做数据科学的利器, ipystata将stata和python结合在一起, 并能够在jupyter notebook中使用, 使得我们的工作效率大大提升。下面我们介绍一下, 如何安装stata,
more >>saspy——在jupyter里写sas代码
|
more >>saspy, 即是一个连接sas服务器和Python解释器的一个API, 适合在jupyter Notebook里面编辑代码，如果你安装了Anaconda，即是安装了Jupyter Notebook。安装saspy API:
十问 | 沉思录及其他
|
more >> 终于完了这本霍金沉思录，也是霍金先生的遗作，这位伟大的思想家留给世界的最后的礼物。作为多年来的霍金粉丝，读这部作品是酣畅淋漓，但也不乏惆怅满腹。毕竟，我们不会再有机会读到先生的作品了。
Michael Nielsen对weight初始化的解释
|
more >>当我们创建一个神经网络时，我们必须选择weights和biases的初始化方式。我们目前的方式是让weights和biases都使用独立的高斯随机初始化，标准化为均值0，标准差1。这种方式工作得挺好，也挺特别，如果我们回头审视下它，也许能找到设置weights和biase更好的方式，帮助我们的神经网络学得更快。
send boxes to alice(easy version)
|
more >>题意
有$n(1\leq n\leq 10^5)$个盒子，每个盒子有$a_i(0\leq a_i \leq 1)$个糖果，你每一次可以将第$i$个盒子里的糖果放到第$i-1$或$i+1$个盒子中（如果盒子存在）。最后要使每个盒子的糖果数量都整除$k(k>1)$（注意盒子可以为空），问最小操作数。
缺失模块。
1、请确保node版本大于6.2
2、在博客根目录（注意不是yilia根目录）执行以下命令：
npm i hexo-generator-json-content --save
3、在根目录_config.yml里添加配置：
jsonContent:
meta: false
pages: false
posts:
title: true
date: true
path: true
text: false
raw: false
content: false
slug: false
updated: false
comments: false
link: false
permalink: false
excerpt: false
categories: false
tags: true
计算机科学先驱阿兰·图灵说，“We can only see a short distance ahead, but we can see plenty there that needs to be done.”<br> 我们只能向前看到一小段未来，但我们可以在那里看到足够多可以做的事。很难说当代一个受过良好教育的人，一个理解银河系、理解宇宙演化史、理解现代社会法则的人和16世纪一个仍然相信地球是平的的人有什么本质的区别。看起来16世纪的你一定会比21世纪的你更愚蠢，但从未知的方面看，两者其实同等幼稚。今天宏大的宇宙观可能就是另一个版本的平坦地球，如果被25世纪的人观察的话。正因为如此，图灵的话才会有意义。正是因为所有人都没有大自然聪明，才会有文明的发展，才会有人秉持真理去挑战所谓的人类权威；正是因为问题永远都无法完善，才会有生机与希望，才会有足够多的工作可以做。
所以我想实际上图灵是在说，既然都离不开这艘飞船，那就让我们在这里做一些可以做的事吧，或许会有些惊喜也说不定呢。