小赖子的英国生活和资讯

强化学习（Reinforcement Learning, RL）是一种让智能体/Agent通过与环境交互、试错学习来获得最优行为策略的机器学习方法。本文用一个简单的 Q-learning 迷宫示例，帮助你快速理解强化学习的基本原理。 强化学习入门：从试错中学习的艺术 Reinforcement Learning 101: The Art of Learning by Trial and Error 深度解析强化学习：Q-Learning算法详解 Deep Dive into Reinforcement Learning: Understanding the Q-Learning Algorithm 机器如何学会自己做决定？强化学习告诉你答案 How …

罗马四天三晚：顺路去看那座“歪着也能成地标”的塔 上两周去了趟意大利罗马，行程是四天三晚。我们选择在周一早上开车去伦敦卢顿机场（London Luton Airport），然后坐飞机到罗马，周四晚上七点多的飞机回英国。车直接停在了 Luton Airport Car Park Terminal 1，四天的停车费是 £84.99，价格比想象中还算可以接受。 之所以选这个时间段，是因为那一周刚好是英国的 half term 假期，如果是周五到周日的航班，机票贵得离谱。避开高峰期，周一走周四回，票价能省下一大截。 订好机票后我才发现，我的地理知识确实不太行——罗马（Rome）和比萨斜塔（Pisa）根本不在一个地方！ 两地相隔三百多公里，坐火车单程要三到四个多小时。原以为到意大利顺路就能看到那座传说中“歪着也能成地标”的塔，结果发现完全不是“一路顺风”的事。 不过既然来了，比萨斜塔（Leaning Tower of Pisa）是一定要打卡的。它是意大利最著名的地标之一，位于托斯卡纳大区的比萨市（Pisa），建于12世纪，是一座倾斜的独立钟楼。原本设计是垂直的，但因为地基松软，在建造过程中逐渐倾斜，如今反而成了独一无二的象征。每年都有无数游客来这里摆出“托塔”的经典姿势拍照。 我们在罗马的住宿就在市中心，离 Roma Termini（罗马特米尼火车站） 走路五分钟，是一个私人房东的公寓。第二天一早我们就出发去火车站打算坐车去比萨。 到了才发现——火车票太贵了！来回快车要 350多欧元，单程3个半小时，但得11点才能发车，估计票都快卖光了。按这个时间算，下午三点才能到，比萨都快关门了。工作人员说要不试试别家火车公司，并指了方向。 还好后来找到一班Regionale列车/慢车（意大利也有不同公司的火车），有票也便宜，四个人来回大约 180多欧元，单程大概 …

人生不停的折腾，对喜欢的事和物不断袪魅。来英21载，终于拥有了一个私人牌照。8核SUV，性能强劲，值得拥有！ 我的新车牌：X8 CPU 的故事 从 X86 CPU 到 X8 CPU：一次有意义的车牌之旅 X8 CPU：属于极客的私人车牌 求而不得的 X86，意外收获的 X8 CPU 一块写着“X8 CPU”的车牌，圆了我的极客梦 给人生加个“X8 CPU”：一块车牌的情绪价值 当极客买车牌：我与 X8 CPU 的故事 8核SUV，性能与情怀的双重升级 不是处理器，是我的车牌——X8 CPU 前几周我在博客里提到过，我参加了一个私人车牌的竞拍——那块车牌是 X86 …

我在英国申请HSBC Overdraft的全过程与心得 什么是HSBC Overdraft？我的申请经验与使用体会 英国银行Overdraft详解：以HSBC为例的真实申请经历 英国HSBC Overdraft申请记：为啥我也办了个透支额度 账户差点扣不上学费，我才去申请了HSBC Overdraft 英国银行透支服务（Overdraft）到底有啥用？我的真实体验 理财角度看HSBC Overdraft：短期周转的小帮手 透支不是坏事？谈谈HSBC Overdraft的利与弊 我最近申请了汇丰银行（HSBC）的透支额度（Overdraft），最高限额是5000英镑。我在网上填写完申请表后，系统提示大概需要一到两个工作日才能出结果。后来我收到一条短信，让我打电话联系HSBC。 我打过去之后，银行工作人员在电话里问了很多问题，比如日常开销情况，并且逐条核对我账户上的支出，主要是想了解哪些是固定支出。我猜他们是要根据收入与支出情况来判断是否批准透支申请。 这里顺便介绍一下 Overdraft。它和信用卡不太一样，是一种短期的银行借款服务。当账户余额不足时，如果正好有房租、学费或其他自动扣款（Direct Debit）要执行，没有 Overdraft 的话，扣款会失败；而有了 Overdraft，银行会临时垫付这笔钱，让账户余额可以为负数，从而确保重要支出顺利完成。透支额度其实就是银行给你的一条“备用资金线”，方便在现金流紧张时应急。当然，透支金额需要尽快还上，因为利息是按天计算的。以 HSBC 为例，透支利率一般在 19% 年利率（EAR，Effective Annual Rate，实际年化利率）左右，具体取决于账户类型和信用情况。 我向银行解释说，因为孩子在上私立学校，所以申请Overdraft主要是为了避免每学期缴学费时出现扣款失败的情况。我还说明我和我太太各承担一半学费，否则单靠我一个人的收入肯定不够。幸运的是，银行最终批准了我的申请，也就是说，只要我需要，银行随时可以为我提供最高5000英镑的透支额度。 …