MapReduce: Simplified Data Processing on Large Clusters

paper reading

mapreduce流程 首先将待处理文件分为M部分,然后复制多份用户代码到集群机器上 选取集群机器其中一台为Master,其余为worker,有M个map任务和R个任务,master选择空闲的worker给它map或者reduce任务 执行map任务的worker读取文件一部分–>系统自动Parse为多个(key1,value1)pair,每个pair都输入到用户制定的m...

Walle, 熔炉,釜山行

fuck this world

walle, 熔炉和釜山行 周六出去吃了顿大餐回来,身心俱疲,于是周末准备在寝室躺尸。我已经无聊到把吃了一个学期灰的switch拿出来玩了,玩了一会塞尔达还是觉得无聊(塞尔达游戏时间已经达到85hour。。。),于是打开豆瓣top250,依次往下看有哪些电影没看过。首先就看到walle,然后是熔炉,看完熔炉发现孔侑和郑有美好有魅力,又搜到他们两主演的釜山行,看到凌晨一点才看完。 wall...

2018暑期旅行

know this world

旅行行程 8月6日开始(周一) 第一天(8.6):早上9:05从全椒站出发,9:41到达合肥南站,10:25从合肥南站出发,12:06到达黄山北站,从黄山北站到西递,住宿,玩 第二天(8.7):早上出发坐车到达宏村,玩, 第三天(8.8):从宏村坐车到达屯溪,从屯溪到歙县,玩古城,住下 第四天(8.9):一早下出发到深渡,坐客船到千岛湖(7:40和11:30,能赶得上哪班坐...

leetcode1

enjoy this world

Longest Substring Without Repeating Characters The problem is in here 题目描述:这个问题是求一个字符串最长非重复字串(必须是相连的) 思路:一看到这个问题,我就想到用递归的方法求,毕竟能够分解成更小的问题。于是我写出了以下的代码 class Solution(object): def isUnique(self...

乌合之众

know this world

群体的观念、推理能力和想象力 观念形成路径 复杂观念 -> 不断简化成简单直接观念(没有严密的逻辑) -> 内化为群众情感 -> 产生巨大影响 -> 群众对旧制度进行破坏,形成新制度 以下观点 群众只能接受表面的,形象化的观念,即使内在是矛盾的。 从复杂观念简化到群众可以接受的观念需要时间,往往是几代人,所以在政治家施政时,为了迎合群众,会提出具有明显错...

Welcome to Dawei Blog

Hello World, Hello Blog

博客开通 自己总有一些思考关于技术的,关于生活的,每次想的都很投入,不记下来就觉得浪费了。正好看到github可以开通免费的博客使用(主要还是服务器对还是学生的我来说太贵了(逃),就把自己的一些思考记录下来 原主题 我在想主要分为下面几个主题 奇思妙想:主要记录自己的一些脑洞 leetcode:不用多说了,刷题思考 项目感悟:实验室或者自己的项目感想 技术随想:自己学习的...