第1章 游戏之乐——快速找出故障机器

转载:编程之美_1.5_快速找出机器故障

题目:假设一个机器只存储一个标号为ID的记录,假设每份数据保存2个备份,这样就有2个机器存储了相同的数据。其中ID是小于10亿的整数

问题1、在某个时间,如果得到一个数据文件ID的列表。是否能够快速的找到这个表中仅出现一次的ID?即快速找出出现故障的机器存储的数据ID。

问题2、如果有两台机器死机呢?(假设同一个数据的俩个备份不会同时丢失,即列表中缺少的是两个不等的ID)

扩展题、如果所有的机子都有三个备份,也就是说同一ID的机子有三台。而且同时又有三台机子死机,还能用上面的方法解决吗?

如果有N台备份,又同时有N台机器死机呢?

~~~~~~~~~~~~~~~~分割线~~~~~~~~~~~~~~~~~~~~~~

问题重新阐述:

问题1、已知一个数组,数组中只有一个数据是出现一遍的,其他数据都是出现两遍,我们要把这个数据找出来

问题2、已知一个数组,数组中有两个不同的数据都出现一遍,其他数据都是出现两遍,我们要把这两个数据找出来

问题3、已知一个数组,数组丢失了三个数据,我们要把这三个数据找出来

之后可以扩展到N个

~~~~~~~~~~~~~~~~~分割线~~~~~~~~~~~~~~~~~~~~~

问题1、已知一个数组,数组中只有一个数据是出现一遍的,其他数据都是出现两遍,我们要把这个数据找出来

方法一、使用计数排序(借助map)

思想:遍历整个ID列表,使用Map记录每个ID出现的次数。之后,只出现一次的ID为所求

时间复杂度O(N),空间复杂度O(N)

注:不用map,而用数组的话,空间复杂度会大于N(N表示有N个数),应该是10亿(ID的最大值可能为10亿)

缺点:空间复杂度太大,对已经出现过两次的ID仍要保存,但它已经不可能是出故障的机器了

方法二、仍使用计数排序,但是对已经出现过两次的ID不在存储

思想:遍历列表,对于每一个ID,先检查hash表中是否有与之相同的ID

若有,则从Hash表中删除该ID;

否则,将该ID加入到hash表中。

这样,遍历完列表后,hash表中剩下的那一个元素即为所求ID。

时间复杂度O(N),空间复杂度最好为O(1),最坏为O(N)

方法三、利用异或运算(推荐使用)

思想:将列表中的所有ID异或,之后得到的值即为所求ID。

利用异或运算可以得到

X^X=0   X^Y=Z  X^0=X

X ⊕ X = 0   X ⊕ Y = Z  X ⊕ 0 = X
比如说ID为 2 1 2 3 1 要找的ID为3
2的二进制为010,1的二进制为001
3的二进制为011
则2 ⊕1 = 010⊕001= 011
011 ⊕2 = 011⊕010=001=1(2⊕1⊕2 = 1)
1⊕3 = 001⊕011=010
010⊕001=011 = 3
最终的结果仍然是那个只出现一次的数  

时间复杂度为O(N),空间复杂度为O(1)。在时间和空间上,基本已经达到最优。

缺点:前提是只有一个ID出现一次,若出现多次,则不适合

方法四、利用 "不变量" (推荐使用)

思路:这里,所有ID的和为一个不变量,对现在剩下ID求和。所有ID的和与剩下ID的和之差即为所求ID。

时间复杂度:O(N)时间,空间复杂度O(1)

总结:使用异或 和 不变量 都已经很优化。均能在只遍历一次列表,只需一个变量的条件下解决。

~~~~~~~~~~~~~~~~~分割线~~~~~~~~~~~~~~~~~~~~~

问题2、已知一个数组,数组中有两个不同的数据都出现一遍,其他数据都是出现两遍,我们要把这两个数据找出来

题里面是丢失的是两个不同的数据,我们这里两种情况都考虑下

如果缺少的两个数字不相同,

方法:进行异或操作

思路:由于缺少的数不同,则最后异或的结果不为0。

(1)对数组中所有的ID进行异或,结果为a
(2)我们找到a的二进制表示中,最低一位为1的位置b
(3)根据b位是否为1,将ID数组中的数分为两个数组,其中一个数组中的b位为1,另一个队列中的b位为0。
(注意,每个数组中,除了那个只出现一次的数外,其他数都是出现两次的,此时就可以在数组内使用异或操作)
(4)然后对两个数组,分别进行异或操作,则将得到两个不为0的数字。即为所丢失的两个ID。  

如果缺少的两个数字相同

(此时数组中所有ID都是成对出现,异或值还是为0,不能使用异或实现)

方法:可以使用不变量实现。丢失两个,生成两个方程,联立求值

此时我们采取的方法如下:

(1)首先计算出初始未丢失之前,所有ID之和。
(2)然后计算出丢失之后的ID之和,然后(1)(2)结果进行相减操作,得到方程x+ y = a。
(3)利用丢失前后平方和之差,来与(2)进行联立,得到方程x * x + y * y = b。
(4)对两方程进行联立,即可以求出最终的结果。

~~~~~~~~~~~~~~~~~分割线~~~~~~~~~~~~~~~~~~~~~

问题3、已知一个数组,数组丢失了三个数据,我们要把这三个数据找出来,之后可以扩展到N个

方法一:我们需要建立三/N个方程,求出这些都是的数

此时,当方程为N时,要求N个方程可不好求

方法二:使用计数排序 + 计数值达到A时Map不在存储

这时,最终可以得到这几个数

~~~~~~~~~~~~~~~~~分割线~~~~~~~~~~~~~~~~~~~~~

相关题目

给你一副杂乱的扑克牌(不包括大小王),任意从其中抽出一张牌,怎样用最简单的方法来知道抽出的是1~13中的那一张?(不要求知道花色)

方法:利用不变量

事先算好所有牌的和(1+...+13) x 4 = 364

然后分别减去留下的牌点数,最终得到的就是抽出的那一张

时间: 2024-10-17 13:06:40

第1章 游戏之乐——快速找出故障机器的相关文章

快速找出故障机器

题目描述 关心数据挖掘和搜索引擎的程序员都知道,我们需要很多的计算机来存储和处理海量数据. 然而,计算机难免出现硬件故障而导致网络联系失败或死机.为了保证搜索引擎的服务质量,我们需要保证每份数据都有多个备份. 简单起见,假设每个机器存储一个标号为ID的记录(ID是小于十亿的整数),假设每份数据都保存两个备份,这样就有两个机器储存了同样的数据. 1.在某个时间,如果得到一个数据文件ID的列表,是否能够快速地找出这个表中仅出现一次的ID? 2.如果已经知道只有一台机器死机(也就是说只有一个备份丢失)

编程之美 1.5快速找出故障机器

题目: 有很多服务器存储数据,假设一个机器仅存储一个标号为ID的记录,假设机器总量在10亿以下且ID是小于10亿的整数,假设每份数据保存两个备份,这样就有两个机器存储了同样的数据. 问题是:1.假设在某个时间得到一个数据文件ID的列表,是否能快速地找出表中仅出现一次的ID?即快速找出出现故障的机器存储的数据ID. 2.如果有两台机器出现故障呢?(假设存储同一份数据的两台机器不会同时出现故障,即列表中缺少的是两个不等的ID) 给出了4种解法思路 解法一: 最传统的比较列表,需要遍历整个列表,记录每

快速找出故障机器(single number)

简单起见,假设每个机器存储一个标号为ID的记录(ID是小于十亿的整数),假设每份数据都保存两个备份,这样就有两个机器储存了同样的数据. 1.在某个时间,如果得到一个数据文件ID的列表,是否能够快速地找出这个表中仅出现一次的ID? 2.如果已经知道只有一台机器死机(也就是说只有一个备份丢失)呢?如果有两台机器死机呢(假设同一个数据的两个备份不会同时丢失)? 对应的是leetcode的Single Number,找出唯一一个出现一次的数字(其他数出现两次) 思想:异或思想,异或之后得到的结果就是单独

编程之美学习之快速找出故障机器

这种问题以及方法很常见.主要是思路要开阔,讲已知的问题抽象成数学模型或者函数表达式,这正是数学建模的真谛,problem solving(解决实际问题的能力). 法一:利用计数排序,用数组记下每个ID出现的次数,然后找出出现一次的那个ID,时空复杂度都是O(N).现在如果数据量很大,那么这样的空间复杂度是无法被容忍的 法二:利用两个相同的数异或结果为0,将所有的ID都异或一遍,显然最后剩下的值,即为出现次数为1次的那个数. 法三:如果存在两个数据出现一次的情况,还是利用异或,只是得将这两个出现一

编程之美之找出故障机器

问题:假设一个机器仅仅存储一个标号为ID的记录(ID小于10亿的整数),每个数据保存2个备份,这样就有2个机器存储了同样的数据. 提问1:某时间如果得到一个数据文件ID的列表,是否能够快速地找出这个表中仅仅出现一次的ID? 提问2:如果已经知道只有一台机器死机(即只有一个备份丢失)呢?如果有2台机器死机(设同一个数据的两个备份不会同时丢失)? 解提问1转换为有很多ID,其中只有一个ID出现次数小于2,其他正常ID出现次数等于2,如何找到这个次数为1的ID. 解法一   遍历计数 思路:遍历ID列

程序员面试100题之十:快速找出一个数组中的两个数字,让这两个数字之和等于一个给定的值(转)

能否快速找出一个数组中的两个数字,让这两个数字之和等于一个给定的值,为了简化起见,我们假设这个数组中肯定存在至少一组符合要求的解. 假如有如下的两个数组,如图所示: 5,6,1,4,7,9,8 给定Sum= 10 1,5,6,7,8,9 给定Sum= 10 分析与解法 这个题目不是很难,也很容易理解.但是要得出高效率的解法,还是需要一番思考的. 解法一 一个直接的解法就是穷举:从数组中任意取出两个数字,计算两者之和是否为给定的数字. 显然其时间复杂度为N(N-1)/2即O(N^2).这个算法很简

经典算法学习——快速找出数组中两个数字,相加等于某特定值

这个算法题的描述如下:快速找出一个数组中的两个数字,让这两个数字之和等于一个给定的值.目前我假设数组中的都是各不相等的整数.这道题是我在一次面试中被问到的,由于各种原因,我没回答上来,十分尴尬.其实这道题十分简单,我们使用相对巧妙的方法来实现下.注意不使用两层循环的元素遍历.示例代码上传至:https://github.com/chenyufeng1991/SumTo100 . 算法描述如下: (0)首先对原数组进行排序,成为递增数组: (1)对排序后的数组头部i [0]和数组尾部j [n-1]

1.5 快速找出机器故障

题目:假设一个机器只存储一个标号为ID的记录,假设每份数据保存2个备份,这样就有2个机器存储了相同的数据.其中ID是小于10亿的整数. 问题1.在某个时间,如果得到一个数据文件ID的列表.是否能够快速的找到这个表中仅出现一次的ID?即快速找出出现故障的机器存储的数据ID. 问题2.如果有两台机器死机呢?(假设同一个数据的俩个备份不会同时丢失,即列表中缺少的是两个不等的ID) 扩展题.如果所有的机子都有三个备份,也就是说同一ID的机子有三台.而且同时又有三台机子死机,还能用上面的方法解决吗? 如果

编程之美笔记--第一章游戏之乐--1.2中国象棋将帅问题

后来一版作者又将最后一句改为:”要求在代码中只能使用一个字节存储变量“. 我的解法: package android.zlb.java; /** * * @author zhanglibin * */ public class TestXiangqi { public static void main(String[] args) { for(int i = 11; i < 100; i++) { if(i / 10 % 3 == 1 && (i % 10 == 1 || i % 1