1.5 高速找出机器故障

题目:如果一个机器仅仅存储一个标号为ID的记录,如果每份数据保存2个备份,这样就有2个机器存储了同样的数据。当中ID是小于10亿的整数。

问题1、在某个时间。假设得到一个数据文件ID的列表。

是否可以高速的找到这个表中仅出现一次的ID?即高速找出出现问题的机器存储的数据ID。

问题2、如果有两台机器死机呢?(如果同一个数据的俩个备份不会同一时候丢失。即列表中缺少的是两个不等的ID)

扩展题、假设全部的机子都有三个备份,也就是说同一ID的机子有三台。并且同一时候又有三台机子死机,还能用上面的方法解决吗?

假设有N台备份,又同一时候有N台机器死机呢?

~~~~~~~~~~~~~~~~切割线~~~~~~~~~~~~~~~~~~~~~~

问题又一次阐述:

问题1、已知一个数组,数组中仅仅有一个数据是出现一遍的,其它数据都是出现两遍,我们要把这个数据找出来

问题2、已知一个数组,数组中有两个不同的数据都出现一遍,其它数据都是出现两遍,我们要把这两个数据找出来

问题3、已知一个数组,数组丢失了三个数据,我们要把这三个数据找出来

之后能够扩展到N个

~~~~~~~~~~~~~~~~~切割线~~~~~~~~~~~~~~~~~~~~~

问题1、已知一个数组。数组中仅仅有一个数据是出现一遍的,其它数据都是出现两遍,我们要把这个数据找出来

方法一、使用计数排序(借助map)

思想:遍历整个ID列表,使用Map记录每一个ID出现的次数。之后。仅仅出现一次的ID为所求

时间复杂度O(N),空间复杂度O(N)

注:不用map。而用数组的话,空间复杂度会大于N(N表示有N个数),应该是10亿(ID的最大值可能为10亿)

缺点:空间复杂度太大,对已经出现过两次的ID仍要保存,但它已经不可能是出故障的机器了

方法二、仍使用计数排序,可是对已经出现过两次的ID不在存储

思想:遍历列表。对于每个ID。先检查hash表中是否有与之同样的ID

若有,则从Hash表中删除该ID。

否则,将该ID增加到hash表中。

这样,遍历完列表后。hash表中剩下的那一个元素即为所求ID。

时间复杂度O(N),空间复杂度最好为O(1),最坏为O(N)

方法三、利用异或运算(推荐使用)

思想:将列表中的全部ID异或,之后得到的值即为所求ID。

利用异或运算能够得到

X^X=0   X^Y=Z  X^0=X

时间复杂度为O(N),空间复杂度为O(1)。在时间和空间上。基本已经达到最优。

缺点:前提是仅仅有一个ID出现一次。若出现多次,则不适合

方法四、利用 "不变量" (推荐使用)

思路:这里。全部ID的和为一个不变量,对如今剩下ID求和。全部ID的和与剩下ID的和之差即为所求ID。

时间复杂度:O(N)时间,空间复杂度O(1)

总结:使用异或 和 不变量 都已经非常优化。均能在仅仅遍历一次列表,仅仅需一个变量的条件下解决。

~~~~~~~~~~~~~~~~~切割线~~~~~~~~~~~~~~~~~~~~~

问题2、已知一个数组。数组中有两个不同的数据都出现一遍。其它数据都是出现两遍,我们要把这两个数据找出来

题里面是丢失的是两个不同的数据,我们这里两种情况都考虑下

假设缺少的两个数字不同样。

方法:进行异或操作

思路:因为缺少的数不同。则最后异或的结果不为0。

  1. (1)对数组中全部的ID进行异或,结果为a
  2. (2)我们找到a的二进制表示中。最低一位为1的位置b
  3. (3)依据b位是否为1,将ID数组中的数分为两个数组,当中一个数组中的b位为1,还有一个队列中的b位为0。
  4. (注意。每一个数组中。除了那个仅仅出现一次的数外。其它数都是出现两次的。此时就能够在数组内使用异或操作)
  5. (4)然后对两个数组。分别进行异或操作,则将得到两个不为0的数字。即为所丢失的两个ID。

假设缺少的两个数字同样

(此时数组中全部ID都是成对出现。异或值还是为0,不能使用异或实现)

方法:能够使用不变量实现。丢失两个,生成两个方程,联立求值

  1. 1)首先计算出初始未丢失之前,全部ID之和。
  2. (2)然后计算出丢失之后的ID之和,然后(1)(2)结果进行相减操作,得到方程x+ y = a。
  3. (3)利用丢失前后平方和之差,来与(2)进行联立,得到方程x * x + y * y = b。
  4. (4)对双方程进行联立,即能够求出终于的结果。

~~~~~~~~~~~~~~~~~切割线~~~~~~~~~~~~~~~~~~~~~

问题3、已知一个数组,数组丢失了三个数据,我们要把这三个数据找出来

之后能够扩展到N个

方法一:我们须要建立三/N个方程,求出这些都是的数

此时,当方程为N时,要求N个方程可不好求

方法二:使用计数排序 + 计数值达到A时Map不在存储

这时。终于能够得到这几个数

~~~~~~~~~~~~~~~~~切割线~~~~~~~~~~~~~~~~~~~~~

相关题目

给你一副杂乱的扑克牌(不包含大小王)。随意从当中抽出一张牌,如何用最简单的方法来知道抽出的是1~13中的那一张?(不要求知道花色)

方法:利用不变量

事先算好全部牌的和(1+...+13) x 4 = 364

然后分别减去留下的牌点数,终于得到的就是抽出的那一张

时间: 2024-10-29 19:11:08

1.5 高速找出机器故障的相关文章

1.5 快速找出机器故障

题目:假设一个机器只存储一个标号为ID的记录,假设每份数据保存2个备份,这样就有2个机器存储了相同的数据.其中ID是小于10亿的整数. 问题1.在某个时间,如果得到一个数据文件ID的列表.是否能够快速的找到这个表中仅出现一次的ID?即快速找出出现故障的机器存储的数据ID. 问题2.如果有两台机器死机呢?(假设同一个数据的俩个备份不会同时丢失,即列表中缺少的是两个不等的ID) 扩展题.如果所有的机子都有三个备份,也就是说同一ID的机子有三台.而且同时又有三台机子死机,还能用上面的方法解决吗? 如果

编程之美 快速找出机器故障问题

题目: 简化后问题:有很多机器id,其中只有一个或两个id被丢失,正常情况下每个id个数为2,请问如何找到丢失的id是几. java解法一实现: /** * 使用异或操作 X异或X等于0,X异或0等于X,所有元素异或结果就是丢失的元素 * 如果丢失id个数为2,异或结果就是A异或B的结果,然后将数组分成两组,分别找出来. * @author zhaozh * */public class MachineErrorID1 {    private int[] machineIds;//所有机器id

第1章 游戏之乐——快速找出故障机器

转载:编程之美_1.5_快速找出机器故障 题目:假设一个机器只存储一个标号为ID的记录,假设每份数据保存2个备份,这样就有2个机器存储了相同的数据.其中ID是小于10亿的整数 问题1.在某个时间,如果得到一个数据文件ID的列表.是否能够快速的找到这个表中仅出现一次的ID?即快速找出出现故障的机器存储的数据ID. 问题2.如果有两台机器死机呢?(假设同一个数据的俩个备份不会同时丢失,即列表中缺少的是两个不等的ID) 扩展题.如果所有的机子都有三个备份,也就是说同一ID的机子有三台.而且同时又有三台

编程之美 1.5快速找出故障机器

题目: 有很多服务器存储数据,假设一个机器仅存储一个标号为ID的记录,假设机器总量在10亿以下且ID是小于10亿的整数,假设每份数据保存两个备份,这样就有两个机器存储了同样的数据. 问题是:1.假设在某个时间得到一个数据文件ID的列表,是否能快速地找出表中仅出现一次的ID?即快速找出出现故障的机器存储的数据ID. 2.如果有两台机器出现故障呢?(假设存储同一份数据的两台机器不会同时出现故障,即列表中缺少的是两个不等的ID) 给出了4种解法思路 解法一: 最传统的比较列表,需要遍历整个列表,记录每

快速找出故障机器

题目描述 关心数据挖掘和搜索引擎的程序员都知道,我们需要很多的计算机来存储和处理海量数据. 然而,计算机难免出现硬件故障而导致网络联系失败或死机.为了保证搜索引擎的服务质量,我们需要保证每份数据都有多个备份. 简单起见,假设每个机器存储一个标号为ID的记录(ID是小于十亿的整数),假设每份数据都保存两个备份,这样就有两个机器储存了同样的数据. 1.在某个时间,如果得到一个数据文件ID的列表,是否能够快速地找出这个表中仅出现一次的ID? 2.如果已经知道只有一台机器死机(也就是说只有一个备份丢失)

快速找出故障机器(single number)

简单起见,假设每个机器存储一个标号为ID的记录(ID是小于十亿的整数),假设每份数据都保存两个备份,这样就有两个机器储存了同样的数据. 1.在某个时间,如果得到一个数据文件ID的列表,是否能够快速地找出这个表中仅出现一次的ID? 2.如果已经知道只有一台机器死机(也就是说只有一个备份丢失)呢?如果有两台机器死机呢(假设同一个数据的两个备份不会同时丢失)? 对应的是leetcode的Single Number,找出唯一一个出现一次的数字(其他数出现两次) 思想:异或思想,异或之后得到的结果就是单独

编程之美之找出故障机器

问题:假设一个机器仅仅存储一个标号为ID的记录(ID小于10亿的整数),每个数据保存2个备份,这样就有2个机器存储了同样的数据. 提问1:某时间如果得到一个数据文件ID的列表,是否能够快速地找出这个表中仅仅出现一次的ID? 提问2:如果已经知道只有一台机器死机(即只有一个备份丢失)呢?如果有2台机器死机(设同一个数据的两个备份不会同时丢失)? 解提问1转换为有很多ID,其中只有一个ID出现次数小于2,其他正常ID出现次数等于2,如何找到这个次数为1的ID. 解法一   遍历计数 思路:遍历ID列

编程之美学习之快速找出故障机器

这种问题以及方法很常见.主要是思路要开阔,讲已知的问题抽象成数学模型或者函数表达式,这正是数学建模的真谛,problem solving(解决实际问题的能力). 法一:利用计数排序,用数组记下每个ID出现的次数,然后找出出现一次的那个ID,时空复杂度都是O(N).现在如果数据量很大,那么这样的空间复杂度是无法被容忍的 法二:利用两个相同的数异或结果为0,将所有的ID都异或一遍,显然最后剩下的值,即为出现次数为1次的那个数. 法三:如果存在两个数据出现一次的情况,还是利用异或,只是得将这两个出现一

找出导致Mysql机器IO过高的SQL

近期一次mysql机器io过高导致入库缓慢,这里记录下解决和问题查找的过程. 首先通过top看到wa比较高,wa意思是CPU花在等待IO上的时间占比, 进而通过iostat -x 2看到如下图, rrqm/s:   每秒进行 merge 的读操作数目.即 delta(rmerge)/swrqm/s:  每秒进行 merge 的写操作数目.即 delta(wmerge)/sr/s:           每秒完成的读 I/O 设备次数.即 delta(rio)/sw/s:         每秒完成的