最全的增量更新入门 包含linux端和Android

简介

增量更新大量用于 Android各大应用市场.本文想做网络上从服务器到app客户端完整讲解.app用eclipse和android studio 最新版cmark开发ndk

如下图:

以前一直好奇怎么做的直到知道了bsdiff库.

地址附上:

bsdiff源码地址和简介

  • 大家可以从简介看到bsdiff是基于bzip2源码(bsdiff和bspatch一个用于生成差异文件补丁,另一个用于差异文件和旧文件合成新文件)

  • 下载地址说明

应用市场原理说明

假设你用的是”XXX市场”点击更新的时候,把当前版本号和服务器最新版app版本号对比用bsdiff生成差异包,然后将差异包返回下载,下载后将本地应用app的apk文件和差异包用bspatch合成新的apk在安装.

在服务器上用java后台生成差异文件

  • 操作系统:ubuntu
  • 集成开发环境(ide):eclipse
  • 源码:bzip2 ,bsdiff

bsdiff源码点击官网中”here”下载 :

懒人链接

bzip2源码下载:

bzip2官网链接

bzip2下载链接

下载后bsdiff源码文件如下:

  • 我们看到有两个 文件一个bsdiff.c 和bspatch.c 其他文件,大家先无视(makefie可以简单理解文件工程管理的,这里可用可不用).
  • 我们服务器要生成差异文件,那么只需要bsdiff.c 即可.
  • 我们先简单阅读下bsdiff源码(我们直接看启动方法main):

    从上图可知 传入的参数args需要等于4 不然报错.各个参数已经在上图解释

  • 由于main方法很特殊(启动方法,和java的main意义一样所以我们改一个方法名) 所以在这里我们改一个名字为 bsdiff_main

  • 编写对应java的jni方法并生成头文件.(如果大家对jni不熟悉的,就按照本博客操作即可,尽量做到让大家都明白)

1 创建普通的java工程(当然这里不创建web工程,大家到时候自己移植到你的serverlet即可)

2 编写jni方法

package com.fmy;

public class JAVABsdiff {

    public static void main(String[] args) {

    }
    //jni方法 用于调用bsdiff
    public static native void myBsdiff(String []args);
}

3 生成对应”xxx.h”文件

1. 打开命令窗口
2. 打开目录到java工程目录到src下
3. 输入javah 包名.类名 生成对应 "xxx.h"头文件

此时会在你java到src目录生成xx.h文件(请按F5刷新)

我们顺便打开这个文件看看

可以看到里面有一个c语言方法

        JNIEXPORT void JNICALL Java_com_fmy_JAVABsdiff_myBsdiff
          (JNIEnv *, jclass, jobjectArray);
        我们待会创建一个c文件实现它并将它与bsdiff_main方法关联

4 创建bsdiff.h。创建一个test.c文件 导入bsdiff.h和xxx.h 并实现

  • 导入bsdiff.h并声明bsdiff_main()方法作用是用于告诉 test.c有这个方式到实现 并且可以调用
  • xxx.h是我们前面调用javah 生成到头文件
#include "com_fmy_JAVABsdiff.h"
#include<stdio.h>
#include"bsdiff.h"

JNIEXPORT void JNICALL Java_com_fmy_JAVABsdiff_myBsdiff
(JNIEnv * env, jclass jclas,jobjectArray attas){

         //GetObjectArrayElement得到到是jstring类型 而我们调用bsdiff_main()传入的
         //是char× 数组 所以需要转化。这里需要jni知识 所以就不太多了,你只需把下面到内容
         //复制到你到项目中即可

         //旧文件地址
         jstring a0 = (*env)->GetObjectArrayElement(env,attas,0);
         //转化为char ×
         char *j=(char*)(*env)->GetStringUTFChars(env,a0,NULL);

         //
         jstring a1 = (*env)->GetObjectArrayElement(env,attas,1);
         char *j1=(char*)(*env)->GetStringUTFChars(env,a1,NULL);

         jstring a2 = (*env)->GetObjectArrayElement(env,attas,2);
         char *j2=(char*)(*env)->GetStringUTFChars(env,a2,NULL);

         char * agrs[] = {"patch",j,j1,j2};

         bsdiff_main(4,agrs);
}

5 编译生成方式1 gcc命令

  • 把上面所有到文件放入到一个文件中

    1. bsdiff.h
    2. bsdiff.c
    3. test.c
    4. xxx.h
    5. bzip2文件下所有源码

打开命令窗口 打开此目录输入

$ gcc *.c -fPIC -shared -o libtest.so

然后报错

为什么报错?因为 前面用javah生成头文件中导入了jni.h 这里大家可以回头看看。第二我们使用env这个变量 也是jni里面所有我们需要导入。

问题来了jni.h在哪?

位于java安装目录include下

ok我们把这个文件复制到刚才编译目录下,继续编译

又报错发现缺少jni_md.h 文件

报错原因:因为jni.h内部引用了jni_md.h

jni_md.h在哪?

在java安装目录到include到linux下

我们在最后编译下

发现还是报错xxx.c中定义main重复定义了

大家这里可以看着报错到文件 去到文件直接把main方法删除了或注释

这里我就带大家注释其中到bzip2recover.c的main

删除或则注释上面高亮部分

其他文件大家自己删除把

再次编译一次 快疯了。。。。。

编译通过了!

此时在目录下会生成test.so

在java调用so

package com.fmy;

public class JAVABsdiff {

    static{
        System.load("/media/fmy/新加卷/增量/完整/test.so");
    }

    public static void main(String[] args) {

        String oldfile = "/media/fmy/新加卷/增量/old.tar";

        String newfile = "/media/fmy/新加卷/增量/new.tar";

        String patch = "/media/fmy/新加卷/增量/patch.patch";

        myBsdiff(new String[]{oldfile,newfile,patch});

        System.out.println("asd");

    }
    //生成静态到patch文件
    public static native void myBsdiff(String []args);
}

5 编译生成方式2 eclipse

elipse 需要安装cdt插件

  1. 新建C project。

    1. 选择project type —>>Shared Libary
    2. toocahins 选择Linux GCC
    3. finish

  2. 导入第一中编译方式 最后一步的所有文件到工程中

  3. 修改编译参数
    1. 右键项目 在弹出到菜单栏中选择Propertice
    2. c/c++ Build –>>Setings 在右侧窗的command输入gcc -fPIC

    3. build一下在debug下就可以看到对应的so类库

eclipse cdt编译参考文献1

eclipse cdt编译参考文献2

Android eclipse实现patch

  1. eclipse 新建一个Android 工程
  2. 右键选择Android Tools—>>Add Native Support 点击确定

  3. 此时会在目录生成 生成一个lib目录 并且自动生成一个.cpp和Android.mk文件
  4. 创建jni方法
    public class MainActivity extends Activity {
    
        @Override
        protected void onCreate(Bundle savedInstanceState) {
            super.onCreate(savedInstanceState);
            setContentView(R.layout.activity_main);
    
        }
    
        public static native void path(String []arrays);
    
    }
    
  5. 生jni方法头文件放入jni中

  6. 把去掉bzip2源码中所有的main方法的文件拷贝到jni目录下,
  7. 创建一个test.c文件放入jni目录
  8. 把 bspatch.c放入jni目录.并修改对应的main

    修改bspatch.c导入的bzip.h路径

    我们顺带看jni 目录

  9. 编写test.c实现
    
    #include "com_fmy_JAVA_bs.h"
    
    #include<stdio.h>
    
    JNIEXPORT void JNICALL Java_com_fmy_JAVA_1bs_myBsDiff
    (JNIEnv * env, jclass jclas,jobjectArray attas){
        jstring a0 = (*env)->GetObjectArrayElement(env,attas,0);
            char *j=(*env)->GetStringUTFChars(env,a0,NULL);
            jstring a1 = (*env)->GetObjectArrayElement(env,attas,1);
            char *j1=(*env)->GetStringUTFChars(env,a1,NULL);
            jstring a2 = (*env)->GetObjectArrayElement(env,attas,2);
            char *j2=(*env)->GetStringUTFChars(env,a2,NULL);
    
            char * agrs[] = {"patch",j,j1,j2};
    
            bsdiff_main(4,agrs);
    }
    
  10. 修改Android.mk文件如下
    LOCAL_PATH := $(call my-dir)
    
    #目的便利jni目录下所有的.c文件
    
    MY_CPP_LIST := $(wildcard $(LOCAL_PATH)/*.c)
    
    #目的便利jni/bzip2目录下所有的.c文件
    
    MY_CPP_LIST += $(wildcard $(LOCAL_PATH)/bzip2/*.c)
    
    include $(CLEAR_VARS)
    
    LOCAL_MODULE    := bspatch
    LOCAL_SRC_FILES := $(MY_CPP_LIST:$(LOCAL_PATH)/%=%)
    
    #导入Android 日志 库可以在jni中使用Log.e方法等
    
    LOCAL_LDLIBS:= -llog
    
    include $(BUILD_SHARED_LIBRARY)
    
  11. 获取本地apk文件路径和服务器下载好的patch(差异文件)合成

    (这里偷懒模拟下就下)

public class MainActivity extends Activity {

    static{
        System.loadLibrary("bspatch");
    }
    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);
        //这里用zip包模拟 增量更新不止用于 apk哦亲
        File oldFile = new File(Environment.getExternalStorageDirectory(),"old.zip");
        File newFile = new File(Environment.getExternalStorageDirectory(),"new.zip");
        File patchFile = new File(Environment.getExternalStorageDirectory(),"path.patch");
        path(new String [] {oldFile.getAbsolutePath(),newFile.getAbsolutePath(),patchFile.getAbsolutePath()});
//      path();
        Log.e("test", "asd");
//      Log.e("fmy", "============"+path);
    }

//  public static native void path();
    public static native void path(String []arrays);
}

Android studio2.2实现patch

用CMake 构建ndk开发,这里不详细说了

CMake教程

用as创建一个工程的时候勾选 ‘include c++ support’

此时 工程目录下有个main/cpp文件夹

项目工程下会有个CMakeList.txt文件

  1. 导入bzip2(去掉文件中带有main方法的文件代码) 放入cpp文件夹中
  2. 创建一个jni方法
    
    
    public class MainActivity extends AppCompatActivity {
    
        // Used to load the ‘native-lib‘ library on application startup.
        static {
            System.loadLibrary("native-lib");
        }
    
        @Override
        protected void onCreate(Bundle savedInstanceState) {
            super.onCreate(savedInstanceState);
            setContentView(R.layout.activity_main);
    
        }
    
        /**
         * A native method that is implemented by the ‘native-lib‘ native library,
         * which is packaged with this application.
         */
    
        public static native void path(String []arrays);
    
    }
    

    tip:在新版的studio直接鼠标方法jni方法上直接按下Alt+回车键直接生产对应实现方法哦.

    这里我们在cpp/native-lib.c实现

    
    #include <jni.h>
    
    #include "stdio.h"
    
    #include "android/log.h"
    
    #define LOGI(FORMAT,...) __android_log_print(ANDROID_LOG_INFO,"jason",FORMAT,__VA_ARGS__)
    
    #define LOGE(FORMAT,...) __android_log_print(ANDROID_LOG_ERROR,"jason",FORMAT,__VA_ARGS__)
    
    #include "bzip2-1.0.6/bspatch.h"
    
    JNIEXPORT void JNICALL
    Java_com_myself_weather_testjni2_MainActivity_path(JNIEnv *env, jclass tjype, jobjectArray arrays) {
    
        jstring a0 = (*env)->GetObjectArrayElement(env,arrays,0);
        char *j=(*env)->GetStringUTFChars(env,a0,NULL);
        jstring a1 = (*env)->GetObjectArrayElement(env,arrays,1);
        char *j1=(*env)->GetStringUTFChars(env,a1,NULL);
        jstring a2 = (*env)->GetObjectArrayElement(env,arrays,2);
        char *j2=(*env)->GetStringUTFChars(env,a2,NULL);
    
        char * agrs[] = {"patch",j,j1,j2};
        mybspatch_main(4,agrs);
    
        LOGE("FMY%s",j);
        LOGE("FMY%s",j1);
        LOGE("FMY%s",j2);
    
    }
  3. 导入bspatch.c导入cpp目录下(记得修改main方法名字和eclipse一样)
    • 此时cpp目录

  4. 修改CmarkList.txt文件

  5. 最后合成
package com.myself.weather.testjni2;

import android.os.Bundle;
import android.os.Environment;
import android.support.v7.app.AppCompatActivity;
import android.view.View;
import android.widget.TextView;

import java.io.File;

public class MainActivity extends AppCompatActivity {

    // Used to load the ‘native-lib‘ library on application startup.
    static {
        System.loadLibrary("native-lib");
    }

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);

        // Example of a call to a native method
        TextView tv = (TextView) findViewById(R.id.sample_text);
        tv.setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View v) {
                File oldFile = new File(Environment.getExternalStorageDirectory(),"old.zip");
                File newFile = new File(Environment.getExternalStorageDirectory(),"new.zip");
                File patchFile = new File(Environment.getExternalStorageDirectory(),"path.patch");
                path(new String [] {oldFile.getAbsolutePath(),newFile.getAbsolutePath(),patchFile.getAbsolutePath()});
            }
        });
    }

    /**
     * A native method that is implemented by the ‘native-lib‘ native library,
     * which is packaged with this application.
     */

    public static native void path(String []arrays);

}
时间: 2024-10-26 14:27:22

最全的增量更新入门 包含linux端和Android的相关文章

Mysql备份系列(2)--mysqldump备份(全量+增量)方案操作记录

在日常运维工作中,对mysql数据库的备份是万分重要的,以防在数据库表丢失或损坏情况出现,可以及时恢复数据. 线上数据库备份场景:每周日执行一次全量备份,然后每天下午1点执行MySQLdump增量备份. 下面对这种备份方案详细说明下:1.MySQLdump增量备份配置执行增量备份的前提条件是MySQL打开binlog日志功能,在my.cnf中加入log-bin=/opt/Data/MySQL-bin"log-bin="后的字符串为日志记载目录,一般建议放在不同于MySQL数据目录的磁盘

【转载】Unity 合理安排增量更新(热更新)

原帖地址:由于我看到的那个网站发的这篇帖子很大可能是盗贴的,我就暂时不贴地址了.避免伤害原作者 原版写的有点乱,我个人修改整理了下. ---------------------------------------------------------------------------------------------------- 工具 Unity 中的资源来源有三个途径:一个是Unity自动打包资源,一个是Resources,一个是AssetBundle. Unity自动打包资源是指在Uni

Unity5 如何做资源管理和增量更新

工具 Unity 中的资源来源有三个途径:一个是Unity自动打包资源,一个是Resources,一个是AssetBundle. Unity自动打包资源是指在Unity场景中直接使用到的资源会随着场景被自动打包到游戏中,这些资源会在场景加载的时候由unity自动加载.这些资源只要放置在Unity工程目录的Assets文件夹下即可,程序不需要关心他们的打包和加载,这也意味着这些资源都是静态加载的.但在实际的游戏开发中我们一般都是会动态创建GameObject,资源是动态加载的,因此这种资源其实不多

大牛整理最全Python零基础入门学习资料

大牛整理最全Python零基础入门学习资料 0 发布时间:『 2017-11-12 11:56 』     帖子类别:『人工智能』  阅读次数:3504 (本文『大牛整理最全Python零基础入门学习资料』的责任编辑:老王) 摘要:大牛整理最全Python零基础入门学习资料 Python数据类型--数字 Python Number 数据类型用于存储数值. 数据类型是不允许改变的,这就意味着如果改变 Number 数据类型的值,将重新分配内存空间. var1 = 1 var2 = 10 您也可以使

谈谈混合 App Web 资源的打包与增量更新

综述 移动 App 的运行环境具有带宽不稳定,流量收费,启动速度比较重要等特点,所以混合 App 如何加载 Web 资源并不是一个新问题.本文目的是总结出一种资源打包下载的思路和方案,并且提供一种打包工具.本文提到的思路只是一家之言,基本没有参考现有方案,各位方家有不同意见欢迎留言.另外本文没有涉及到 App 内部如何加载资源的问题,这部分我会专门撰写一篇文章讨论. 需求梳理 一般来说,Hybrid-app 对于 Web 资源下载有如下需求: 页面开启速度要快,所以资源的下载和使用不是在同一时间

一步一步跟我学习lucene(19)---lucene增量更新和NRT(near-real-time)Query近实时查询

这两天加班,不能兼顾博客的更新,请大家见谅. 有时候我们创建完索引之后,数据源可能有更新的内容,而我们又想像数据库那样能直接体现在查询中,这里就是我们所说的增量索引.对于这样的需求我们怎么来实现呢?lucene内部是没有提供这种增量索引的实现的: 这里我们一般可能会想到,将之前的索引全部删除,然后进行索引的重建.对于这种做法,如果数据源的条数不是特别大的情况下倒还可以,如果数据源的条数特别大的话,势必会造成查询数据耗时,同时索引的构建也是比较耗时的,几相叠加,势必可能造成查询的时候数据缺失的情况

Hive中实现增量更新

保险公司有一个表记录客户的信息,其中包括有客户的id,name和age(为了演示只列出这几个字段). 创建Hive的表: create table customer ( id int, age tinyint, name string ) partitioned by(dt string) row format delimited fields terminated by '|' stored as textfile; 导入初始化数据: load data local inpath '/home

Git增量更新打包的办法

最近遇到个问题:一个比较老的项目出现bug,需要更新.客户要求只能增量更新,所以打包的时候不可能一个一个文件找出来打包,这样效率太低,经过查找资料,git下找到一种办法如下: 背景:代码库用的是gitlab 工具:git for windows(一个工具) sourcetree (git可视化管理工具) 首先 一: sourcetree 找到提交变更的id校验码 "f506693"(直接在gitlab后台也可以看到) 如图所示: 然后在另外一个提交处也获取这个"校验码&quo

开源 Android App 增量更新库 版本升级

开源 Android App 增量更新库 版本升级 经过几天的重构,我将之前写的一个Android 应用增量更新的示例程序重构为了一个开源库,现在已经push 到 GitHub 上,欢迎大家Watch.Star.Fork. 包含以下内容: 服务器端生成差异包的工程:AppUpdate 客户端使用的开源apk合并库:ApkPatchLibrary 引用ApkPatchLibrary,实现增量更新的ApkPatchLibraryDemo 旧版本的微博Android客户端,以及服务端生成的新旧微博差分