Chromium on Android: Chromium线程局部存储系统

线程局部存储(Thread Local Storage), 简称TLS,提供了一种存储线程私有数据的方式,每个线程的私有数据对其他线程均不可见。Chromium是一个多进程多线程架构的浏览器,运行时会创建多达30几个线程,其中很多线程需要拥有自己私有数据,在TLS数量有限的系统上,例如Android 4.3或更早的系统,可能会因为无法分配足够的TLS而导致Chromium崩溃。本文将介绍最近在Chromium提交代码中是如何解决这个问题的。

TLS在Chromium中的使用

Chromium代码中,有些类提供了一个current()方法用来返回调用线程的私有数据,最典型的两个例子是MessageLoop和RenderThread。以MessageLoop为例,因为每个线程可能运行着一个主消息循环,如何能够获取与线程相关的主消息循环呢?为此,MessageLoop提供了current()方法,当线程在创建MessageLoop实例时,会将这个实例设置为线程的私有数据,当调用current()方法时,再将这个私有数据返回给调用者。

每个TLS槽都由一个唯一的键值(key)标识,这个键值由进程负责向OS申请分配,如果当前进程申请的键值数量超过系统规定的上限,申请将失败,即无法获取一个新的TLS槽。线程可以将TLS槽绑定到一个私有数据上,这个私有数据实际上是一个指针,指向一块由调用线程动态分配的内存块。

Chromium代码中,对TLS的使用都抽象在ThreadLocalPointer模板类中(参见base/threading/thread_local.h文件):

template <typename Type>
class ThreadLocalPointer {
 public:
  ThreadLocalPointer() : slot_() {
    internal::ThreadLocalPlatform::AllocateSlot(slot_);
  }

  ~ThreadLocalPointer() {
    internal::ThreadLocalPlatform::FreeSlot(slot_);
  }

  Type* Get() {
    return static_cast<Type*>(
        internal::ThreadLocalPlatform::GetValueFromSlot(slot_));
  }

  void Set(Type* ptr) {
    internal::ThreadLocalPlatform::SetValueInSlot(
        slot_, const_cast<void*>(static_cast<const void*>(ptr)));
  }

 private:
  typedef internal::ThreadLocalPlatform::SlotType SlotType;

  SlotType slot_;

  DISALLOW_COPY_AND_ASSIGN(ThreadLocalPointer<Type>);
};

其中SlotType是对TLS槽(键值)类型的抽象,internal::ThreadLocalPlatform是对特定平台的TLS实现的抽象。例如,在POSIX系统上,ThreadLocalPlatform::AllocateSlot的实现为:

void ThreadLocalPlatform::AllocateSlot(SlotType& slot) {
  int error = pthread_key_create(&slot, NULL);
  CHECK_EQ(error, 0);
}

一般地,会结合LazyInstance使用ThreadLocalPointer,例如:

staticbase::LazyInstance<base::ThreadLocalPointer<RenderThread> >lazy_tls =
   LAZY_INSTANCE_INITIALIZER;
 
RenderThread* RenderThread::current() {
 return lazy_tls.Pointer()->Get();
}
 
RenderThread::RenderThread() {
 lazy_tls.Pointer()->Set(this);
}
 
RenderThread::~RenderThread() {
 lazy_tls.Pointer()->Set(NULL);
}

当创建RenderThread实例时,当前线程会通过访问lazy_tls设置线程的私有数据,此后每次调用current()方法时,都会返回线程私有的RenderThread实例。

由于LazyInstance是延迟初始化的,上述代码中,当首次访问Pointer()时,会创建一个新的ThreadLocalPointer实例,也就是向OS申请分配一个新的TLS槽。

潜在的问题

在三大桌面操作系统上(Windows/Linux/Mac),上述对ThreadLocalPointer的封装和实现都能工作的很好,但自从Chromium支持Android之后,潜伏在上述实现中的问题就浮出水面了。

如果一个线程中需要存储多个私有数据,比如除了RenderThread实例,还有MessageLoop实例等等,每个都要系统分配给进程的TLS键值,那么一旦键值的数据达到上限,申请失败导致程序崩溃。这个问题已经在Chromium WebView中暴露了,原因是Android 4.3或更老的系统,最大可用的TLS槽数量只有64个,除去Android系统库(opengl,jvm)需要占用一部分之外,留给Chromium使用的数量已经不多了,一旦发现分配不成功,Chromium会触发CHECK,程序立即异常退出。Android 4.4系统上,最大可用的TLS槽数量多达128个,这个问题得到一定的缓解,但仍没有从根本上杜绝这个问题。

解决方法

Chromium提供了一种新的方式解决上述问题,主要思路是Chromium自己管理TLS。

以POSIX系统为例,通过pthread_key_create创建的key对进程内所有的线程都可见,但每个线程可以绑定不同的私有数据到一个相同的key上,这就意味着整个Chromium可以共享同一个TLS槽,创建一个应用层的TLS表来彻底解决系统级别TLS槽的数量限制。

具体来说,Chromium TLS系统会首先向OS申请一个key,每个线程都将为这个key绑定一张线程私有的TLS表,Chromium设置了这张表可以容纳64个表项。当线程需要一个新的TLS槽时,首先会检查这个线程是否为key已经绑定了TLS表,如果没有,则需要创建这样一个TLS表并将其设置为线程私有,然后从表中按顺序取一个可用项,并设置新的私有数据。不难看出,新的TLS槽并不是向OS申请的,而是向Chromium TLS申请的。

ThreadLocalStorage模板类是新的ChromiumTLS系统中对TLS的抽象,StaticSlot和Slot封装了初始化Chromium TLS系统,创建TLS表以及设置和获取线程私有数据的操作。因此,上述ThreadLocalPointer模板类将从直接使用ThreadLocalPlatform操作TLS,应改为使用ThreadLocalStorage::Slot, 如下:

template <typename Type>
class ThreadLocalPointer {
 public:
  ThreadLocalPointer() {}
  ~ThreadLocalPointer() { slot_.Free(); }
  Type* Get() {
    return static_cast<Type*>(slot_.Get());
  }
  void Set(Type* ptr) {
    slot_.Set(const_cast<void*>(static_cast<const void*>(ptr)));
  }
 private:
  ThreadLocalStorage::Slot slot_;

  DISALLOW_COPY_AND_ASSIGN(ThreadLocalPointer<Type>);
};

再次强调,ThreadLocalStorage::Slot只是向Chromium TLS系统申请可用的TLS槽,而不是向系统直接申请。

更多信息

时间: 2024-10-15 14:03:44

Chromium on Android: Chromium线程局部存储系统的相关文章

chromium for android GPU进程结构分析

GPU进程的客户端(Browser进程,Render进程)都会创建一个 WebGraphicsContext3DCommandBufferImpl的实例,用于封装与GPU进程的通信. 所以我们从WebGraphicsContext3DCommandBufferImpl开始引出GPU进程的结构. 一.WebGraphicsContext3DCommandBufferImpl的创建. WebGraphicsContext3D暴露的接口基本与OpenGL ES 2.0 API对应. WebGraphi

Chromium on Android: Android L平台上WebView的变化及其对浏览器厂商的影响分析

摘要:Android L平台在图形渲染方面有一项重要的改进,它引入了一个专门的线程用于执行渲染工作,UI线程负责生成的显示列表(DisplayList),渲染线程负责重放(playback)这个显示列表绘制最终的内容,因此Chromium WebView在图形栈的实现方面也作了相应的调整,以支持Android L系统上新的渲染线程模型.本文将深度分析Chromium WebView的渲染流水线是如何无缝整合到Android L系统的渲染模型中,以及对目前市场主流浏览器厂商将会产生什么样影响等问题

Android Chromium WebView学习启动篇

Android从4.4起提供基于Chromium实现的WebView.此前WebView基于WebKit实现.WebKit提供网页解析.布局和绘制以及JS运行等基础功能.Chromium在WebKit基础上为WebView提供进程.线程和渲染等基础构架.因此基于Chromium实现的WebView更好地提供了网页浏览功能.从本文开始我们启动对Android Chromium WebView的学习. 老罗的新浪微博:http://weibo.com/shengyangluo,欢迎关注! 学习Web

Chromium on Android: Android系统上Chromium主消息循环的实现分析

摘要:刚一开始接触Chromium on Android时,就很好奇Chromium的主消息循环是怎么整合到Android应用程序中的.对于Android程序来说,一旦启动,主线程就会有一个Java层的消息循环处理用户输入事件等系统事件,而对Chromium来说,它有自己另一套消息循环的实现,这个实现有哪些特点,又将如何无缝整合到Android Java层的消息循环中去,正是本文所要讨论的话题. 原创文章系列,转载请注明原始出处为http://blog.csdn.net/hongbomin/ar

Chromium on Android: Android在系统Chromium为了实现主消息循环分析

总结:刚开始接触一个Chromium on Android时间.很好奇Chromium主消息循环是如何整合Android应用. 为Android计划,一旦启动,主线程将具有Java消息层循环处理系统事件,如用户输入事件,而Chromium为,己还有一套消息循环的实现,这个实现有哪些特点.又将怎样无缝整合到Android Java层的消息循环中去,正是本文所要讨论的话题. 原创文章系列.转载请注明原始出处为http://blog.csdn.net/hongbomin/article/details

chromium for android v34 2dCanvas硬件绘制及硬件渲染实现分析

HTMLCanvasElement对应h5的canvas元素. 解析网页遇到canvas元素会创建HTMLCanvasElement实例. Canvas可以支持2d和3d图形的绘制. HTMLCanvasElement提供了getContext()接口,返回图形绘制的上下文对象, 对于2d图形返回的是CanvasRenderingContext2D. CanvasRenderingContext2D提供了网页可调用的所有绘制动作. CanvasRenderingContext2D的所有绘制命令都

android4.4 webview chromium与chromium for android硬件渲染的异同

相同点: android4.4 webview chromium的渲染流程与chromium for android硬件渲染流程全解析(render进程)中总结的五个子流程完全一致. android4.4 webview chromium的渲染流程也是这五个子流程组成的. 不同点: 1.android4.4中网页渲染的驱动还是android的UI系统控制的.即WebView.onDraw()是渲染的入口.chromium for android没有用到WebView控件,绘制的驱动完全由底层ch

chromium for android v34 2dcanvas硬件渲染实现分析

这篇接着上一篇2dcanvas硬件绘制,分析保存绘制结果的texture被合成到on screen framebuffer上的过程. 1.webkit为canvas元素相应的render树节点RenderHTMLCanvas, 创建RenderLayer的步骤例如以下: RenderLayerModelObject::createLayer()调用 RenderLayer::insertOnlyThisLayer()将创建完 的RenderLayer增加到renderlayer tree中. 2

Chromium for android 编译

环境准备 Ubuntu 14.04 x64 稳定的翻墙工具,如Shadowsocks.翻墙是必须的,不翻墙下载的程序不靠谱.Ubuntu环境下配置好终端翻墙.关于终端翻墙我会在另一篇博客中写出. 安装配置depot_tools ~$ git clone https://chromium.googlesource.com/chromium/tools/depot_tools.git 添加 depots_tools 路径到环境变量 PATH,假设当前 depots_tools 路径为 /home/l