海量数据处理和优化（10月 北京-成都）

蓝博思

海量数据处理和优化

报名详情

时    间： 2012年10月19-21日        地   点：北京

           2012年10月31-11月2日     地   点：成都

费    用： 3800元/人（包含听课、讲义、教学设施使用、两天的午餐、学习用具等）

培训证书：培训结束，对理论、实践双项考核成绩合格者，颁发中国信息产业培训网的培训证书。

参加对象：各类软件研发中心的软件设计师、数据架构师, 项目经理,技术总监,开发人员。

学员基础：了解Java/C#或者C++任一面向对象语言、了解数据架构、了解互联网开发

联 系 人： 于毅 先生                       电   话： 0755-36529027

手    机：13425174803                     E -mail：yuyi@ranbos.com

课程背景：

大多数软件应用，由于业务的急速增长和并发访问的急速增长，都带来了性能瓶颈，原有的数据架构以无法适应当前的需求.而本课程正是告诉你如何搭建数据架构，如何解决新型架构所带来的问题，如数据同步，跨区域同步等问题，如何解决复杂的数据架构带来的数据层开发不敏捷以及性能问题。

解决问题：

你们是否已经存在如下现象,如果有,请参加我们课程,我们给你最佳实践:

l 业务急速增长，并发性访问急速增加，数据库连接遇到瓶颈

l 海量数据实时同步效率低，同步慢。

l 海量数据跨区域准实时同步无法实现

l 数据库性能差

l 开发人员面对复杂的数据架构，开发缓慢

l 对开发人员要求很高，要求他们熟悉各种数据源如何保证安全重构

l 对数据源的改造导致大面积重构

课程特色：

本课程注重实战,采用案例贯穿方式完成实践，收集了大量的真实案例，针对海量数据进行深入研讨并最终形成培训教程。本次培训从数据架构开始讲解，通过大量的真实案例，涵盖了数据架构，数据同步，数据层敏捷开发等内容，详细地介绍了海量数据的处理和优化的前沿技术。

课程大纲：

第一部分 数据架构

一、数据拆分

1. 数据现状

2. 连接数问题

3. 数据垂直拆分

4. 垂直拆分的问题和解决方案

5. 异构的读写分离

6. 数据水平拆分

7. 水平拆分的问题和解决方案

8. 一些案例分析

9. 拆分难题

二、多种存储方案

1. 引入NOSQL数据库

2. 图片服务器分离

3. 开源的分布式文件系统介绍和使用

4. 图片处理和缓存

5. HDFS介绍

6. CDN介绍和详解

第二部分 数据同步方案

一、并发的日志解析方案

1. 情景分析

2. 整体结构设计

3. 线程池处理

4. 代码实现

二、实时数据传输平台

1. 主要逻辑（发布数据，订阅数据）

2. 实时数据传输平台架构

3. 实时数据传输平台结构分析

4. 代码分享

三、Dbsync同步工具的使用

1、 Dbsync介绍

2、 架构解析

3、 使用详解

四、异构的数据库/文件系统之间的高速交换工具

1、 开源工具介绍

2、 特点和结构模式

3、 使用和插件开发

第三部分 分布式缓存系统：Memcached

1. Memcached简介

2. Memcached简单用途

3. Memcached特点

4. Memcached优点和限制

5. Memcached Java客户端

6. Memcached Java 客户端优化

第四部分 Mysql性能优化、Oracle性能优化

一、Mysql性能优化

1. Mysql性能优化引言

2. 数据库设计和查询优化

3. Schema Design

4. 标准化

5. 数据类型

6. 正确使用索引

7. 查询缓存

8. 服务器端优化

9. 存储引擎优化

10. 临时表

11. 线程池

12. 引入非关系数据库

13. 新技术

二、Oracle性能优化

1、常用SQL技巧

2、表的连接方式

3、有效的使用索引

4、Oracle的优化器与执行器

5、Oracle 11g中的执行计划管理

6、Oracle 11g中的数据库重演和SQL重演

7、Oracle的性能顾问

第五部分  数据层开发

一、数据服务平台设计

1. 数据架构分析

2. 解决方案

3. 数据服务平台特性

二、数据服务平台实现

1. 模型数据映射实现

2. 统一查询更新API

3. 性能优化策略

4. 热点缓存平台

5. 异步并行化机制

6. 并发控制，自我保护

讲师简介

曹老师

曾担任淘宝研发技术总监，精通软件设计的理论、实践和工具，有10年以上的大型项目研发及项目管理经验，曾经策划多个大型项目与网站的架构，主持过访问量达亿级大型网站，熟悉大型网站的优化与运维，掌握多种开发平台开发技术-C、C++、Java、.net等，熟悉各种数据库平台-Oracle、Sql Server、MySql等，熟悉各种中间件框架平台，研究过大量开源的框架平台，经过多年实践形成自己架构风格，亲自参与实施项目：国电调试所项目管理系统，中科院子午工程数据与通信系统，某大型电子商务网站架构、项目管理、性能优化，苏州金莱克洁具有限公司ERP项目，苏州海关保税加工辅助核销系统等。