大数据技术对于数字营销的核心驱动力盘点

高安全和易监控维护为什么会重点的提出来呢，对于安全来说，因为大数据的话，人在大数据前面就没有隐私可言了，所以对于大公司来说，安全也是非常的重要的。象一些物理的隔离，最后一点是硬件维护，我们最最关心的是怎么样在第一时间里发现问题，并解决问题，这个是最最重视的部分，所以AdMaster公司除了做系统监控，还做应用的监控。保证了我们的数据可靠性。接下来我们看一下整个数据平台的架构。也是比较通用的，这里我只是说了二个点。一个是做搜索的分布式系统，这个大家可以搜索一下，我只说几个最关键的点。

关于Flink，叫增量迭代，买一次计算，把数据内存拿过来做计算，可以保证把中间数据迭代的结果保存在内存里面，这样子的性能可以更高一些。这个技术我们看下来，数据营销的分类有一些什么特点，上午刘老师会详细的介绍。我这里简单的介绍一下，第一点，数据营销分了二大类，一类是叫全流程营销。比如是做一个活动的页面，你可以做一些推广，整个的广告会流起来了。

第二个是实时竞价营销，就是我们做的交易系统，AD，DSH，SSP和DMP，这个我就不详细的展开了。这个是流程图，我们AdMaster公司，做所有的数据投放的，我们是做DMP是做一个数据管理的平台，不光是把广告交易的数据，包括一些搜索的数据，包括微信微博，还有新闻，还有一些门店的数据，把整个做一个大融合给广告主提供服务的。

这里的一个非常的基本的投放的原则，我们做广告营销或者是数字营销，无非是你怎么样在合适的时间，在合适的地点，把适合的商品推给最适合的人，所以广告都是非常的精准。这里有一个最最重要的就是时间，因为大家知道，特别是政府的数据，要把我们所有的信息公开，但是不知道时间，比如是今天上午，我们做一些什么，这个时间的话，分了行业的。

接下来我们看一下核心的技术，这个是我把它总结了一下，整个大数据平台的传统的架构，因为大数据里面，你怎么样把这个数据存储做分析，最基本的是怎么样把硬件更好的结合起来，大家知道现在的硬件是越来越便宜了，那怎么样把最好的硬件用到最适合的系统里面，第一个是是普通的硬盘，  发现如果是你想提高性能的话，调很多的参数的话，可以解决90%多的问题，也可以节省时间。

还有一块如果是你对时效性的要求很高的话，百度他们的机器可以达到秒级甚至是毫秒级。Redis这个就不用多解释了，我们看一下数字营销的核心的算法，有SVM，聚类，分类，这一点的话，其实做一点算法的同学，他们很多都是原来的模型来做的，举一个例子来说的话，一个人他的属性是在变化的。我们听了分享之后，你回到了家里，可能会转变角色，可能你是爸爸妈妈，或者是兄弟姐妹，你在投放广告的时候，一定是要根据不同的时间来做变化，这样子可以达到很好的效果。

然后第一大类就是离线数据分析，第二个是在线数据分析，我们先看一下离线数据分析，最特别的地方，用户自己的需求，一定是要转换到最后的计算，做一个切分。用户的需求提出来的时候，你肯定不能马上的解决，Rabbitmq，然后还有Redis，还有FIesever，你把结果计算完了以后，很多的用户，或者是客户，他们以前的是老系统，没有新系统，你拿大众的系统，才能满足他们的需求。

第二个是计算模型，我们用的很多，包括Pig，streaming，cascading，你要满足用户的需求，所有的模型都是不一样的接下来是我们通过平台，，每天新增5TB级的数据，每天对千亿条数据进行几千种维度的计算。我们会对上千亿条的数据进行计算，这一点的话，大家也可以看到，我们对一天五千到一万的维度进行计算。除了硬件，你怎么样可以解决问题，这一点和百度，阿里做了很多的沟通和交流，很有挑战性的，五签到一万例的话，你加的条件可能是随意的条件，有很多可以做的地方。

在线数据分析，这个是非常经典的模型，因为我们每天大概是有超过一百亿的请求接受，包括了新闻，BBS，各种各类的数据，然后就是一个调节器的系统。可以把数据源通过统计的平台进来，把数据进行一个处理。

接下来是一个Stom，我们这里用的一个最最关键的地方，一个是时效性，第二个是有一个时间序列的概念，我们认为必须是严格意义上的时间序列，原来是12345，计算的结果也应该是12345。通过一些算法模型，这地方我想说一下，在我们这里，我们不叫知识库，叫做社交图库，这个人一定是和社交有关系的，传统的数据库很难把数据表现出来，我们最近在做这一方面的研究，我们应该很快就可以上线了，还是不错的一个公司。

另外的话，大家知道，对于情感分析，一般就是正面负面，但是对于一句话来说，可以解释不同的类型，比如说A说B是好的，对于B肯定是正面的，对于A来说，可能是真心的，也可能是负面的。接下来我们会把一些数据的结果放到里面，象微博，微信。我们会处理各种不同的报表，对于数字营销最最痛点的分析，对于隐私来说，大家都是非常的关心的。所以这里我们提到的解决方案，既然是A公司和B公司，大家都不愿意把数据源贡献给对方，就是找一个可信的服务厂商做这个事。把数字加密，保证数据不会流失。或者是不会被人窃取。

（编辑：PHP编程网 - 黄冈站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!