因为一直研究深度爬虫前沿技术，当时还在BAT做技术研发的时候，刚开始有一些朋友找我帮忙做一些关于大数据挖掘的项目，记得第一次是公安的一个朋友找我帮忙做“互联网反恐大数据挖掘与分析”，给我一个犯罪分子的手机号码或者身份证号码，挖掘出来这个人在互联网留下的行为轨迹，把这些数据输出给他们。我觉得这是个很好玩的事情，用了1个月时间，做了一个互联网行为监控爬虫和分析系统。
再后来又有一个北京创业的朋友说要做一个“舆情监控系统”，主要是帮助企业名人、明星做舆情监控，按一个账号6万一年开户收费，帮助一些明星监控负面舆论，如果发现某个明星在微博、论坛、社交、媒体网上有负面新闻报道，我们第一时间监控到，然后进行一套算法分析 这篇文章是 正面的报道 还是中性的报道或者负面报道，第一时间生成报告推送给该明星的经济公司，我觉得这套系统也很好玩，主要是通过爬虫技术进行大数据挖掘与分析，所以当时就话了很大的功夫 解决了封IP 破解验证码 大数据存储等技术。
最近有几个创业的朋友找我帮忙建立企业库和政策库大数据，因为我前段时间刚刚帮朋友完成了“天谋查和企谋查”企业库数据的分布式爬虫系统的研发，解决了封IP技术和字体库加密技术问题，同时解决了亿万级的大数据分库分区存储的问题，企业信息的数据维度从17个增加到了30个维度。
今年进军做企业大数据的创业人很多，很大人都想去做类似天眼查、企信宝等工商数据平台，为了解决这个企业数据挖掘问题，我2017年利用大数据挖掘技术自己研发了一套“天某查分布式爬虫系统”，利用爬虫技术，实现企业工商大数据数据库的建立，很大人不知道这些拿这些企业数据做什么，其实当你拥有一个城市的数据的时候就等于你拥有这个城市的财富，比如“工商数据”很多做会计记账、金融的企业都需要这些企业工商数据进行分析和电销使用。比如律师企业就特别需要“裁判文书数据”来分析每个企业的司法风险。
（欢迎对大数据挖掘感兴趣朋友加我qq：2779571288）
3个月前有杭州有个创业的朋友通过朋友联系到我，说要做一个商标大数据项目，请我帮忙建立一套招标大数据挖掘和应用系统，我当时问他 这些商标数据怎么赢利呢，他说当我们的商标数据库建立完成后，我们可以做商标搜索和分析应用，您一个企业在注册一个商标的时候首先需要分析你这个商标是否已经注册，或者有哪些竞争风险，有哪些同行类似的。这样按vip会员收费，一个VIP 300元 可以永久免费查询。另外很多企业都需要申报商标，那么可以通过这个平台不断可以搜索和分析商标数据，可以可以在平台申报商标业务，平台可以代理去申报，按500元代理申报一次，然后再使用机器人方式进行推广开展业务，开通“4个电话机器人”训练完成后 每天从我们的“企业大数据”里读取电话号码自动拨号进行销售推广发展会员。
（欢迎对大数据挖掘感兴趣朋友加我qq：2779571288）
也许到这里你已经发现大数据为什么那么火，大数据怎么使用的，其实这些都是部分我亲自接触过的项目应用，还有更高端的大数据商业项目，有一个朋友要做“政府+企业”的大数据，简称“企政大数据”，也许您看的这个名字的时候很懵逼了，这个“政府+企业”大数据做什么用啊，怎么玩呢，玩的转吗？我这个朋友去融资的时候BP的大数据部分让我帮忙写，我们要做2个大数据库，第一个大数据库就是政策数据库，通过我们的爬虫技术和大数据技术把全国的政策数据挖掘出来，然后建立一定的模型，形成一套标准的“政策数据库”，我们在通过“天某查爬虫大数据”建立一套“企业大数据库”，当某个企业只要输入他公司的基本信息的时候 我们可以智能匹配该企业可以匹配国际的那些政策扶持项目，他可以直接线上申报，或者按会员收费形式。当我们的1000万的企业数据库信息的时候，我们可以做B2B上下游对接，比如你公司是采购材料， 刚好我们平台另外一个公司是生产该材料的，我们系统就可以智能匹配您企业对于的上下游供应链关系，通过我们的大数据可以促成B2B链交易。另外我们里面拥有所有企业的商业数据，我们可以每周推荐一批优质的企业而且是难得国家补贴或者应收数据很多的企业给投资机构，把企业对接到金融机构，实现很多业务的链条等等。
最近投身于大数据+在线知识教育领域，欢迎各位志同道交流沟通
最近我一直从事大数据挖掘技术研发和AI研发，曾经通过网络神经技术研发了数据挖掘AI模型，采用网络数据挖掘技术开发了天某查企、中文裁判网、专利网的数据深度挖掘系统并且完成亿万级的数据采集和建立，采用分布式+集群技术实现千万级的数据深度挖掘，最近在深入探究健康医疗、土地交易、酒店、地图等领域数据深度挖掘技术和数据库建立研究，欢迎广大对大数据和AI技术感兴趣的朋友，欢迎加我q：2779571288交流！
转载来源：https://www.fagaoba.com/article/156776236657560937.html
