网络大数据安全问题
随着大数据分布式平台越发普用，较简单的防火墙、病毒防治等传统安全机制无法保障大数据服务的安全，大数据在应用过程中往往存在一些安全问题，大致罗列一些大家参考：
1：分布式计算的安全性。执行多个计算阶段分布式程序必须获得双重安全保护，一个用于程序自身的安全保护，一个保护程序中的数据。
2：分布式数据的安全性。NoSQL非关系型数据库系统自身存储的安全问题，以及分布式节点数据自动分发与聚集等管理所需的额外安全机制。
3：数据来源的安全性。数据源的出处复杂性在不断增长，当一个系统接收到海量多源异构数据时，大数据采集平台必须解决每一个输入数据的安全可信问题。
4：安全监控与审计问题。存储海量数据的互联网大数据云平台和关键基础信息系统，已成为网络攻击的重要目标，同时数据的归属权问题也日益凸显，需要研究实时保障大数据安全使用的监控与审计系统。
5：加密与访问控制问题。大数据安全须解决终端和云端两种加密模式及其应用；同时，由于黑客攻击、内部人员非授权访问等导致的信息泄露事件时有发生，大数据的访问控制模型也面临挑战。
6：大数据安全隐私问题。大数据时代的来临，涉及安全和个人隐私的问题纷至沓来，这将使人们的生活安全以及隐私保护受到极大困扰，必须从技术、法规等多个角度加以解决。
大家通常认为，较令人焦虑的在于您根本不知道什么时候自己的隐私就无意中被泄露出去。在大数据时代，隐私泄露已成为人们较大的担忧。大数据可将互联网中的数据转换成有价值的资源，但当大数据使人们的生活变得愈加方便快捷的同时，隐私泄露问题也随之爆发。
大数据的搜集和分析技术的发展，数据泄露的风险也在不断加大，我们应该规避三个风险：
1：肆意收集带来的隐私问题
在大数据环境中，可以通过医疗就医记录、购物及服务记录、网站搜索记录、手机通话记录、手机位置轨迹记录等来获取用户的信息。收集这些用户个人信息时，通常是未经用户同意，或者用户很少有机会去思考、去认同自己的数据的用途；是谁收集了自己的数据；是谁二次使用了自己的数据；如果自己的数据出现误用，将由谁负责；自己的数据是否在网上被恶意传播；自己的数据什么时候被销毁等。
因此，针对大数据平台，数据采集首先应该脱敏处理。任何公民的个人信息都是“隐私”的一部分，在没有得到个人许可或司法许可的前提下，若数据以原始状态被采集，就必须理清超越边界的范畴。而对原始数据进行脱敏处理，包括屏蔽完整的姓名、证件号码、联系方式、地址等关键信息。数据脱敏后用于统计分析和处理，是大数据安全分析的基础。
2：集成融合带来的隐私问题
集成和融合通常采用链接操作使多个异构数据源汇聚在一起，并且识别出相应的实体。小数据源通常能够反映出用户的某个活动，比如接受的医疗、购买的商品、搜索的网站、手机留下的位置特征、与社交网络互动信息、政治活动等。融合不同的小数据可以更好地服务于数据分析与管理。零售商通过集成线上、线下以及销售目录数据库，可以获得更多消费者的个人描述信息、预测消费者的购物偏好等；GPS服务商通过集成路网不同路段上的传感器数据，可以得到更好的道路规划与交通路线。然而，多个数据源的集成与融合几乎能够推理出个人所有的敏感信息，无形中给个人隐私的保护带来严峻挑战。
因此，大数据集成融合应该在用户知情授权的前提下进行。啤酒与尿片这样的经典关联分析案例，现在看来也是一种大数据应用场景，而且并不针对任何个人的推销。但当我们针对消费者个人消费习惯进行大数据分析，并得到针对性很强的个性化营销策略的时候，其实消费者的隐私已在并不知情和未经授权的情况下被利用了，所以要针对个性化数据集成融合就需要以用户知情为前提。
3：数据分析带来的风险
目前，基于大数据的计算框架，其计算分析能力几乎已经能够达到“大海捞针”。数据科学家通过分析，可以挖掘出大数据中的异常点、频繁模式、分类模式、数据之间的相关性以及用户行为规律等信息。然而，大数据分析的最大障碍是数据隐私问题。在某种程度上，隐私不可怕，可怕的是用户的行为可以通过大数据分析被预测。大数据下的个性化推荐系统是电子商务网站根据用户的兴趣特点和购买行为，向用户推荐感兴趣的信息和商品。然而，用户的商品购买信息以及行为模式很有可能被商务网站挖掘出来，进而导致隐私信息泄露。
因此，数据分析应该针对群体对象，而非个体。大数据分析可以发现同性和趋势、关联与耦合。通过大量的脱敏数据的整合分析，可以发现一个社会群体的某些特质；通过一些共同的行为轨迹，可以发现事物之间的关联。如购物网站经常发布的网上购买最多的商品是什么、视频网站经常发布的热门剧是什么、春运时搜索网站经常发布人口迁移的热力指数及人口迁移方向和趋势等，这样的大数据分析都不针对具体个体，也不揭露任何个人信息。
大数据世界：大、更大、最大
传统的数据库和数据处理工具难以存储和处理的大型复杂数据集的集合称为大数据。大数据是从传统和数字资源中收集的，经过适当的提炼，可以用于研究和分析。随着时间的推移，组织在不断增长，这些组织生成的数据也在成倍增长。面临的挑战是要有一个能够提供完整数据的单一、一致视图的平台。另一个挑战是如何组织这些数据，使其有意义并可作为有用的信息加以利用。我们周围的一切都在不断地产生大数据。社交媒体网站和数字资源产生了如此巨大的数据量。如何传输如此庞大的数据——传感器、移动设备和系统就是答案。
这些大数据从何而来？
请关注痞子哦！[比心]下期文章解密”什么是大数据？“
【#光明日报发文探讨知网公益性#：#公共知识资源何时回归公益属性#】尽管在技术搭建和网站运营存在成本支出，但到底该不该收费？怎么样收费才算合理？本报记者就知网收录论文是否向作者支付稿费以及收费标准如何制定等问题，通过知网官网向其市场部发出采访函。截至发稿，未获回应。
“学术数据库提供的产品与一般商品不同，一旦学术文献的版权资源形成垄断，供给方式单一，经营者凭借这种垄断优势实施的滥用市场支配地位行为，危害很大。”武汉大学竞争法与竞争政策研究中心主任、法学院教授孙晋提醒，“但比起市场垄断，知识垄断更值得警惕。”
在孙晋看来，为了追求利润最大化，学术数据库经营者提高价格，不仅使公共知识资源受损，还抬高了这些期刊的受众门槛，使得知识无法广泛传播，更易形成“知识垄断”。
有学者向记者表示，知网搜集的知识资源来源于社会，其资源具有显著的社会性，不应将取自社会的资源单纯作为其牟取暴利的凭借，而是应“取之于社会、用之于社会”，坚持服务的普遍性和公益性。故作为国家知识基础设施，知网提供的服务应面向公众，满足公众对知识的需求，提供均等化服务。
，中国社科院建立了国家哲学社会科学数据库，推进学术资源的公益使用、开放共享，国家社科基金资助优秀期刊都在这里开放存取、免费查取。李玉坦言：“只是目前影响力有限，因为收录期刊不多，资源聚拢上遭遇瓶颈。”
“在国外，有很多数据库由公益协会或者政府出资支持建设，研究结果也应由纳税人免费获取。”李玉说，“从这一点看，政府要加强政策扶持和资金支持力度，采取有效市场干预和引导，积极开展开放存取模式探索，最大程度去除科学研究和知识共享上的壁垒，以激励更多的学术创新。”公共知识资源何时回归公益属性-光明日报-光明网
是时候淘汰老的asp网站了！
十几年前，我是一个程序员，后来发现搭建环境等各方面比较麻烦，于是做简单的asp程序，慢慢的看到很多小问题都要写长长的代码，起初网上还能搜到但后续就越来越不行了。
于是，转做#PHP#，因为这个语言更易学而且功能更强大，重要的是参考资料特别多。用到现在。
比较来讲，PHP+MYSQL比ASP+ACCESS就多了一点：数据库导入导出多了1道工序而access的可以直接打包拿走。
但现在PHP比ASP强得多，因为：
1、云服务商很多不再卖asp主机，只提供PHP的，JAVA更是几乎没人买
2、PHP大小网站通吃，都适合
3、PHP入门容易，强大功能也都可以实现
4、mysql数据库比access强太多
所以，#网站#方面现在已经没有什么悬念，只有PHP才是更好地选择。至于其他，是否会改进的更适合网站开发，不得而知，但#asp#是该被淘汰了。
【国家法律法规数据库今日开通】
国家法律法规数据库今天（2月24日）正式开通。
建设国家法律法规数据库是国家基础数据库建设的重要组成部分，也是全国人大常委会联合有关国家机关共同组建运行的一项重要国家政务信息化建设工程。
国家法律法规数据库收录了宪法和现行有效法律275件，法律解释25件，有关法律问题和重大问题的决定147件，行政法规609件，地方性法规、自治条例和单行条例、经济特区法规16000余件，司法解释637件，涵盖了中国特色社会主义法律体系最主要的内容，为社会公众提供了看得见、找得着、用得上的公共产品，让法治服务及时方便“飞入寻常百姓家”。
据了解，国家法律法规数据库的访问网址是：国家法律法规数据库，用户还可以通过登录微信小程序“国家法律法规数据库”进行访问。 央视新闻客户端
知网查重比维普查重高还是低？
虽然根据大部分真实用户的反馈来看，维普查重确实普遍比知网结果高——下面我们一起来了解下这两个查重系统之间有何区别。
1、数据库不一样
维普：中国学术期刊数据库（CSPD），中国学位论文全文数据库（CDDB），中国学术会议论文数据库（CCPD），中国学术网页数据库（CSWD），中文科技期刊论文全文数据库，中文主要报纸全文数据库，中国专利特色数据库，博士/硕士学位论文全文数据库，中国主要会议论文特色数据库，港澳台文献资源，外文特色文献数据全库，维普优先出版论文全文数据库，互联网数据资源/互联网文档资源，高校自建资源库，图书资源，古籍文献资源，个人自建资源库，年鉴资源，IPUB原创作品等等。
知网：中国学术期刊网络出版总库、中国博士学位论文全文数据库、中国优秀硕士学位论文全文数据库、中国重要会议论文数据库、中国重要报纸全文数据库、中国专利全文数据库、互联网资源(包含贴吧等论坛资源)、英文数据库(涵盖期刊、博硕、会 议的英文数据以及德国Springer、英国Taylor&Francis 期刊数据库、港澳台学术文献库、优先出版文献库、互联网文档资源、图书资源等等。
2、算法不一样
维普：采用强大的语义识别技术，能够快速的命中并识别出检测文件与比对源中的相似内容，使用这个技术既可以完成有效的命中，也不会造成过度的检测。检测到文章中存在的抄袭和不当引用现象，实现了对学术不端行为的检测服务。包含已发表文献检测、论文检测、自建比对库管理等功能。
知网：采用的是最为先进的语义模糊算法，关注句子中心意思和关键词，「了、着、的、可以」等虚词的修改并不会降低重复率。如果打乱了论文整体结构和纲要的话，就可能会使这篇论文第一次查重时标红的位置和第二次查重标红的位置不一样，因此大家修改论文内容时不要打乱改变论文本来的全体纲要和结构。
thinkPHP高访问大并发优化实战！
昨天我的老客户找到我，说他的网站被某搜索引擎的蜘蛛干趴下了，服务器资源直接耗尽，网站不能正常访问，如下图，当前搜索引擎的蜘蛛设置的抓取量为200并发，20万条每天！
这个我站是我用thinkPHP给他做的，当前数据库最大的表数据在100万出头，服务器配置是4核8G，经过分析，CPU的资源耗尽，但是内存还闲的很才30%左右的使用率，明显是mysql硬查询太多，压力太大，抗不住，然后看看mysql的日志，慢查询很多，基本上一个查询都10多秒了。
花了半天时间给他优化，把内存的使用率优化到了70%左右，CPU的使用率终于降下来了！
为了稳定，因为本身自然访问量也较大，又让他联系搜索引擎那边的技术，把蜘蛛抓取的并发调低到50，抓取量调低到10万每天，终于稳如泰山，完美解决！
后面如果要把蜘蛛全部放出来，最大化抓取的话，就只能用多台服务器做负载均衡了，让他准备好2台新服务器，3台一起做负载均衡！
造势多日，澳大利亚把矛头指向俄罗斯，俄面临新“罪名”。
在俄乌军事冲突陷入僵局的背景下，“网络攻击”成为了另一个关键词。澳大利亚和西方媒体，最近集中报道了澳大利亚“网络攻击”，而在造势多日之后，澳大利亚果然把矛头指向了俄罗斯，让俄方面临新的“罪名”。
据多家西方媒体报道，澳大利亚近日曝出“个人健康信息泄露”事件，而且这件事正在持续发酵。在当地时间11月11日，澳警方指责“俄罗斯黑客”是幕后黑手，对澳洲最大医疗保险公司实施了“网络攻击”并泄露了数据。澳警方称，一群松散的网络犯罪分子，可能要对过去全球范围内的“重大入侵事件”负责。
此前，涉事公司发表声明称，近千万名客户的个人信息遭到泄露，被发布在暗网上。甚至澳大利亚总理阿尔巴内塞也表示，自己是这家公司的客户，对信息泄露事件表示担忧。
所以现在可以说，在连续多日的前期造势之后，澳洲官方终于正式把黑锅扣在了俄罗斯头上。
其实，无论是信息安全技术不足，还是专业人员缺少，都只是澳大利亚官方的某一说法罢了。俄乌冲突爆发后，澳大利亚忙前忙后，对俄罗斯各种攻击和谴责，俄罗斯黑客们会没有想法吗？所以，澳大利亚真要是被俄罗斯黑客袭击，那也实属正常。
第二，俄罗斯黑客很厉害吗？我们先简单回顾一个事件。5个月前，当俄乌局势越来越严重的时候，很多国家和地区的黑客，比如全世界最大的黑客组织“匿名者”宣布，要对俄罗斯发动网络战争，这也导致俄罗斯许多网站用不了了，也直接导致了黑客战争的升级。有了这个背景，可以说，俄罗斯黑客在世界各地的黑客中，绝对是霸气和实力的代表。他们硬扛欧美各大黑客组织，就曾报复性地把对方的网站黑掉。
除此之外，俄罗斯黑客还有最大的特点，那就是行事非常低调，因为他们根本就没有时间炫耀网络上的这些东西。他们为了自己的目标去全力完成，成功后不留下其他东西。比如，反兴奋剂机构对外公布了俄罗斯运动员违规使用禁药的行为，并且极大地抵制俄罗斯参加奥运会。俄罗斯黑客们报复他们，直接入侵世界反兴奋剂机构的网站，从网站后台数据库中提取到了大量信息，直接将所有体育明星违规使用禁药的消息曝光。这就是俄罗斯黑客的厉害之处，所以澳大利亚这次无比紧张。
不过从澳洲官方的表态来看，他们把矛头指向俄罗斯，用的是“可能”这样的字眼。也就是说，这口扣在俄罗斯头上的黑锅，扣得非常不严谨。其实回顾过去一段时间，西方曾经多次把黑客、“网络攻击”的罪名砸向俄罗斯，但最后基本都是不了了之。而这一手法也多次被用来对付中国等其他国家。
如今俄乌战事胶着，又恰逢G20峰会，国际外交进入了最繁忙的时候。就是这样的时刻，往往会成为西方大肆炒作一些议题、向对手施压的关键时刻。在最近一段时间，很可能会看到更多的“黑锅”。
加拿大生活质量全球前列，这个城市的华人移民最幸福！
一个城市的生活质量高低，反应着某个城市社会经济发展与管理水平和居民生活质量水平。而对很多新移民来说，该城市的居民消费水平、精神生活和物质生活水平，以及环境质量都是非常重要的参考指标。
对此，全球数据库网站Numbeo，统计了一份权威数据，从购买力（Purchasing Power）、安全（Safety） 、医护（Health Care） 、生活成本（Cost of Living Index）、房价和收入比（Property Price to Income Ratio）、通勤时间（Traffic Commute Time）、城市污染程度（Pollution）和气候（Climate Index）等8个方面来进行考察，得出了最新的报告。
网页链接
#秋日生活打卡季#【甲骨文启动新一轮裁员，涉及云计算部门】
据报道，甲骨文公司正悄然启动新一轮裁员，希望进一步压缩公司成本。尽管此次裁员的规模和范围尚不明确，但内部邮件显示，这家数据库巨头的北美云基础设施和技术部门（NACT）的部分员工已于本周一早些时候收到裁员通知。匿名网络论坛和职业社交网站LinkedIn上也可以看到一些自称被甲骨文裁员的帖子。
现有消息显示，一些受到裁员影响的员工现在可以在10月31日周一之前在甲骨文内部找到新的职位。但至少有一名刚刚被裁的员工表示，他收到的通知显示，自己与甲骨文之间的雇佣关系将在下周一解除。甲骨文尚未对此置评。#甲骨文#
