深网搜索引擎
目录
网络战争 / 信息安全 Cyber War/ InfoSec
先了解问题和搜索主题相关的知识,再选择搜索工具;建议使用浏览器的“搜索”选项在此页面上找到您感兴趣的主题。
学术论文的深网搜索方法
大多数时候无法获得论文全文,而只能获得摘要。您必须请求获取源文档。具体的深网搜索方法就是
- 确定将要收集的集合的类型并进行搜索
- 找到索引搜索门户并搜索您的奖学金资源
- 通过ILL或其他适当方式下载或请求副本
可用的学术搜索网站有:
- Open Thesis –有关这些论文,论文和其他学术文档的免费存储库,以及搜索,组织和协作工具。
- 研究图书馆中心(CRL)是由大学,学院和独立研究图书馆组成的国际财团。CRL成立于1949年,通过保存并向学者提供对这些学科至关重要的原始资料,支持人文,科学和社会科学领域的高级研究和教学。
- Google学术搜索 -Google将简单的内容编入索引。
- 哈佛– –物理与天体物理学
- WorldWideScience联盟 以科学为基础的学术机构, 是一个多边伙伴关系,由参与的成员国组成,并为WorldWideScience.org提供了治理结构。代表WorldWideScience联盟,WorldWideScience.org开发,并通过保持科学和技术信息办公室(OSTI),所涉及的元素科学办公室的内美国能源部。
- Bielefeld学术搜索引擎( BASE)是世界上搜索量最大的搜索引擎之一,尤其是针对学术性开放访问Web资源。BASE由比勒费尔德大学图书馆运营。从2200多个来源(主要是大学)中提取。(请参阅源列表)
- CiteSeerx 主要侧重于计算机和信息科学方面的文章
- Refseek –当前处于Beta版,它尝试在学术,开源,报纸和网络内容中搜索学术内容。在查找文档方面,比比勒费尔德(Bielefeld)主持的基本搜索没有全面或准确的方法,但是它有希望。
- Scitation 在物理,化学地球科学,工程学,声学等领域的超过200万篇文章。
- Deep Dyve (商业)汇总了来自全球领先出版商的数百万篇文章,涉及数千种期刊,包括Springer,Nature Publishing Group,Wiley-Blackwell等。
- AJOL 非洲期刊在线 与来自整个非洲大陆的数百种期刊合作,致力于改变这一状况,从而使非洲人和世界其他地方都能获得非洲起源的研究成果。
- SciVerse Scopus是世界上最大的同行评审文献摘要和引用数据库。包含4,700万条记录,其中70%具有摘要。我对其进行了一些测试,发现它缺少它,但是它有很大的希望,它声称来自全球5,000家发行商的19,500种出版物。
多重搜索引擎 /元搜索引擎
Deeperweb.com –将检索结果细分为 general web, blogs, news, academic, cloud, metrics, research等,可以快速关注所需的答案类型。十佳网站!
Surfwax 有用于RSS的界面。需要60秒来了解如何使用它。
Dogpile 另一个多引擎聚合
scout.wisc.edu Scout Project优化了查找、过滤和呈现在线信息和元数据的工具和服务。
www.findsmarter.com 对来源于Yahoo,Bing,Wiki,Blekko和Alltheweb的搜索, 按域名扩展名或整洁的主题过滤。
聚类分析引擎
TouchGraph 使用可视化工具显示搜索结果中的关系。用于找到搜索主题的新资源。只需抓住中心项并将可视化的wiggly effect 移动 ,效果一目了然。
Yippy.com –有用的非图形的结果聚类。花2分钟了解它是如何工作的,将节省数小时的研究时间。
www.navagent.com/ –不是基于Web的搜索引擎,需要您下载软件。对于35F intel类型的评价很高。
专用的深网引擎
Archive.org 稀有的书籍,录音,视频,所有旧网站的20年存档图像以及免费有声读物!
WWW虚拟图书馆 行业索引的列表。建筑、生化战争、动物学。。。。
FindArticles.com 有大约500种期刊的文章,覆盖范围可追溯到1998年,完全免费、由CBS资助。
国会图书馆 loc.gov 现象化数字化档案,包括良好的报纸档案。“美国记忆” “American Memory”。
国家安全档案馆 -解密文件等。“ 国家安全档案馆电子简报书可在线访问有关美国国家安全,外交政策,外交和军事历史,情报政策等问题的重要解密记录。电子简报经常更新,仅代表已出版和未出版藏书中的一小部分文件。”
www.osti.gov –政府研究档案,还有大量的科学演示视频。
美国地质调查局 -图像和地图丰富。3个用于获取数据的门户,EarthExplore,Glovis和Seamless。极其复杂。在learninggis.com上有关于如何获取免费航空照片的教程。
USGS提供的美国国家地图 -来自USGS的当前地理空间数据的来源。
http://adswww.harvard.edu/ 物理和天文学数据引擎,用于学术论文
http://databank.worldbank.org/data/home.aspx 有关各种主题的专业统计数据,从国家GDP到文盲程度。
http://www.quandl.com/ 用于获取研究原始数据,对数据科学家有用。强大的9,000,000个金融,经济和社会数据集。
综合搜索引擎
GPO的《美国政府出版物目录》 —联邦出版物数据库。
史密森尼学会图书馆 -来自世界各地博物馆的20个图书馆。
国家档案馆 -国家档案馆的研究工具和在线数据库。
HighWire Press-在线免费目录,该目录包含来自1000多种不同期刊的最大的免费全文本和非免费文本,供同行评审。
教育资源信息中心(ERIC) -包含超过120万种书目记录的目录,其中许多带有全文。由美国教育部赞助。
不列颠百科全书 —古老而权威的百科全书,可在线全文搜索。不再打印纸质副本。
Topix.net —新闻搜索引擎。
Internet的公共图书馆 儿童比成人更多。
旧金山公共图书馆 在线图书馆。只有成员才能访问商业档案。
Xrefer (商业) 包含236个标题和290万个条目的数据库。
LexisNexis (商业) —被称为全球最大的公共记录,未发表的意见,法律,新闻和商业信息的集合。据称可搜索超过35,000个单独来源(真实性未知)。
Forrester Research (商业) —独立的技术和市场研究公司,发布有关各种主题的深入研究报告。
Factiva (商业) —在线收集大约10,000个单独来源(事实)。
加州在线档案馆 -拥有1860-1968年所有Keystone立体影像的惊人档案
文件和元数据的检索(暂无)
查人和背景调查
Intellus (商业) –查找人员以及人员和其他功能的背景调查。
美国搜索 (商业)、Integrascan –查找人员以及人员背景调查。
123人 (商业) –围绕寻找人而建立的多功能搜索引擎。
德克萨斯州DOT州犯罪背景调查 对重罪进行的中央背景调查。大多数轻罪不会出现。
socialcatfish.com –具有背景检查功能以及照片反向查找功能。订阅搜索更深入。
在线书籍
Archive.org –具有epub,txt和pdf格式的在线书籍,包括Gutenberg Press等其他书籍。因此是最好的起点。
Hathi Trust 主要研究机构和图书馆的合作伙伴关系,致力于确保文化记录得以保存和在不久的将来获得。HathiTrust中有60多个合作伙伴,其成员资格向全球的机构开放。
Books.google.com 扫描世界上所有图书以将其添加到Google Borg。
“在线图书”页面 -包含28,000多种英语的可搜索数据库,其中的全文可免费在线获得。
Bibliomania-包含2,000多种经典著作的免费文献数据库。Archive.org在这一点上碾压Bibliomania。
古登堡计划(Project Gutenberg) —在线图书的祖父,目录超过20,000种免费图书,在线提供全文本。包含在Archive.org中。
美国国家科学院出版社(National Academies Press) —仅在线提供约3,000本书,约有900份PDF待售。
UNZ 期刊和书籍的扫描版。
Get Abstracts (商业) -大型在线图书馆,提供8,000多种商业书籍摘要。这是获得最佳企业头衔的最有效方法。
盖蒂研究院Getty Research Institute 馆藏包括超过一百万本书,期刊,研究照片和拍卖目录以及稀有和独特材料的大量特殊藏书。专注于艺术史,建筑相关领域,从史前考古学开始,一直延伸到当代。
在线报纸档案
美国报纸报道US newspaper coverage – ResearchGuides列出了许多报纸的链接
国会图书馆报纸资源清单Library of Congress Newspaper Resource List – 包括精美的报纸档案。
NewspaperArchive.com – (商业) –以大量收藏而闻名。
xooxleanswers.com – Xooxle报纸档案的好清单。
宾夕法尼亚大学报纸档案馆Penn Newspaper Archive -美国报纸档案馆和日期的详尽全面的清单。
澳大利亚报纸档案馆 从1820年代到1980年代大多数澳大利亚报纸的惊人的报纸档案馆。包括塔兹在内。
在线有声读物Audio Books Online
LibreVox.org –志愿者语音艺术家阅读的大量录音和有声读物
影片Videos
www.liveleak.com –公民上传的视频的视频新闻聚合器。非常适合国外的OSInt,具有一些很好的汇总功能,可以将随机提交的视频变成围绕某个主题的逻辑集合。
VideoLectures.net –高品质的科学讲座视频。
商业的深网引擎
AAAAgencySearch.com-通过美国广告代理商协会的广告代理商。
Agency ComPile-广告和市场营销代理。
阿里巴巴 –寻找企业的企业国际市场。
Kompass-企业对企业搜索引擎。
GPO访问经济指标Access Economic Indicators -1998年1月至今的经济指标门户。
政府印刷局Government Printing Office 发布的大型物品目录。有业务的东西,但还有更多。环境报告,法律文件,自然资源。
胡佛(Hoover) -有关企业信息的大亨。
ThomasNet —只是工业产品搜索目录。
SBA贷款数据Loan Data -小型企业管理局的贷款计划批准活动。
GuideStar.org-可搜索的非营利组织的数据库,包括501c。
Slideshare.net –可搜索的数据库,用于众包crowdsourcing上传的幻灯片。
消费购物引擎Consumer Engines
美国消费者产品安全委员会召回的产品 -按公司名称排序的产品列表。
梅利莎数据Melissa Data -人口统计数据的完整目录,可以按邮政编码分类。
凯利蓝皮书Kelley Blue Book -新车和二手车定价指南。
埃德蒙兹(Edmunds) -关于新车和二手车定价的公认的既定指南。
消费者报告Consumer Reports —(商业)关于产品评论的值得信赖的指南,包括汽车,家电,电子产品,计算机,个人理财等。我使用它。
经济和工作搜索引擎
EUROPA Press Release Database -欧盟新闻稿数据库。
FreeLunch.com —免费经济数据目录。
劳工统计局 Bureau of Labor Statistics -来自美国劳工部的基于工作和消费者的经济信息。
薪金向导计算器Salary Wizard Calculator -显示按职位调整的全国平均薪资的工具。
Economagic —包含超过200,000个econ文件的数据目录。
Penn World Tables 宾夕法尼亚州世界表 -所有国家在1950-2007年期间的国民收入数据。
America’s Job Bank -职位和简历数据库。
USAJOBS —联邦政府工作数据门户。
区域经济状况Regional Economic Conditions (RECON) -各州,县和MSA可获得的经济数据。
美联储Federal Reserve -FRED包含大量经济指标数据集,超过500,000种
Smartscholar –基于经济链接的链接将某些链接与Deep Web资产关联。
金融
Bankrate.com —不同贷款类型,抵押和储蓄账户的利率数据库。
InvestIQ-来自世界各地的市场数据。
BigCharts —不同股票和共同基金的报价和业绩图表。
SmartMoney.com工具 -股票分析工具的门户。
NASDAQ Trader —来自纳斯达克证券交易所的股票数据数据库。
SEC信息 —可以按名称,行业,SIC代码等搜索EDGAR和SEC文件。
EDGAR Online —可以通过股票代号或公司名称搜索SEC filings 文件。
政府搜索引擎
版权记录Copyright Records (LOCIS) -在线版权记录,文档,序列和多媒体。
American FactFinder-美国人口普查局数据,按城市,县或邮政编码进行搜索。
FedStats-美国100个联邦机构的统计门户。
United States Patent and Trademark Office 美国专利商标局 -专利,全文和全页图像数据库。
Historical Census Browser 历史人口普查浏览器 -美国历史人口普查数据的存储库。可以追溯到1790年由弗吉尼亚大学汇编。
Geospatial One Stop 地理空间一站式 -很棒的GIS数据仓库,包含地理数据,shapefile,图像以及可在地图上显示的数据。
Grants.gov- 提供经费资助的机会。
技术机会计划赠款数据库Technology Opportunities Program Grants Database -技术经费列表,按关键字,州和年细分类。
美国政府印刷局(GPO) 拥有多种政府数据库的搜索引擎:美国预算,竞选改革听证会,联邦法规,国会法案等
CIA电子阅览室 - 解密CIA文件。
POW / MIA 数据库和文档 -有关POW和MIA的信息。
ZIP + 4 Lookup -美国邮政编码和ZIP + 4编码
国际搜索引擎
国际数据库(IDB) -国家和地区的统计表和人口统计信息。
FIRST :军事侵略数据库和武器资产。
烟草控制经济学Economics of Tobacco Control -有关180个国家的烟草使用和政策的信息。
国家外交政策指标- Country Indicators for Foreign Policy 国家外交政策统计表。
世界银行数据World Bank Data -国家和全球团体的主要发展数据和统计数据。
CIA Factbook —包含有关世界每个国家/地区信息的参考资料。
美国国际贸易统计数据US International Trade Statistics -按国家或商品类型划分的国际贸易统计数据。
美国对外贸易摘要US Foreign Trade Highlights -美国国际贸易信息。
能源信息管理局国际能源数据和分析Energy Information Administration International Energy Data and Analysis -按国家分类的能源衡算。解释为什么美国向石油生产国提供大量现金。
法律和政治 Law and Politics
THOMAS(美国国会图书馆 Library of Congress ) —来自美国国会图书馆的立法信息。
国会法律图书馆 Law Library of Congress -据说是世界上最大的法律资料馆藏,超过200万册。
全球法律信息网络Global Legal Information Network -法律,法规,司法裁决和其他法律资源。
FindLaw —免费的法律数据库,包含案例和法规,法律新闻的集合。
Office of Postsecondary Education Security Statistics 教育安全统计办公室 -包含可分类的大学校园犯罪统计。
司法统计局Bureau of Justice Statistics 法律和司法统计,涵盖从犯罪到执法的所有内容。
耶鲁大学法学院 Yale Law School 的Avalon项目 -法律,历史和外交文件。
1774年至1873年的美国国会文件和辩论(国会图书馆)US Congressional Documents and Debates — LOC的历史国会记录,法案,文件,法规,期刊和辩论。
游说数据库Lobbying Database -谁在1998年以来就花钱游说的公司上花了钱?美国,国会资金最好,可以买到!
立法活动Legislative Activities -众议院的法案摘要,地位,公共法律和投票的摘要。
heinonline.org –(商业)–声称是“世界上最大的基于图像的法律文件数据库”。甚至有 《关于使用贝叶斯定理在一则刑事案件中进行事实调查》这种文档。
Smart投票-- Project Vote Smart -政府官员和选举候选人数据库,按姓氏或邮政编码排序。
医疗与卫生
PubMed —美国国家医学图书馆收录了超过1600万篇MEDLINE和其他生命科学期刊的文献,这些文献可以追溯到1950年代。包含指向全文文章和外部资源的链接。
美国国立卫生研究院档案馆National Institute for Health Research Archive 由英国NHS资助的正在进行或已完成的项目的数据库。
美国国立卫生研究院National Institutes of Health -健康主题百科全书,更深层的网络资源。
美国医院目录 American Hospital Directory -美国医院信息索引。
Globalhealthfacts.org- 可按国家,疾病,状况,程序或人口统计信息搜索的世界卫生信息;快速呈现一个国家的卫生条件。
疾病控制和预防中心数据统计Centers for Disease Control and Prevention Data and Statistics -根据CDC统计的健康信息。不是真正的深网,但很有用。
《新英格兰医学杂志》New England Journal of Medicine (商业) —领先的医学杂志,在线提供全文。需要付费,但可以免费使用大多数服务。
科学与学术
Scholarly Paper搜索引擎现在拥有自己的页面
ScienceResearch.com-可搜索的科学期刊和数据库。
学术索引 Academic Index –主要是对具有较高权限的网站(主要是.edu和.gov)进行过滤后的Google搜索结果,适合面向图书馆员和教育工作者。第二次搜索将 深网的学术和非学术数据库联系在一起。
Science.gov-由美国政府机构提供的科学信息的门户网站。
VideoLectures.net –权威级别来源的视频讲座。一个很好的用法是,可以找到经同行评审的会议,并在会议中深入讨论某个主题。演示幻灯片是单独显示的,可以跳到感兴趣的幻灯片。以技术为重,英语占66%。大多数讲座需要45分钟或更长时间。
WebCASPAR 轻松访问美国学术机构中大量的科学和工程(S&E)统计数据资源。还提供有关非S&E领域和高等教育的信息。
查尔斯·达尔文全集The Complete Work of Charles Darwin -可搜索并在线获得查尔斯·达尔文的已出版作品。
USGS实时水数据 Real-Time Water Data -美国河流和水库的流量和水质数据的实时地图。
USGS地震危害计划 Earthquake Hazards Program -显示实时地震数据。关注美国,但也涵盖世界。
IEEE Publications (商业) —包含电子电气工程师学会IEEE的140万份文档。
石油工程师协会存档 Society of Petroleum Engineers Archive (商业) —石油工程师技术论文。
Arxiv 康奈尔大学资料库。可以访问700,000多篇关于定量生物学到计算机科学的技术论文,提供了几种格式的全文。
VADLO –—生命科学搜索引擎。
Deep Dyve (商业) 汇总了来自全球领先出版商的数百万篇文章,涉及数千种期刊,包括Springer,Nature Publishing Group,Wiley-Blackwell等。
数据挖掘数据源 –链接到用于数据挖掘的免费和商业数据集的系统。
交通运输Transportation
美国联邦航空局(FAA)航班延误信息 --FAA Flight Delay Information -美国的最大机场的航班延误信息地图,。
NTSB Accident Database and Synopses 事故数据库和摘要 -国家运输安全委员会NTSB的航空事故数据库,从1962年至今。
NTSB航空事故数据库 Aviation Accident Database -国家运输安全委员会的航空事故数据
国家公路交通安全管理局(National Highway Traffic Safety Administration) -汽车和汽车零件缺陷的数据库,可通过货号或汽车制造商和型号进行搜索。
SaferCar.gov-自1990年以来的汽车碰撞测试安全等级。
flightwise.com —实时航班跟踪,并支持Google Earth。
FlightAware-使用历史记录,图形和地图对航班进行收费跟踪。
历史
俄亥俄州 Ohio State –收集有关部队移动,营地,战斗等的许多内战信息。
网络战争 / 信息安全 Cyber War/ InfoSec
Iron Geek —优秀的视频库,解释了InfoSec的许多方面以及黑客与安全性
securitytube安全管 —大型视频库,涵盖InfoSec,网络战争和大多数黑客会议中的许多主题。
DefCon-主要的黑客骗局,美联储训练员工的地方,存档可以追溯到Defcon1。它们现在位于Defcon 20。
semanticommunity.info –一般军事硬件概述。到深层网络的一些更深层次的链接
Shodan –深网搜索,查找连接到互联网的内容。有争议,但是一个很好的工具。
reference: http://deep-web.org/how-to-research/deep-web-search-engines/
Gephi: 可视化工具,探索性数据分析、社交网络分析、生物网络分析、海报制作、链接分析。