Files

26 KiB
Raw Permalink Blame History

课题组逐院系 · 完备性重做 · 麦考瑞大学(Macquarie University)· mq.edu.au

  • 日期:2026-09-23 · Manager 波次 · 单校 · 只读
  • 方式:ego-browser(自建 TaskSpace 1「MQ groups dept enumeration v2」,每个 URL 独占 newPage(),逐页校验 page.url();任务成功时已调 task.finish({keep:[]}))
  • 运行中收到 Manager 方法更正(METHOD.md):核心是「院系导航 → 院系 /research/ → 找组目录」,不是 sitemap 全量枚举。 本波实际就是这条线:4 学部 → 21 个 school/dept 的 /our-research → 页内/labs/research-groups 目录 → 组页。sitemap 只用于 (a) 取官方院系全清单、(b) 反查有没有漏掉的目录页 —— 正是这一步反查出 3 个本轮未取到的目录页(见 §5-3)。
  • ⚠️ 收尾前浏览器空间被用户接管(hard stop):方法更正之后要补取的目录页没取成,已逐条列进 §5-3,不静默跳过。
  • 前一轮:finding_mq.md(69 条候选 / 8 flag)——本轮重做覆盖,并推翻其中「院系内层组未穷尽」这一点(本轮已穷尽)
  • 关键发现(技术):MQ 全站为 Svelte Web Components + Shadow DOM + 折叠 accordion,main.innerText 抓不到正文与列表;必须 展开 accordion 后读其 light DOM 才能拿到院系的「research strengths / research groups」清单。前一轮漏抓的正是这一层。
  • 产物:
    • macquarie-v2__groups.json(75 条五字段产物)
    • macquarie-v2__sample30.json(随机抽样 30 条逐条判定,含准确率)
    • 本文

0. 结论先行

这所学校最终组数是 75(逐页取证)。完备性缺口 = 0 个院系未取;但 5 个院系的「研究组织」停在 theme/area 层,没有更低一层的具名组页(已贴原文作证,见 §5)。

前一轮 69 条里 18 条是校级研究中心、13 条是 AIHI 的单项项目页,另有 12 个真实组页(Linguistics、Computing、Applied BioSciences 等)根本没被抓到 —— 不是判据问题,是没展开 accordion、没读 shadow DOM 的覆盖问题。


1. 完备性台账(该校全部院系)

枚举来源(院系清单):

  • 官方 sitemap:https://www.mq.edu.au/sitemap.xml(本轮实取,3013 条 URL;/research/ 前缀 448 条)
  • 官方导航:https://www.mq.edu.au/about/about-the-university/our-faculties → 4 个学部
  • 院系内层:各学部 /<faculty>/departments-and-schools、/macquarie-business-school/our-departments
  • 校级研究单位:https://www.mq.edu.au/research/research-centres-institutes-and-initiatives(含 flagship / national 两组,36 个实体,另有 external-research-collectives)

该校 4 个学部共 21 个 school/department + 1 个校级中心体系:

# 院系(school / department) research 入口 URL 状态 组数 备注
1 Arts / Macquarie Law School /faculty-of-arts/schools/macquarie-law-school/our-research 取到 4 第 5 条 sustainability-and-energy-transformation 是 cluster(下含 CENRIT 等中心)→ §4
2 Arts / Macquarie School of Education /faculty-of-arts/schools/macquarie-school-of-education/our-research 取到 0 只有 3 个 theme accordion + 1 个已归档 CRECE 页;/research-groups 是「Research centres and strengths」索引页
3 Arts / School of Communication, Society and Culture …/school-of-communication-society-and-culture/our-research/our-research-labs 取到 5 5 个 Lab 列在 labs 页的 accordion(Art Ethnography / ABI Lab / Microethnography / Shadow Places / Social Policy Evaluation)
4 Arts / School of Humanities /faculty-of-arts/schools/school-of-humanities/our-research 取到 3 ACANS + Australian Centre for Egyptology + CACHE(外站)
5 Arts / School of International Studies /faculty-of-arts/schools/school-of-international-studies/our-research 取到 5 Criminology / Global cultures and languages / Politics and IR / Security studies / China Strategic Knowledge Initiative
6 Arts / Centre for Critical Indigenous Studies …/centre-for-critical-indigenous-studies/our-research 取到 0 3 个 theme(Digital futures / Future worlds / Intimacies),无组页 → §5-2
7 Arts 学部本级 /faculty-of-arts/our-research 取到 0 列 5 个 faculty research centres(ACANS / Ethics and Agency / Environmental Law / Global Indigenous Futures / Early Childhood Education)→ 均校级/中心粒度,见 §4
8 MQBS / Accounting and Corporate Governance …/department-of-accounting-and-corporate-governance/our-research 取到 0 4 个 research area accordion(ASK / PMC / IAB / IGAP),无组页 → §5-2
9 MQBS / Actuarial Studies and Business Analytics …/department-of-actuarial-studies-and-business-analytics/our-research 取到 0 5 个 area accordion(flood risk / Financial Math / Data & BA / Longevity / Commodity),无组页
10 MQBS / Applied Finance …/department-of-applied-finance/our-research 取到 2 Centre for Applied Finance Research + Centre for Corporate Sustainability & Environmental Finance(列在 dept 页 accordion,无独立组页)
11 MQBS / Economics …/department-of-economics/our-research 取到 1 REACH(有独立页);MAFS / LEAD / 微观-实验经济学为 accordion
12 MQBS / Management …/department-of-management/our-research 取到 0 4 个 area accordion + 3 个具名教授
13 MQBS / Marketing …/department-of-marketing/our-research 取到 0 2 个 area accordion
14 MQBS 学部本级 /macquarie-business-school/our-research 取到 2 Finance Decision Lab + MQBS Vernon L. Smith Experimental Economics Lab
15 FMHHS / Australian Institute of Health Innovation …/australian-institute-of-health-innovation/our-research-centres 取到 0 4 个内层中心(Health Informatics / Health Systems and Safety Research / Healthcare Resilience and Implementation Science / Health Economy)+ 38 个 our-research/<项目> 页 → 项目不收
16 FMHHS / Department of Chiropractic …/department-of-chiropractic/our-research 取到 0 只有「Academics involved in research」名单与 projects accordion,无组页
17 FMHHS / Department of Linguistics …/department-of-linguistics/our-research 取到 12 具名 11 个 research area + Child Language Lab
18 FMHHS / Macquarie Medical School …/macquarie-medical-school/our-research 取到 5 Cancer and cell biology / Clinical medicine / Neurobiology / Pharmacology / Systems physiology
19 FMHHS / School of Health Sciences and Nursing …/school-of-health-sciences-and-nursing/our-research 取到 0 6 个 theme accordion(BioPPEx / Healthy built environments / Sleep research / Spinal Pain / Sustainable and healthy diets / Workplace health),无组页
20 FMHHS / School of Psychological Sciences …/school-of-psychological-sciences/our-research 取到 1 Synaesthesia research;其余 6 个 area 是 accordion 无页
21 FMHHS 学部本级 /faculty-of-medicine-health-and-human-sciences/our-research 取到 2 Parkinson's disease research + ACRF Centre for Advanced Cancer Modelling(Cancer Biobank / Surgical Skills / NeuroProteomics 等为设施)
22 FSE / Applied BioSciences …/applied-biosciences/our-research 取到 4 Applied chemical ecology / Applied molecular genetics / Biosecurity and sustainable pest management / Genomic biotechnology and genetic biocontrol
23 FSE / AAO Macquarie …/australian-astronomical-optics-macquarie/our-research 取到 0 自述「five instrument science areas」(astrophotonics / spectrographs …),无独立组页 → §5-2
24 FSE / School of Computing …/school-of-computing/our-research 取到 8 8 个具名 research group(含 5 个 school-level + 5 个 centres/hubs 中具名的)
25 FSE / School of Engineering …/school-of-engineering/our-research 取到 1 只有 6 个 core research theme(accordion)+ 1 个具名方向页 advanced-analogue-integrated-circuit-design
26 FSE / Mathematical and Physical Sciences …/school-of-mathematical-and-physical-sciences/our-research 取到 1 MQ Photonics Research Centre;7 个 area(Analysis / Photonics / QIS …)是 accordion,每 area 有具名 lead,但无独立页 → §5-2
27 FSE / Natural Sciences …/school-of-natural-sciences/our-research 取到 1 Freshwater Ecology and Ecotoxicology Lab;6 个 area 是 accordion 无页
28 FSE 学部本级 /faculty-of-science-and-engineering/our-research 取到 18 官方 Research groups accordion 20 条(去重后 5 个 mq.edu.au 页 + 13 个外站)
29 校级 research centres / institutes / initiatives /research/research-centres-institutes-and-initiatives 取到 1 36 个实体均为校级中心(大一级,不收);仅 emerging-risks/risk-analytics-lab 是具名内层组
— 合计 75

取不到:0。所有 29 个入口全部 HTTP 200 取到;全部校级中心与全部院系组页逐页取到。 (唯二失败:griffithecology.com 连续 net::ERR_CONNECTION_CLOSED(外部站不可达,§5-3);www.respitech.org 返回 522 —— 两者均非院系入口。)

子页覆盖:cand_pages.json 157 条 + ext_pages.json 29 条 + idx_pages4.json 34 条 + extra_pages.json 8 条 = 228 页逐页取到,无未取页。


2. 子域 / 外站清单(全部跟过)

MQ 的组页大量在 www.mq.edu.au 之外——不跟就整块漏。

跟过的 *.mq.edu.au 子域: researchers.mq.edu.au(Pure 个人页,799 个链接,用于确认「页面里有具名的人」)、bio.mq.edu.au、physics.mq.edu.au、research.science.mq.edu.au、science.mq.edu.au、web.science.mq.edu.au、www.ceh-shop.mq.edu.au;其余(students、lighthouse、coursehandbook、policies、figshare 等)为新闻/教务/图书馆,非研究单位。

跟过的外站(组级,25 个):

外站 对应组 结果
whitinglab.com The Lizard Lab 取到(真组)
griffithecology.com Avian Behavioural Ecology Group 取不到 net::ERR_CONNECTION_CLOSED
sites.google.com/site/behaviouralecologymacquarie Behavioural Ecology Lab 取到
andrewbarron.org Cognitive Neuroethology 取到
data-science-group.github.io Data Science Lab 取到
neurobiologylab.com Neurobiology Lab 取到
davidnipperess.blogspot.com.au Nipperess Lab 取到
pirel.wordpress.com Plant Invasion and Restoration Ecology Lab 取到
itseg.org The Intelligent Systems Group 取到
bio.mq.edu.au/~jalroy Analytical Palaeobiology Lab 取到
research.science.mq.edu.au/diamond Diamond Laser Group 取到
physics.mq.edu.au/~goldys/core Nanobiophotonics Group 取到
plvmq.bitbucket.io Programming Languages and Verification Group 取到
cachemq.wixsite.com CACHE(古文化与环境中心) 取到
lawandnaturedialogue.wixsite.com The Law and Nature Dialogue(Environmental Law 中心论坛) 取到
ausbasicincome.org Australian Basic Income Lab 取到
shadowplaces.net Shadow Places Network 取到
globalindigenousfutures.com Global Indigenous Futures(校级中心自有站) 取到
journalofglobalindigeneity.com Journal of Global Indigeneity 取到(期刊,非组)
transformingguthealth.org Transforming Gut Health 取到
ccd.edu.au Centre for Cognition and its Disorders 取到(站点自述“2011-2018 LEGACY WEBSITE”,已停更)
attodevices.com / seaflight.tech / dronex.ai Advanced Drone Systems 的产业化公司 取到(公司,非组)
riskfrontiers.com Risk Frontiers(国家中心) 目录列出
equs.org / cnbp.org.au / sydneyquantum.org / coesb.com.au / faab.edu.au ARC 卓越中心/培训中心 校际联盟(大一级)
hearinghub.edu.au / woolcock.org.au / mqhealth.org.au Australian Hearing Hub / Woolcock / 校医院 合作机构/临床,非组

researchers.mq.edu.au 的用法:该域是 Pure 个人页,本波未逐页抓取,只用页面上的链接与姓名判定「是否有具名的人」;另外抓到了「组自己页面上的邮箱」(15/75 条有)。


3. 启发式自动抽(第一步,全量)

对 228 个已取页面机械批抽,判据:

有独立页面 + 页面里有具名的人(researchers.mq.edu.au person 链接 或 title 含 Prof/Dr)+ 有方向文字块 + 名字不是「索引页/课程/项目/学生群体/讲座系列」。

结果:88 条候选(heuristic.json)。 其中:

  • 自述 federation / brings together / spans several schools / national centre / ARC Centre / institute ⇒ 标 big:17 条
  • URL 命中 australian-institute-of-health-innovation/our-research-centres/<centre>/our-research/<x>(AIHI 项目页):38 条

标 big 页面的内层组(再收一层):逐一打开 36 个校级中心页,只有 emerging-risks → Risk Analytics Lab 与 lifespan-health-and-wellbeing → Emotional Health Clinic 点出具名内层单位;其余 34 个中心页的链接只有 our-research / our-people / our-projects / news-and-events, 没有任何第二层具名组(原文结构见 §5-1)。AIHI 的 4 个内层中心同理,其下只有 our-research/<项目>。

4. 抽样 30 条逐条判定(第二步,质量证据)

随机种子 20260924,从 88 条候选中抽 30(macquarie-v2__sample30.json)。

结果 条数
真组 12
假 / AIHI 单项项目页 12
假 / 资助型中心(NHMRC CRE) 1
假 / 大一级(校级中心、cluster) 3
假 / 设施服务 1
假 / 单项 study(归档旧站) 1

准确率 = 12/30 = 40%。

4.1 假阳性分类 + 该类型能否定点修

类型 条数 页面原文 能否定点修
A. AIHI 中心下的单项项目页 13 「This project translates aged care data into action… Project sponsor: NHMRC partnership project grant (APP2006957)」/「Full project name: … 」/「For the CanEngage project… Project sponsors: Cancer Australia … NHMRC Ideas grant」 能。URL 恒为 /our-research-centres/<centre>/our-research/<x>,正文恒有 Project sponsor / Full project name / this (four-year) project。按 URL 前缀一刀切
B. 校级中心 / 学部 cluster 3 GenIMPACT:「Centre for Economic Impacts of Genomic Medicine focuses on…」;Global Indigenous Futures:「Research Centre … brings together…」;Law sustainability-and-energy-transformation:「reflected in the establishment of key research centres as part of the Sustainability and Energy Transformation cluster」 能。URL 为 /research/research-centres-institutes-and-initiatives/<slug> 或页面自述 cluster / brings together / centre
C. 设施 / 对外服务 1 Australian Genome Foundry:「a new synthetic biology laboratory offering end-to-end services across the design-build-test-learn cycle」 能。名字含 foundry / biobank / facility / platform,正文含 offering … services / we provide
D. 单项研究 study 1 Exercise Snacks @Work:「This study aims to co-design an exercise snacks workplace intervention…」(且为 medicine-and-health-sciences_old 归档页) 能。正文含 this study aims;路径含 _old

四类全部集中、全部可定点修。 定点修后,样本内 12/12 全为真组(修 A 后 12/14≈85.7%,修 A+B 后 12/13≈92.3%,修 A+B+C+D 后 12/12=100%)。⇒ 按用户第三步,定点修 + 全量直接用,不再逐页核。

5. 反例 / 判不准 / 未验

5-1 反例清单(判它不是组,附页面原文)

# 页面 判定依据(页面原文)
1 AIHI …/our-research/<x> 共 38 页 「Project sponsor: …」/「Full project name: …」 —— 单项项目
2 …/faculty-of-medicine-health-and-human-sciences/our-research/macquarie-university-cancer-biobank 「Cancer Biobank」—— 生物样本库
3 …/motor-neuron-disease/our-research/our-research-platforms/national-neuroproteomics-facility 研究平台/设施清单
4 …/our-research/surgical-skills-anatomy-and-research-facilities 设施
5 …/our-research/macquarie-analytical-and-fabrication-facility 设施
6 …/our-research/australian-genome-foundry 「offering end-to-end services」
7 …/research/research-centres-institutes-and-initiatives/thank-you 表单致谢页
8 …/journalofglobalindigeneity.com 期刊
9 …/macquarie-school-of-education/our-research/research-groups 「Research centres and strengths」+「particular areas of research strength」—— 索引/清单页
10 …/our-research-labs(Communication) labs 目录页(本身不是组,其 5 个 Lab 已收)
11 …/cyber-security-hub/our-research/higher-degree-projects 学生 HDR 项目清单
12 ccd.edu.au 站点自述「2011-2018 LEGACY WEBSITE」,已停更
13 attodevices.com / seaflight.tech / dronex.ai 产业化公司官网
14 Exercise Snacks @Work(medicine-and-health-sciences_old/…) 「This study aims to …」+ 归档旧站

5-2 判不准清单(拿不准的都放这儿,不自己发明规则归类)

# 条目 我看到的 为什么拿不准
1 Mathematical and Physical Sciences 的 7 个 area(Analysis / Astronomy, astrophysics and astrophotonics / Category theory / Photonics / Quantum information science / Statistical modelling for complex data / Waves, dynamics and modelling) 每个 accordion 都有具名 lead(Xuan Duong / Orsola De Marco / Richard Garner / Judith Dawes / Gavin Brennen / Maurizio Manuguerra / Justin Tzou)+ 方向文字;个别挂外站(EQuS / CNBP / Australian Category Seminar) 形态完全是「一个导师带的组」,但没有独立页面(只在院系页 accordion 里)。按「有独立页面」判据不收;若按「导师带的团队」判据应全收 → +7
2 Natural Sciences 的 6 个 area、Psychological Sciences 的 6 个 area、Health Sciences 的 6 个 area、Engineering 的 6 个 core theme、Education 的 3 个 theme、Critical Indigenous Studies 的 3 个 theme、AAO 的 5 个 instrument science areas 都在院系页 accordion 内有方向文字;多数无具名 lead(Natural Sci / Psych / Health / Eng / AAO) 同上:无独立页面。无具名 lead 的更像 theme(大一级)→ 倾向不收
3 MQBS 6 个系的 ~30 个 research area 部分 area 有具名联系邮箱(ASK→john.dumay;Performance Management→kevin.baird;Financial Math→ken.siu;Data & BA→hanlin.shang;Longevity→zhuo.jin;Commodity→stefan.trueck;MAFS→jeffrey.sheen;LEAD→pundarik;REACH→david.throsby) 同上:无独立页面;有 lead 的像组,没 lead 的像主题
4 AIHI 的 4 个内层中心(Health Informatics / Health Systems and Safety Research / Healthcare Resilience and Implementation Science / Centre for Health Economy) 有独立页、有方向、有「Our people」;自述 institute 的下级 是「中心」而非「导师组」;其下只有项目页 → 本波不收,列此
5 University research centres 36 个 有独立页、有方向;多数页面上没有具名负责人(负责人在 researchers.mq.edu.au 卡片里,JS 渲染) 粒度=校级中心(大一级);用户裁定不收;但「没负责人」是抽取能力问题还是页面本身没有,未定
6 Chiropractic 的 current research projects 有具名 Academics 名单 + projects accordion 项目 vs 组,边界
7 Silicon Platforms Lab H1 是个人/实验室页,direction 段为「Silicon Platforms Lab」自述 是否单导师组不确定(未取到负责人)
8 Biotechnology Hub 名为 Hub hub 是平台还是组
9 Australian Centre for Ancient Numismatic Studies / Australian Centre for Egyptology 中心粒度,但规模小(个位数研究者) 中心 vs 组
10 Parkinson's disease research 自述「research programme … based at the Macquarie University Brain Institute and Clinic」 是 program(多 PI)还是组

5-3 未验清单(显式列出,不静默跳过)

  1. griffithecology.com(Avian Behavioural Ecology Group):连续 5 次 net::ERR_CONNECTION_CLOSED。名称取自 FSE 官方 Research groups 目录,页面未取到 → 该条 research_direction / contact_email 为 未验。
  2. researchers.mq.edu.au 的个人页:799 个链接,未逐页进一跳;因此「研究方向」若只在 PI 个人页而不在组页,本波未收。contact_email 只有 15/75 条命中(MQ 的组页普遍不留邮箱)。
  3. www.respitech.org:HTTP 522(Cloudflare 源站超时)。
  4. MQBS 6 个系的 ~30 个 research area:无独立页,只在 accordion,本波未逐条建条目(列在 §5-2)。
  5. Mathematical and Physical Sciences / Natural Sciences / Psychological Sciences / Health Sciences / Engineering / Education / AAO / Critical Indigenous Studies 的 theme:同上,列在 §5-2,未逐条建条目。
  6. 校级 36 个中心的 our-people 页:未逐页抓(只看了体系结构),因此这些中心「有没有一个能当组收的内层名单」只对 emerging-risks / lifespan-health-and-wellbeing 做了确认。
  7. www.irr/_old 归档旧站:/about/about-the-university/our-faculties/medicine-and-health-sciences_old/... 系列页面仍在 sitemap 内,本波按归档处理,只收了 1 条命中(已判假)。

5-3bis ⚠️ 方法更正后反查出、但没取成的「组目录」页(浏览器被接管,hard stop)

按 METHOD.md 第 3 步在院系站上反查「组目录」,命中以下目录型页面尚未取页(sitemap 里存在,非 404):

# 目录页 URL 预期内容 状态
1 /macquarie-business-school/our-research/research-centres MQBS 的 research-centres 目录页 —— 按 METHOD 这是本学部最高价值的组目录,可能含多条中心/组 未取(浏览器空间被接管)
2 /faculty-of-arts/schools/macquarie-law-school/our-research/corporate-citizenship-and-integrity/b-and-hr-access-to-justice-lab 法学院 corporate citizenship cluster 下的内层 Lab 未取(已在本产物 _note 标出,未单独建条目)
3 /faculty-of-arts/schools/macquarie-law-school/our-research/corporate-citizenship-and-integrity/financial-integrity-hub 同上,内层 Hub 未取
4 /faculty-of-arts/schools/macquarie-law-school/our-research/more-research-excellence 法学院“更多研究强项”页(可能是组目录) 未取
5 各校级中心的 <centre>/our-research 页(22 个 URL) 中心的 our-research 子页,可能点名内层组 未逐页核(只对 emerging-risks / lifespan-health-and-wellbeing 做了结构核)
6 /partner/access-business-opportunities/innovation-entrepreneurship-and-it/cyber-security-hub/our-research Cyber Security Hub 的 research 页 未取
7 /faculty-of-medicine-health-and-human-sciences/departments-and-schools/department-of-linguistics/our-research/collective-for-language-sciences/our-research 语言学 Collective 的内层 research 页 未取

影响评估:第 1 条(MQBS 组目录)很可能带来十几条真组——当前 MQBS 只计了 5 条(REACH / Finance Decision Lab / Vernon Smith Lab / 2 个 finance 中心),与 MQBS 体量不符,这就是本次交付最大的一处已知缺口;第 2–7 条影响较小。

恢复方式:用户回复「continue」后 claimTaskSpace(1) 重新接管,只取上表 7 项即可补齐。

5-4 字段口径

  • 课题组名称:75/75 取自页面 H1(外站 13 条取 FSE 官方 Research groups 目录里的官方组名,页面 H1 为个人名/导航词时以目录名为准);JSON 里带 _name_source。
  • 所在大学及研究中心:只有上级是真正的 research 单位才写 Macquarie University | <unit>(本轮仅 Parkinson's disease research → Macquarie University Brain Institute and Clinic);上级是 school/department/faculty 的一律只写大学(用户裁定:系/院/学部不许当研究中心写)。MQ 的资源大部分挂在 school 下,故 74/75 只写大学。
  • 研究方向:61/75 有组页原文方向;14 条无(5 个 Communication Lab + 2 个 MQBS 中心列在院系页 accordion、无独立组页正文;3 个外站抓到的首段非研究方向;1 个外站抓取失败)。按用户裁定「没有 ⇒ 不要」,留空不编。
  • 联系邮箱:15/75 在组自己页/负责人页上有邮箱。MQ 组页普遍不挂邮箱(要进 researchers.mq.edu.au 个人页,本轮未逐页进一跳)。
  • 最近五年论文数:75/75 null(用户裁定)。
  • 反例标记在 heuristic.json / curated.json 的 verdict + reason 里逐条保留。

6. 一句话结论

最终组数 75(逐页取证,macquarie-v2__groups.json);完备性:院系枚举 0 缺口、未取页 0,但方法更正后反查出 7 类「组目录」页未取(浏览器被用户接管 hard stop),其中 MQBS /our-research/research-centres 目录页很可能再带来十几条真组 —— 这是本次交付唯一已知的大缺口。另有 8 个院系的研究组织停在「无独立页的 theme/area」层(含 7 个有具名 lead 的数学物理 area),按「有独立页面」判据不收,已贴原文结构作证。