paper_downloader
Download papers and supplemental materials from open access paper website, such as AAAI, AISTATS, COLT, CVPR, ECCV, ICCV, ICLR, ICML, IJCAI, JMLR, NIPS, WACV.
The number of papers that could be downloaded using this repo (with Aliyundrive share link and access code):
| year\conf | AAAI | ACCV | AISTATS | COLT | CVPR | ECCV | ICCV | ICLR | ICML | IJCAI | JMLR | NIPS | WACV |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 1969 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 64 | -- | -- | -- |
| 1971 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 66 | -- | -- | -- |
| 1973 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 85 | -- | -- | -- |
| 1975 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 146 | -- | -- | -- |
| 1977 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 251 | -- | -- | -- |
| 1979 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 12 | -- | -- | -- |
| 1980 | 9596eg |
-- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- |
| 1981 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 108 | -- | -- | -- |
| 1982 | 104 | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- |
| 1983 | 9209jo |
-- | -- | -- | -- | -- | -- | -- | -- | 237 | -- | -- | -- |
| 1984 | 69 | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- |
| 1985 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 259 | -- | -- | -- |
| 1986 | 194 | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- |
| 1987 | 149 | -- | -- | -- | -- | -- | -- | -- | -- | 246 | -- | 90 | -- |
| 1988 | 159 | -- | -- | -- | -- | -- | -- | -- | -- | -- | -- | 94 | -- |
| 1989 | -- | -- | -- | -- | -- | -- | -- | -- | -- | 269 | -- | 101 | -- |
| 1990 | 173 | -- | -- | -- | -- | 49 | -- | -- | -- | -- | -- | 143 | -- |
| 1991 | 144 | -- | -- | -- | -- | -- | -- | -- | -- | 192 | -- | 144 | -- |
| 1992 | 134 | -- | -- | -- | -- | 49 | -- | -- | -- | -- | -- | 127 | -- |
| 1993 | 135 | -- | -- | -- | -- | -- | -- | -- | -- | 138 | -- | 158 | -- |
| 1994 | 302 | -- | -- | -- | -- | 98 | -- | -- | -- | -- | -- | 140 | -- |
| 1995 | -- | -- | 64 | -- | -- | -- | -- | -- | -- | 282 | -- | 152 | -- |
| 1996 | 275 | -- | -- | -- | -- | 98 | -- | -- | -- | -- | -- | 152 | -- |
| 1997 | 186 | -- | 57 | -- | -- | -- | -- | -- | -- | 180 | -- | 150 | -- |
| 1998 | 187 | -- | -- | -- | -- | 98 | -- | -- | -- | -- | -- | 151 | -- |
| 1999 | 182 | -- | 17 | -- | -- | -- | -- | -- | -- | 204 | -- | 150 | -- |
| 2000/v1 | 221 | -- | -- | -- | -- | 98 | -- | -- | -- | -- | 11 | 152 | -- |
| 2001/v2 | -- | -- | 46 | -- | -- | -- | -- | -- | -- | 17 | 31 | 197 | -- |
| 2002/v3 | 187 | -- | -- | -- | -- | 196 | -- | -- | -- | -- | 59 | 207 | -- |
| 2003/v4 | --- | -- | 44 | -- | -- | -- | -- | -- | 121 | 297 | 59 | 198 | -- |
| 2004/v5 | 177 | -- | -- | -- | -- | 190 | -- | -- | 118 | -- | 56 | 207 | -- |
| 2005/v6 | 328 | -- | 56 | -- | -- | -- | -- | -- | 133 | 350 | 73 | 207 | -- |
| 2006/v7 | 393 | -- | -- | -- | -- | 192+11 | -- | -- | -- | -- | 100 | 204 | -- |
| 2007/v8 | 375 | -- | 86 | -- | -- | -- | -- | -- | 150 | 478 | 91 | 217 | -- |
| 2008/v9 | 355 | -- | -- | -- | -- | 196 | -- | -- | 158 | -- | 97 | 250 | -- |
| 2009/v10 | -- | -- | 84 | -- | -- | -- | -- | -- | 160 | 342 | 100 | 262 | -- |
| 2010/v11 | 300 | -- | 126 | -- | -- | 286+63 | -- | -- | 159 | -- | 118 | 292 | -- |
| 2011/v12 | 302 | -- | 108 | 43 | -- | -- | -- | -- | 153 | 490 | 105 | 306 | -- |
| 2012/v13 | 353 | -- | 160 | 46 | -- | 329+147 | -- | -- | 243 | -- | 119 | 368 | -- |
| 2013/v14 | 251 | -- | 72 | 50 | 4715p0q+156 |
-- | 455+142 | -- | 283 | 496 | 84 | 360 | -- |
| 2014/v15 | 447 | -- | 124 | 61 | 545+125 | 334+158 | -- | 35 | 310 | -- | 120 | 411 | -- |
| 2015/v16 | 455 | -- | 134 | 77 | 602+133 | -- | 526+133 | 42 | 270 | 656 | 118 | 403 | -- |
| 2016/v17 | 676 | -- | 168 | 70 | 643+194 | 372+132 | -- | 80 | 322 | 658 | 236 | 568 | -- |
| 2017/v18 | 765 | -- | 175 | 75 | 783+281 | -- | 621+353 | 198 | 434 | 781 | 234 | 679 | -- |
| 2018/v19 | 1102 | -- | 230 | 94 | 979+346 | 732+262 | -- | 336 | 466 | 870 | 84 | 1009 | -- |
| 2019/v20 | 1343 | -- | 403 | 127 | 1294+612 | -- | 1075+498 | 502 | 773 | 964 | 184 | 1428 | -- |
| 2020/v21 | 18645ls6 |
254dn93+13d9o6 |
79661yu |
1263mv9 |
1467y89b+5170fz9 |
1358a5i0 |
-- | 6874x1c |
10845yw0 |
7764xq3 |
254 | 18993g3d |
378l1m8+24me08 |
| 2021/v22 | 1961b69m |
-- | 84593ig |
14096ln |
1660+517le14 |
-- | 161299uu+46516es |
860ef43 |
1183g8b1 |
72340is |
290 | 2334v6g1 |
4061id9+2390rl |
| 2022/v23 | 1624fp76 |
27947jy+25s7a9 |
492f16o |
155 | 2077i16a+56211kj |
16456d7j |
-- | 54+176+865b1l3 |
123481ov |
862ea46 |
351 | 2673eh49 |
406ab53+80q6d2 |
| 2023/v24 | 2021 | -- | 496l5m9 |
170 | 2358+698 | -- | 90+284+120529sf |
1805 | 846 | 257 | 639mo78+74nj80 |
usage
For example: download AAAI-2022 papers
- Change the code block at the end of code/paper_downloader_AAAI.py
if __name__ == '__main__':
year = 2022
total_paper_number = save_csv(year) # save papers urls to csv/AAAI_2022.csv
download_from_csv(
year,
save_dir=f'..\\AAAI_{year}', # change to your save location
time_step_in_seconds=5, # time step (seconds) between two downloading requests
total_paper_number=total_paper_number,
downloader='IDM' # use Internet Download Manager software to download papers
)- Then run the code:
python code/paper_downloader_AAAI.py # download AAAI papersThis repo also provides the function to process supplemental material:
- Merge the main supplemental material pdf file and the main paper into one single pdf file;
- Move the supplemental material pdf files (extracted from the downloaded zip files if presented) into the main papers' folder.
KNOWN ISSUES
issue with pywin32
ERROR: After install pywin32, a error may accour: ImportError: DLL load failed while importing win32api: 找不到指定的模块.
SOLUTION: Get into the python interpreter path/Scripts folder and run this command in CMD: python pywin32_postinstall.py -install