Ego4D Around the World in 3,000 Hours of Egocentric Video

Ego4D : Around the World in 3,000 Hours of Egocentric Video

We introduce Ego4D, a massive-scale egocentric video dataset and benchmark suite. It offers 3,670 hours of daily-life activity video spanning hundreds of scenarios (household, outdoor, workplace, leisure, etc.) captured by 931 unique camera wearers from 74 worldwide locations and 9 different countri...

Ausführliche Beschreibung

Bibliographische Detailangaben
Veröffentlicht in:IEEE transactions on pattern analysis and machine intelligence. - 1979. - PP(2024) vom: 26. Juli
1. Verfasser: Grauman, Kristen (VerfasserIn)
Weitere Verfasser: Westbury, Andrew, Byrne, Eugene, Cartillier, Vincent, Chavis, Zachary, Furnari, Antonino, Girdhar, Rohit, Hamburger, Jackson, Jiang, Hao, Kukreja, Devansh, Liu, Miao, Liu, Xingyu, Martin, Miguel, Nagarajan, Tushar, Radosavovic, Ilija, Ramakrishnan, Santhosh Kumar, Ryan, Fiona, Sharma, Jayant, Wray, Michael, Xu, Mengmeng, Xu, Eric Zhongcong, Zhao, Chen, Bansal, Siddhant, Batra, Dhruv, Crane, Sean, Do, Tien, Doulaty, Morrie, Erapalli, Akshay, Feichtenhofer, Christoph, Fragomeni, Adriano, Fu, Qichen, Gebreselasie, Abrham, Gonzalez, Cristina, Hillis, James, Huang, Xuhua, Huang, Yifei, Jia, Wenqi, Khoo, Weslie, Kolar, Jachym, Kottur, Satwik, Kumar, Anurag, Landini, Federico, Li, Chao, Li, Yanghao, Li, Zhenqiang, Mangalam, Karttikeya, Modhugu, Raghava, Munro, Jonathan, Murrell, Tullie, Nishiyasu, Takumi, Price, Will, Puentes, Paola Ruiz, Ramazanova, Merey, Sari, Leda, Somasundaram, Kiran, Southerland, Audrey, Sugano, Yusuke, Tao, Ruijie, Vo, Minh, Wang, Yuchen, Wu, Xindi, Yagi, Takuma, Zhao, Ziwei, Zhu, Yunyi, Arbelaez, Pablo, Crandall, David, Damen, Dima, Farinella, Giovanni Maria, Fuegen, Christian, Ghanem, Bernard, Ithapu, Vamsi Krishna, Jawahar, C V, Joo, Hanbyul, Kitani, Kris, Li, Haizhou, Newcombe, Richard, Oliva, Aude, Park, Hyun Soo, Rehg, James M, Sato, Yoichi, Shi, Jianbo, Shou, Mike Zheng, Torralba, Antonio, Torresani, Lorenzo, Yan, Mingfei, Malik, Jitendra
Format: Online-Aufsatz
Sprache:English
Veröffentlicht: 2024
Zugriff auf das übergeordnete Werk:IEEE transactions on pattern analysis and machine intelligence
Schlagworte:Journal Article
LEADER 01000caa a22002652c 4500
001 NLM375461280
003 DE-627
005 20250306111326.0
007 cr uuu---uuuuu
008 240727s2024 xx |||||o 00| ||eng c
024 7 |a 10.1109/TPAMI.2024.3381075  |2 doi 
028 5 2 |a pubmed25n1250.xml 
035 |a (DE-627)NLM375461280 
035 |a (NLM)39058617 
040 |a DE-627  |b ger  |c DE-627  |e rakwb 
041 |a eng 
100 1 |a Grauman, Kristen  |e verfasserin  |4 aut 
245 1 0 |a Ego4D  |b Around the World in 3,000 Hours of Egocentric Video 
264 1 |c 2024 
336 |a Text  |b txt  |2 rdacontent 
337 |a ƒaComputermedien  |b c  |2 rdamedia 
338 |a ƒa Online-Ressource  |b cr  |2 rdacarrier 
500 |a Date Revised 30.07.2024 
500 |a published: Print-Electronic 
500 |a Citation Status Publisher 
520 |a We introduce Ego4D, a massive-scale egocentric video dataset and benchmark suite. It offers 3,670 hours of daily-life activity video spanning hundreds of scenarios (household, outdoor, workplace, leisure, etc.) captured by 931 unique camera wearers from 74 worldwide locations and 9 different countries. The approach to collection is designed to uphold rigorous privacy and ethics standards, with consenting participants and robust de-identification procedures where relevant. Ego4D dramatically expands the volume of diverse egocentric video footage publicly available to the research community. Portions of the video are accompanied by audio, 3D meshes of the environment, eye gaze, stereo, and/or synchronized videos from multiple egocentric cameras at the same event. Furthermore, we present a host of new benchmark challenges centered around understanding the first-person visual experience in the past (querying an episodic memory), present (analyzing hand-object manipulation, audio-visual conversation, and social interactions), and future (forecasting activities). By publicly sharing this massive annotated dataset and benchmark suite, we aim to push the frontier of first-person perception. Project page: https://ego4d-data.org/ 
650 4 |a Journal Article 
700 1 |a Westbury, Andrew  |e verfasserin  |4 aut 
700 1 |a Byrne, Eugene  |e verfasserin  |4 aut 
700 1 |a Cartillier, Vincent  |e verfasserin  |4 aut 
700 1 |a Chavis, Zachary  |e verfasserin  |4 aut 
700 1 |a Furnari, Antonino  |e verfasserin  |4 aut 
700 1 |a Girdhar, Rohit  |e verfasserin  |4 aut 
700 1 |a Hamburger, Jackson  |e verfasserin  |4 aut 
700 1 |a Jiang, Hao  |e verfasserin  |4 aut 
700 1 |a Kukreja, Devansh  |e verfasserin  |4 aut 
700 1 |a Liu, Miao  |e verfasserin  |4 aut 
700 1 |a Liu, Xingyu  |e verfasserin  |4 aut 
700 1 |a Martin, Miguel  |e verfasserin  |4 aut 
700 1 |a Nagarajan, Tushar  |e verfasserin  |4 aut 
700 1 |a Radosavovic, Ilija  |e verfasserin  |4 aut 
700 1 |a Ramakrishnan, Santhosh Kumar  |e verfasserin  |4 aut 
700 1 |a Ryan, Fiona  |e verfasserin  |4 aut 
700 1 |a Sharma, Jayant  |e verfasserin  |4 aut 
700 1 |a Wray, Michael  |e verfasserin  |4 aut 
700 1 |a Xu, Mengmeng  |e verfasserin  |4 aut 
700 1 |a Xu, Eric Zhongcong  |e verfasserin  |4 aut 
700 1 |a Zhao, Chen  |e verfasserin  |4 aut 
700 1 |a Bansal, Siddhant  |e verfasserin  |4 aut 
700 1 |a Batra, Dhruv  |e verfasserin  |4 aut 
700 1 |a Crane, Sean  |e verfasserin  |4 aut 
700 1 |a Do, Tien  |e verfasserin  |4 aut 
700 1 |a Doulaty, Morrie  |e verfasserin  |4 aut 
700 1 |a Erapalli, Akshay  |e verfasserin  |4 aut 
700 1 |a Feichtenhofer, Christoph  |e verfasserin  |4 aut 
700 1 |a Fragomeni, Adriano  |e verfasserin  |4 aut 
700 1 |a Fu, Qichen  |e verfasserin  |4 aut 
700 1 |a Gebreselasie, Abrham  |e verfasserin  |4 aut 
700 1 |a Gonzalez, Cristina  |e verfasserin  |4 aut 
700 1 |a Hillis, James  |e verfasserin  |4 aut 
700 1 |a Huang, Xuhua  |e verfasserin  |4 aut 
700 1 |a Huang, Yifei  |e verfasserin  |4 aut 
700 1 |a Jia, Wenqi  |e verfasserin  |4 aut 
700 1 |a Khoo, Weslie  |e verfasserin  |4 aut 
700 1 |a Kolar, Jachym  |e verfasserin  |4 aut 
700 1 |a Kottur, Satwik  |e verfasserin  |4 aut 
700 1 |a Kumar, Anurag  |e verfasserin  |4 aut 
700 1 |a Landini, Federico  |e verfasserin  |4 aut 
700 1 |a Li, Chao  |e verfasserin  |4 aut 
700 1 |a Li, Yanghao  |e verfasserin  |4 aut 
700 1 |a Li, Zhenqiang  |e verfasserin  |4 aut 
700 1 |a Mangalam, Karttikeya  |e verfasserin  |4 aut 
700 1 |a Modhugu, Raghava  |e verfasserin  |4 aut 
700 1 |a Munro, Jonathan  |e verfasserin  |4 aut 
700 1 |a Murrell, Tullie  |e verfasserin  |4 aut 
700 1 |a Nishiyasu, Takumi  |e verfasserin  |4 aut 
700 1 |a Price, Will  |e verfasserin  |4 aut 
700 1 |a Puentes, Paola Ruiz  |e verfasserin  |4 aut 
700 1 |a Ramazanova, Merey  |e verfasserin  |4 aut 
700 1 |a Sari, Leda  |e verfasserin  |4 aut 
700 1 |a Somasundaram, Kiran  |e verfasserin  |4 aut 
700 1 |a Southerland, Audrey  |e verfasserin  |4 aut 
700 1 |a Sugano, Yusuke  |e verfasserin  |4 aut 
700 1 |a Tao, Ruijie  |e verfasserin  |4 aut 
700 1 |a Vo, Minh  |e verfasserin  |4 aut 
700 1 |a Wang, Yuchen  |e verfasserin  |4 aut 
700 1 |a Wu, Xindi  |e verfasserin  |4 aut 
700 1 |a Yagi, Takuma  |e verfasserin  |4 aut 
700 1 |a Zhao, Ziwei  |e verfasserin  |4 aut 
700 1 |a Zhu, Yunyi  |e verfasserin  |4 aut 
700 1 |a Arbelaez, Pablo  |e verfasserin  |4 aut 
700 1 |a Crandall, David  |e verfasserin  |4 aut 
700 1 |a Damen, Dima  |e verfasserin  |4 aut 
700 1 |a Farinella, Giovanni Maria  |e verfasserin  |4 aut 
700 1 |a Fuegen, Christian  |e verfasserin  |4 aut 
700 1 |a Ghanem, Bernard  |e verfasserin  |4 aut 
700 1 |a Ithapu, Vamsi Krishna  |e verfasserin  |4 aut 
700 1 |a Jawahar, C V  |e verfasserin  |4 aut 
700 1 |a Joo, Hanbyul  |e verfasserin  |4 aut 
700 1 |a Kitani, Kris  |e verfasserin  |4 aut 
700 1 |a Li, Haizhou  |e verfasserin  |4 aut 
700 1 |a Newcombe, Richard  |e verfasserin  |4 aut 
700 1 |a Oliva, Aude  |e verfasserin  |4 aut 
700 1 |a Park, Hyun Soo  |e verfasserin  |4 aut 
700 1 |a Rehg, James M  |e verfasserin  |4 aut 
700 1 |a Sato, Yoichi  |e verfasserin  |4 aut 
700 1 |a Shi, Jianbo  |e verfasserin  |4 aut 
700 1 |a Shou, Mike Zheng  |e verfasserin  |4 aut 
700 1 |a Torralba, Antonio  |e verfasserin  |4 aut 
700 1 |a Torresani, Lorenzo  |e verfasserin  |4 aut 
700 1 |a Yan, Mingfei  |e verfasserin  |4 aut 
700 1 |a Malik, Jitendra  |e verfasserin  |4 aut 
773 0 8 |i Enthalten in  |t IEEE transactions on pattern analysis and machine intelligence  |d 1979  |g PP(2024) vom: 26. Juli  |w (DE-627)NLM098212257  |x 1939-3539  |7 nnas 
773 1 8 |g volume:PP  |g year:2024  |g day:26  |g month:07 
856 4 0 |u http://dx.doi.org/10.1109/TPAMI.2024.3381075  |3 Volltext 
912 |a GBV_USEFLAG_A 
912 |a SYSFLAG_A 
912 |a GBV_NLM 
912 |a GBV_ILN_350 
951 |a AR 
952 |d PP  |j 2024  |b 26  |c 07