var allAttributes = jQuery('.class').map(function() { /* example: .class */
  return jQuery(this).data('id'); /* example: id */ 
}).get();

/* Returns all attributes witin an array like: ["1", "2", "3", "4"] */
console.log(allAttributes);