Γεννημένος το 1798, πήρε το όνομά του από τον πατέρα του, τον μεγαλύτερο αδελφό της Τζέιν, Τζέιμς, αλλά η οικογένεια τον αποκαλούσε με το μεσαίο του όνομα Έντουαρντ. Η μητέρα του ήταν η Μαίρη Λόιντ, αδελφή της στενής φίλης της Τζέιν, Μάρθα. Είχε δύο αδελφές, μια μεγαλύτερη ετεροθαλή αδελφή, την Άννα, από τον πρώτο γάμο του πατέρα του, και μια μικρότερη αδελφή, την Καρολάιν. Όπως και η Τζέιν, ο Έντουαρντ πέρασε τα πρώτα 25 χρόνια της νεότητάς του στο Στίβεντον, αφού ο πατέρας του Τζέιμς κληρονόμησε τα προς το ζην από τον πατέρα του, Αιδεσιμότατο Τζορτζ Όστεν, όταν αυτός αποσύρθηκε στο Μπαθ. Όταν η Τζέιν αργότερα μετακόμισε στο Τσότον, ήταν αρκετά κοντά για να επισκέπτεται συχνά το Στίβεντον. Ο Έντουαρντ θεωρούνταν γοητευτικός από τους άλλους και εκτιμήθηκε ιδιαίτερα από τον διευθυντή του στα νιάτα του. Όταν ο Έντουαρντ ήταν ακόμα στο σχολείο, του αποκαλύφθηκε το μυστικό ότι η θεία του Τζέιν ήταν η συγγραφέας των βιβλίων «Περηφάνια και Προκατάληψη» και «Λογική και Ευαισθησία». Η είδηση ότι η θεία Τζέιν ήταν συγγραφέας ώθησε τον Έντουαρντ και τις αδερφές του Άννα και Καρολάιν να γράψουν και να της ζητήσουν συμβουλές. Στις αρχές της 70ής δεκαετίας του, ο Έντουαρντ δημοσίευσε τα απομνημονεύματά του για την αγαπημένη του θεία Τζέιν.