Các nhà sản xuất bút chì lần đầu tiên được chính thức công nhận tại thành phố hoàng gia của Nuremberg vào khoảng năm 1660. Nhiều thợ thủ công cũng đã thành lập các cửa hàng ở các làng xung quanh, đặc biệt là ở Stein, trong vùng Marquisate của Ansbach. Ở đây những người thợ thủ công không phải chịu sự kiểm soát chặt chẽ như ở Nuremberg, vì vậy họ có một lợi thế cạnh tranh khá tốt. Một trong số đó là người thợ đóng đồ gỗ Kaspar Faber. Lúc đầu, ông làm việc cho các thương gia địa phương, nhưng trong thời gian rảnh rỗi ông đã sản xuất bút chì cho riêng mình. Chẳng mấy chốc ông trở nên thành công đến nỗi ông đã có thể tự lập nghiệp. Từ những khởi đầu khiêm tốn đó, công ty đã phát triển nhanh chóng và được biết đến trên toàn thế giới.

Sau khi Kaspar qua đời, con trai ông là Anton đã tiếp quản công việc kinh doanh đang hoạt động rất tốt. Ông đã mua một mảnh đất ngoài rìa Stein, và trong vài năm ông đã xây dựng thành một nhà máy sản xuất có quy mô. Địa điểm này vẫn là trụ sở của A.W. Faber-Castell cho đến ngày nay. Năm 51 tuổi, Anton Wilhelm giao cho người con duy nhất của mình, Georg Leonhard. Nơi đây đã được ghi nhận như là một nhà máy sản xuất bút chì và công ty vẫn còn mang tên viết tắt của ông.

Georg Leonhard tiếp tục điều hành công ty trong thời điểm khó khăn về mặt chính trị và kinh tế, nhưng không thể tránh khỏi sự thất bại trong kinh doanh. Bút chì của ông vẫn được sản xuất bằng cách sử dụng các phương pháp thông thường, trong khi một phương pháp sản xuất đầu chì mới đã được phát hiện ở Pháp. Ông không thể cạnh tranh với bút chì "rare English" được làm từ chất liệu than chì Cumberland tốt nhất. Tuy nhiên, ông nhận ra rằng kinh nghiệm học từ nước ngoài sẽ giúp cho tương lai của công ty, do đó ông đã để con trai ông Lothar và Johann đi du học. Và tại các thành phố tiến bộ ở London và Paris, con trai cả của ông Lothar đã phát triển ý tưởng rằng trong vòng vài năm tới sẽ đưa nhà máy Stein đứng vào hàng ngũ của một công ty quốc tế.

Người đàn ông 22 tuổi Lothar Faber trở về nhà sau khi cha ông qua đời vào năm 1839. Với một ý chí mạnh mẽ, ông đã theo đuổi một mục tiêu đầy tham vọng: "đứng lên vị trí cao nhất bằng cách làm mọi thứ tốt nhất dù ở bất cứ đâu trên thế giới". Ông hiện đại hóa nhà máy sản xuất và sử dụng nguyên liệu thô hạng nhất từ mỏ than chì ở Siberia. Ông mở các cửa hàng chất lượng hàng đầu và độc quyền để trưng bày các sản phẩm của mình, đóng dấu "A.W. Faber "- và do đó những dụng cụ viết có thương hiệu đầu tiên được ra đời.

Khi tiếp quản doanh nghiệp, Lothar không tốn quá nhiều thời gian để hiện đại hóa sản xuất. Ông xây những tòa nhà mới, sáng sủa và thoáng mát để tạo điều kiện làm việc lành mạnh hơn và khuyến khích nhân viên. Yếu tố giới tính được tách biệt một cách nghiêm túc: công việc nặng như chế biến đất sét, than chì và gỗ được giao cho nam giới, trong khi đánh bóng, đóng dấu và đóng gói bút chì chỉ dành cho phụ nữ.