Дмитрий Антонович Панов был любителем, ценителем и знатоком книги. Об этом свидетельствуют устные воспоминания бывших работников института и библиотеки, его практическая деятельность по комплектованию фонда библиотеки ШГПИ. Он уделял большое внимание пополнению книжного фонда библиотеки института, созданию условий для самостоятельных занятий студентов. Всего за 2 года (1960-1962) были открыты читальные залы вначале на 100, затем на 350 посадочных мест. Быстрыми темпами рос и книжный фонд: с 22 тысяч в 1953 году до 235 тысяч экземпляров в 1969 году.
Новую литературу заказывали по «Книжной летописи», получали по системе «Книга-почтой», закупали в книжном магазине города. И нельзя не отметить, что Д. А. Панов, понимая, что без настоящей научной библиотеки у института нет будущего, не жалел финансовых средств на приобретение литературы. Он, бывая в командировках, не считаясь с личным временем, зачастую сам отбирал новую литературу в книжных магазинах, киосках, букинистических магазинах различных городов страны. Лично просматривал всю новую литературу, поступающую в библиотеку, знакомился с выходящими новинками по “Книжной летописи”, другим источникам библиографической информации.
Дмитрий Антонович с каким-то особым благоговением говорил о КНИГЕ. Благодаря книге, он, как и многие другие, состоялся как ученый. Свою личную библиотеку Дмитрий Антонович начал собирать во время учебы в Пермском учительском институте. «Учился я страшно настойчиво. Я впервые почувствовал интерес к науке, многого я не знал, поэтому день и ночь я включался в занятия по книгам, по учебникам в кабинете. Занятия меня увлекали… В целом, я за годы учёбы и первые годы работы в средней школе в Лебяжьем собрал значительную библиотечку”, – вспоминал он. Будучи уже в Шадринске, он пополнял свою библиотеку новинками научной литературы, журналами по языкознанию, справочными изданиями. Когда в 1971 г. Д.А. Панов уезжал из Шадринска, то упаковывать библиотеку ему помогали сотрудники библиотеки. Об этом рассказывала библиограф Лидия Степановна Шалькова. Предположительно, уже тогда в библиотеке Д.А. Панова насчитывалось несколько тысяч томов.
Д.А. Панов продолжал активно пополнять свою библиотеку после завершения своей преподавательской деятельности. Судя по датам издания книг, он продолжал приобретать книги в перестроечные 90-е годы XX века, когда русскому читателю стали доступны тексты, ранее запрещенные. Такие, как томики Осипа Мандельштама “Полон музыки, музы и муки” (Ленинград, 1991), Николая Гумилева “Стихотворения и поэмы” (Москва, 1990), Арсения Тарковского “Благословенный свет” (Санкт-Петербург, 1993). Среди литературных образцов стоит упомянуть редкие издания 1930-1950 годов: книги серии “Библиотека поэта” 1930-х гг. (произведения А. Одоевского, В. Тредиаковского, М. Ломоносова, А. Сумарокова), фольклорное издание “Новины Марфы Семеновны Крюковой” в записи Викторина Попова (Москва, 1939), сборник Владимира Даля “Пословицы русского народа” (Москва, 1957), произведения зауральских авторов Сергея Васильева “Лирика и сатира” (Курган, 1955) и Якова Власова “На берегах Исети” (Курган, 1952).
Еще при жизни Д.А. Панов высказывал пожелание передать свое книжное собрание в Шадринский пединститут. В январе 2013 г. его вдова Алевтина Алексеевна, кандидат филологических наук, доцент Челябинского государственного университета любезно пригласила сотрудников библиотеки для отбора книг для передачи в библиотеку ШГПИ. Поразило то, что Дмитрием Антоновичем уже было подготовлено два стеллажа, заполненные ценнейшими трудами по филологии, которые он завещал обязательно увезти в Шадринск. Что и было сделано.
В фонд библиотеки ШГПИ из библиотеки Д.А. Панова, по данным учета, принято 1021 печатное издание, 851 название, из них учебных – 184 экземпляра, художественной литературы – 90, научной – 747.