王尔烈纪念馆坐落在辽阳古城西门里王尔烈故居“翰林府”。“翰林府”在1991年复建中被辽阳人民政府公布为市级重点文物保护单位。
“翰林府”原为南北两院，中间有道路相隔复建后布局有所变化，为东西向两进院落，在门向东，占地面积3250平方米，仿清式瓦房32间。目前，该馆的陈列分三部分：一是王尔烈生陈列：该陈列以详实的历史资料与息息相关的实物，来展现王尔烈的家世出身、求读科考、入仕为官及致仕回籍等一生的经历与事迹；二是王尔烈诗书艺术：专题陈列。共计展出王尔烈不同时期的墨迹、科考试卷及文章诗词几十余件，通过该陈列使观众来感受与领略“关东第一才子”的艺术风采；三是王尔烈故居复原陈列：该陈列按历史原貌恢复了王尔烈致仕回籍后举家生活的部分场景，有客厅、书房、起居室等，试图以此使观众对王尔烈本人及当时的官宦家庭的日常生活、习俗，有一个更为直观的了解。
这座翰林府第在建筑布局上，不同于封建时代那种对称封闭式官宦人间的公馆，府第庭院并不大，东西两院，房屋20余间。西院为住宅，东院为书房、花园。门朝南开，门上有上马石、影壁，一间小门楼，外挂“太史第”，内挂“传胪”两匾，蓝地金字，由大学士王杰题写。
门里第一趟5间前厅，房脊左右斜插“钢刹寿”，表示为官显赫。第二趟5间后堂，是祭拜祖宗之所，堂里收藏王而烈画像和谱书，王尔烈七十和其母九十大寿两架寿屏，在夹壁墙里收藏，作为王氏世代传家之宝。现在，两架寿屏，珍藏在辽阳博物馆。
乾隆三十六年（1771年），二甲头名进士，授翰林院编修，通政使司参议，为官几十年，曾参与篡修《四库全书》，并出任“三通馆”篡修和江南乡试主考。他一生流芳于世的传说很多，号称辽东才子。
今天，为弘扬历史文化，在翰林府旧地建王尔烈纪念馆，占地面积9200平方米，建筑面积1060平方米，房屋32间。现在积极进行筹备步陈，将其家世、生平业绩、科举乡会试朱卷、《四库全书》纂修以及书法诗文等，通过文物和史料陈列出来。
